当自建Kafka集群迁移上云时,你需要评估待迁移自建Kafka集群的信息,如集群流量情况、磁盘容量和类型、分区数量等,以便您选购合适的 云消息队列 Kafka 版 实例类型,云消息队列 Kafka 版 提供规格评估功能,为迁移上云的自建Kafka集群选择...
本文介绍如何在 云消息队列 Kafka 版 控制台完成实例升配,升级的配置项包括规格类型、流量规格、磁盘容量及分区规格等。前提条件 实例处于 服务中 或 未部署 状态。实例中没有进行中的Topic引流任务。注意事项 升级实例配置会引发集群逐台...
本文说明 云消息队列 Kafka 版 支持的规格类型,以便您根据实际业务需求选择合适的实例规格。规格类型 说明 单可用区:指服务与数据仅部署在一个可用区。单可用区存在可用区级别的故障时,服务完全不可用,数据丢失的风险。若已经选择单...
云消息队列 Kafka 版 提供多种实例规格类型,您可以根据自建迁移情况选择实例规格。实例的流量规格、磁盘大小、分区数量计算如下。其他实例信息,请参见 实例规格。实例规格类型 流量规格 磁盘大小 分区数量 非Serverless实例 标准版(高写...
云消息队列 Kafka 版 不再支持按照Topic规格购买实例,存量的按照Topic规格购买的实例,也将转换为按照分区规格购买类型。无论您的已有实例是按照Topic规格购买还是按照分区规格购买,目前 升降配 只支持按照分区规格变更。同时,后台会对...
云消息队列 Kafka 版 不再支持按照Topic规格购买实例。若您的已有实例是按照Topic规格购买 Topic说明如下:不同的流量规格对应不同的Topic或分区数量上限。在默认分区数的基础上,每增购1个Topic,对应增加16个分区。例如,您购买了Topic...
前提条件 您已购买 云消息队列 Kafka 版 Serverless实例,且实例处于 服务中 状态。规格配置说明 配置项 含义 变更方式 流量规格 发送能力预留 消息生产预留规格,生产弹性上限为此数值的2倍,超出生产弹性上限的部分将会被限流。方式一:...
自2022年8月26日起,云消息队列 Kafka 版 不再支持按照Topic规格购买实例。若您的已有实例是2022年8月26日之前购买的,规格内包含的Topic数和分区数如下所示:标准版(高写版)公共云 流量规格 网卡读流量峰值(MB/s)网卡写流量峰值(MB/s...
云消息队列 Kafka 版 系统架构 如 云消息队列 Kafka 版的系统架构 所示,一个 云消息队列 Kafka 版 集群包括Producer、Kafka Broker、Group、ZooKeeper。图 1.云消息队列 Kafka 版 的系统架构 Producer 通过push模式向 云消息队列 Kafka 版...
云消息队列 Kafka 版 是阿里云提供的分布式、高吞吐、可扩展的消息队列服务。云消息队列 Kafka 版 广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域,已成为大数据生态中不可或缺的部分。前置概念 阅读本文前,...
云消息队列 Kafka 版 规定了阿里云向客户提供的阿里云 云消息队列 Kafka 版 的服务可用性等级指标及赔偿方案。如需查看 云消息队列 Kafka 版 的服务可用性等级指标及赔偿方案,请参见 云消息队列 Kafka 版服务等级协议。
无法ping通云消息队列 Kafka 版的接入点 不在同一可用区内的ECS实例如何访问云消息队列 Kafka 版实例 能否通过公网访问云消息队列 Kafka 版实例?如何通过代理访问云消息队列 Kafka 版实例 经典网络是否必须要选择172.16.0.0/12网段?不同...
云消息队列 Kafka 版 提供全托管、免运维的Connector,用于 云消息队列 Kafka 版 和其他阿里云服务之间的数据同步。本文介绍Connector支持的数据同步任务的类型、使用流程、使用限制以及跨地域数据同步。重要 云消息队列 Kafka 版 的...
项目 云消息队列 Kafka 版 Apache Kafka 差异原因 Topic 创建方式 云消息队列 Kafka 版 控制台 云消息队列 Kafka 版 OpenAPI 服务端自动创建(默认不开启)Kafka CLI Kafka Manager 服务端自动创建 云消息队列 Kafka 版 默认通过阿里云控制...
当您想要将A地域的 云消息队列 Kafka 版 上的业务无损迁移至B地域,或者创建实例后想复制已有实例元数据(Topic、Group)配置时,您可以使用 云消息队列 Kafka 版 提供的迁移工具将某个 云消息队列 Kafka 版 实例的Topic、Group迁移至另...
新增 计费规则 2022-08-26 功能名称 功能描述 功能类型 相关文档 云消息队列 Kafka 版 支持按照分区规格购买实例 支持按照分区规格购买 云消息队列 Kafka 版 实例,规格内将赠送一定量的分区。不再支持按照Topic规格新购实例。新增 使用...
云消息队列 Kafka 版 支持0.11~3.x版本客户端,建议您保持服务端和客户端版本一致,即保持客户端版本和 云消息队列 Kafka 版 实例的大版本一致。您可以在 云消息队列 Kafka 版 控制台的 实例详情 页面获取 云消息队列 Kafka 版 实例的大...
根据计费方式的特点,云消息队列 Kafka 版 资源支持的退款情况如下:包年包月的 云消息队列 Kafka 版 资源如需退款,可在控制台上退订实例。详细信息,请参见 实例生命周期管理。按小时后付费的 云消息队列 Kafka 版 资源在使用后才支付...
前提条件 您已购买并部署 云消息队列 Kafka 版 实例,且该实例必须满足以下条件:项目 说明 状态 服务中 版本 云消息队列 Kafka 版 实例的版本必须满足以下任意一种要求:大版本为0.10.2,且小版本为最新版本。大版本为2.2.0或2.6.2。说明 ...
本文为您介绍 云消息队列 Kafka 版 客户端消费消息的常见问题。客户端首次接入云消息队列 Kafka 版时出现异常的排查方法 为什么消费客户端频繁出现Rebalance?消费端从服务端拉取不到消息或拉取消息缓慢 为什么不推荐使用Sarama Go客户端...
欠费影响 如果您购买的为包年包月实例,实例到期后,您账户下的 云消息队列 Kafka 版 服务会切换为 已过期 状态,即您将不能再继续使用 云消息队列 Kafka 版 服务。如果您购买的为按小时后付费实例或Serverless实例,当您的账户余额不足以...
本文旨在以简单明了的方式引导您快速上手 云消息队列 Kafka 版。操作流程 根据网络类型不同,快速入门的操作流程有所不同,详情请参见 云消息队列 Kafka 版快速入门操作流程。图 1.云消息队列 Kafka 版 快速入门操作流程 操作步骤 具体操作...
云消息队列 Kafka 版 提供全托管免运维服务,您无需登录机器。云消息队列 Kafka 版 是全托管的,由 云消息队列 Kafka 版 专业团队进行运维保障,您无需登录机器。集群的一些基础信息会通过监控告警进行透传。
如果您首次使用 云消息队列 Kafka 版,您可以参考快速入门文档。快速入门文档 云消息队列 Kafka 版快速入门 云消息队列 Confluent 版快速入门
本文介绍 云消息队列 Kafka 版 的产品动态、产品简介及产品计费。云消息队列 Kafka 版 动态与公告 产品简介 产品计费 云消息队列 Confluent 版 什么是云消息队列 Confluent 版?产品计费
订阅者最佳实践 客户端首次接入云消息队列 Kafka 版时出现异常的排查方法 为什么消费客户端频繁出现Rebalance?消费端从服务端拉取不到消息或拉取消息缓慢 为什么不推荐使用Sarama Go客户端收发消息?使用云消息队列 Kafka 版时出现消息...
云消息队列 Kafka 版 提供全托管、免运维的实例迁移服务,支持把自建Kafka集群的元数据(Topic和Group配置信息)和消息数据同步到 云消息队列 Kafka 版 实例,迁移完成后 云消息队列 Kafka 版 实例的元数据与自建Kafka集群的元数据保持一致...
使用云消息队列 Kafka 版时客户端的报错及解决方案 使用云消息队列 Kafka 版时出现“Not authorized to access group”的错误信息
详细信息 客户端首次接入云消息队列 Kafka 版时如果出现异常,您可以通过以下三个方面进行排查:网络连通问题:通常有如下几种情况可能会导致网络不通,客户端无法连接云消息队列 Kafka 版的服务端。ECS实例(客户端)与云消息队列 Kafka ...
如需使用SDK接入 云消息队列 Kafka 版 收发消息,您需要根据实例的网络环境类型来配置接入点。本文介绍如何在 云消息队列 Kafka 版 控制台查看接入点。背景信息 云消息队列 Kafka 版 提供以下类型的接入点:默认接入点:适用于在VPC环境...
步骤一:规格评估 云消息队列 Kafka 版 提供的规格评估功能,根据自建Kafka集群的信息,如集群流量情况、磁盘容量和类型等,评估并推荐需要的 云消息队列 Kafka 版 实例规格。具体操作请参见 评估规格。步骤二:购买实例 根据评估得出的...
开通 云消息队列 Kafka 版 服务需要使用阿里云其他云产品中的资源,因此,您需要先授权 云消息队列 Kafka 版 访问您所拥有的其他阿里云资源。前提条件 注册阿里云账号并完成实名认证。详情请参见 注册阿里云账号。背景信息 为了方便您快速...
本文介绍如何通过创建SLS Source Connector,通过 事件总线EventBridge 将数据从日志服务SLS导出至 云消息队列 Kafka 版 实例的Topic。前提条件 云消息队列 Kafka 版 为 云消息队列 Kafka 版 实例开启Connector。更多信息,请参见 开启...
在控制台上可以查看和设置监控告警功能,但是在2018年11月以前部署的 云消息队列 Kafka 版 集群不支持上报监控告警数据,因此需要升级旧版本的 云消息队列 Kafka 版 实例集群,让它可以上报监控告警数据。若您要升级您的 云消息队列 Kafka ...
在使用自建Kafka集群时,当您希望业务的成本更低、弹性更强、可靠性更高时,您可以将自建Kafka集群迁移上至 云消息队列 Kafka 版,云消息队列 Kafka 版 提供全托管、免运维的服务可以让您只需专注于业务开发,无需部署运维。注意事项 迁移...
本文介绍 云消息队列 Kafka 版 SDK、支持的多语言SDK。SDK简介 SDK(Software Development Kit)即软件开发工具包,包含示例Demo、库文件、编译工具链以及编译脚本等,不需要开发者进行任何其他的配置,直接可以在SDK对应目录环境下,进行...
本文为您介绍 云消息队列 Kafka 版 客户端发送消息的常见问题。哪里可以找到发送最佳实践?如何进行发送消息的测试?使用客户端发送消息后,如何确定是否发送成功?生产者会建立多少个到Broker的连接?Java客户端设置回调是否会影响消息...
步骤一:规格评估 云消息队列 Kafka 版 提供的规格评估功能,根据自建Kafka集群的信息,如集群流量情况、磁盘容量和类型等,评估并推荐需要的 云消息队列 Kafka 版 实例规格。具体操作请参见 评估规格。步骤二:购买实例 根据评估得出的...
详细信息 以非公网的方式访问云消息队列 Kafka 版实例时,必须满足以下两个条件:ECS实例与云消息队列 Kafka 版实例在同一VPC网络实例内。如果ECS实例和云消息队列 Kafka 版实例不在同一个VPC网络实例内,请根据实际情况,重新创建或部署...
本文为您介绍使用 云消息队列 Kafka 版 时出现 Not authorized to access group 错误信息的原因和解决办法。问题描述 使用云消息队列 Kafka 版时出现“Not authorized to access group”的错误信息。问题原因 没有创建Consumer Group时会...