消息中间件-kafka

_相关内容

产品架构

云消息队列 Kafka 系统架构 如 云消息队列 Kafka 的系统架构 所示,一个 云消息队列 Kafka 集群包括Producer、Kafka Broker、Group、ZooKeeper。图 1.云消息队列 Kafka 的系统架构 Producer 通过push模式向 云消息队列 Kafka ...

云消息队列 Kafka 服务等级协议

云消息队列 Kafka 规定了阿里云向客户提供的阿里云 云消息队列 Kafka 的服务可用性等级指标及赔偿方案。如需查看 云消息队列 Kafka 的服务可用性等级指标及赔偿方案,请参见 云消息队列 Kafka 服务等级协议。

客户端消费问题

本文为您介绍 云消息队列 Kafka 客户端消费消息的常见问题。客户端首次接入云消息队列 Kafka 时出现异常的排查方法 为什么消费客户端频繁出现Rebalance?消费端从服务端拉取不到消息或拉取消息缓慢 为什么不推荐使用Sarama Go客户端...

什么是云消息队列 Kafka

云消息队列 Kafka 是阿里云提供的分布式、高吞吐、可扩展的消息队列服务。云消息队列 Kafka 广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域,已成为大数据生态中不可或缺的部分。前置概念 阅读本文前,...

开源对比

项目 云消息队列 Kafka Apache Kafka 差异原因 Topic 创建方式 云消息队列 Kafka 控制台 云消息队列 Kafka OpenAPI 服务端自动创建(默认不开启)Kafka CLI Kafka Manager 服务端自动创建 云消息队列 Kafka 默认通过阿里云控制...

客户端消费问题

订阅者最佳实践 客户端首次接入云消息队列 Kafka 时出现异常的排查方法 为什么消费客户端频繁出现Rebalance?消费端从服务端拉取不到消息或拉取消息缓慢 为什么不推荐使用Sarama Go客户端收发消息?使用云消息队列 Kafka 时出现消息...

网络问题

无法ping通云消息队列 Kafka 的接入点 不在同一可用区内的ECS实例如何访问云消息队列 Kafka 实例 能否通过公网访问云消息队列 Kafka 实例?如何通过代理访问云消息队列 Kafka 实例 经典网络是否必须要选择172.16.0.0/12网段?不同...

Connector

云消息队列 Kafka 提供全托管、免运维的Connector,用于 云消息队列 Kafka 和其他阿里云服务之间的数据同步。本文介绍Connector支持的数据同步任务的类型、使用流程、使用限制以及跨地域数据同步。重要 云消息队列 Kafka 的...

上迁移Topic和Group

当您想要将A地域的 云消息队列 Kafka 上的业务无损迁移至B地域,或者创建实例后想复制已有实例元数据(Topic、Group)配置时,您可以使用 云消息队列 Kafka 提供的迁移工具将某个 云消息队列 Kafka 实例的Topic、Group迁移至另...

实例支持哪些开源版本?

云消息队列 Kafka 支持0.11~3.x版本客户端,建议您保持服务端和客户端版本一致,即保持客户端版本和 云消息队列 Kafka 实例的大版本一致。您可以在 云消息队列 Kafka 控制台的 实例详情 页面获取 云消息队列 Kafka 实例的大...

评估规格

当自建Kafka集群迁移上云时,你需要评估待迁移自建Kafka集群的信息,如集群流量情况、磁盘容量和类型、分区数量等,以便您选购合适的 云消息队列 Kafka 实例类型,云消息队列 Kafka 提供规格评估功能,为迁移上云的自建Kafka集群选择...

退款说明

根据计费方式的特点,云消息队列 Kafka 资源支持的退款情况如下:包年包月的 云消息队列 Kafka 资源如需退款,可在控制台上退订实例。详细信息,请参见 实例生命周期管理。按小时后付费的 云消息队列 Kafka 资源在使用后才支付...

开启Connector

前提条件 您已购买并部署 云消息队列 Kafka 实例,且该实例必须满足以下条件:项目 说明 状态 服务中 版本 云消息队列 Kafka 实例的版本必须满足以下任意一种要求:大版本为0.10.2,且小版本为最新版本。大版本为2.2.0或2.6.2。说明 ...

操作指南

您可以在 云消息队列 Kafka 控制台创建实例、进行消息收发。云消息队列 Kafka V3系列Serverless实例管理 V2系列实例管理 Topic Group Connector生态集成 迁移 权限管理 云消息队列 Confluent 版 集群资源规格评估 实例管理 权限管理 ...

概述

本文旨在以简单明了的方式引导您快速上手 云消息队列 Kafka 。操作流程 根据网络类型不同,快速入门的操作流程有所不同,详情请参见 云消息队列 Kafka 快速入门操作流程。图 1.云消息队列 Kafka 快速入门操作流程 操作步骤 具体操作...

什么是云消息队列 Kafka

三分钟了解阿里云 云消息队列 Kafka

欠费说明

欠费影响 如果您购买的为包年包月实例,实例到期后,您账户下的 云消息队列 Kafka 服务会切换为 已过期 状态,即您将不能再继续使用 云消息队列 Kafka 服务。如果您购买的为按小时后付费实例或Serverless实例,当您的账户余额不足以...

基本概念

消息可以是网站的页面访问、服务器的日志,也可以是和CPU、内存相关的系统资源信息,但对于 云消息队列 Kafka 消息就是一个字节数组。消息保留时长 在磁盘容量充足的情况下,消息的最长保留时间。磁盘容量不足(即磁盘水位达到85%)时...

实例问题

本文为您介绍 云消息队列 Kafka 实例的常见问题。实例支持哪些开源版本?VPC实例和公网/VPC实例的区别是什么?如何选择实例规格?如何获取部署实例时需要的VPC信息?升级Broker可能产生哪些影响?实例的地域无法变更 云消息队列 Kafka ...

为什么不能登录部署云消息队列 Kafka 的机器?

云消息队列 Kafka 提供全托管免运维服务,您无需登录机器。云消息队列 Kafka 是全托管的,由 云消息队列 Kafka 专业团队进行运维保障,您无需登录机器。集群的一些基础信息会通过监控告警进行透传。

控制台看到的最近消费时间是什么意思?

消息发布到 云消息队列 Kafka 服务器的存储时间。控制台看到的 最近消费时间 是指消息发布到 云消息队列 Kafka 服务器的存储时间。如果消费没有堆积,那么这个时间接近发送时间。

产品概述

本文介绍 云消息队列 Kafka 的产品动态、产品简介及产品计费。云消息队列 Kafka 动态与公告 产品简介 产品计费 云消息队列 Confluent 版 什么是云消息队列 Confluent 版?产品计费

快速入门

如果您首次使用 云消息队列 Kafka ,您可以参考快速入门文档。快速入门文档 云消息队列 Kafka 快速入门 云消息队列 Confluent 版快速入门

产品优势

云消息队列 Kafka 100%兼容开源,支持0.10.x~3.x的开源版本,无需代码改造无缝迁移上云,体验全托管、免运维的分布式消息队列服务。开箱即用 云消息队列 Kafka 100%兼容开源,使您无缝迁移上云。兼容开源:云消息队列 Kafka 100%...

常见问题

网络问题 无法ping通云消息队列 Kafka 的接入点 不在同一可用区内的ECS实例如何访问云消息队列 Kafka 实例 能否通过公网访问云消息队列 Kafka 实例?如何通过代理访问云消息队列 Kafka 实例 经典网络是否必须要选择172.16.0.0/12...

查看接入点

如需使用SDK接入 云消息队列 Kafka 收发消息,您需要根据实例的网络环境类型来配置接入点。本文介绍如何在 云消息队列 Kafka 控制台查看接入点。背景信息 云消息队列 Kafka 提供以下类型的接入点:默认接入点:适用于在VPC环境...

客户端报错

使用云消息队列 Kafka 时客户端的报错及解决方案 使用云消息队列 Kafka 时出现“Not authorized to access group”的错误信息

自建Kafka集群迁移上云

在使用自建Kafka集群时,当您希望业务的成本更低、弹性更强、可靠性更高时,您可以将自建Kafka集群迁移上至 云消息队列 Kafka 云消息队列 Kafka 提供全托管、免运维的服务可以让您只需专注于业务开发,无需部署运维。注意事项 迁移...

客户端首次接入云消息队列 Kafka 时出现异常的排查...

详细信息 客户端首次接入云消息队列 Kafka 时如果出现异常,您可以通过以下三个方面进行排查:网络连通问题:通常有如下几种情况可能会导致网络不通,客户端无法连接云消息队列 Kafka 的服务端。ECS实例(客户端)与云消息队列 Kafka ...

新功能发布记录

本文介绍 云消息队列 Kafka 的产品功能动态及对应的文档。2025-04-17 功能名称 功能描述 功能类型 相关文档 Prometheus监控 云监控 消息在未消费的情况下被删除,导致组的分区消费位点小于最小位点,进而产生消息堆积异常,支持监控及...

步骤一:获取访问授权

开通 云消息队列 Kafka 服务需要使用阿里云其他云产品中的资源,因此,您需要先授权 云消息队列 Kafka 访问您所拥有的其他阿里云资源。前提条件 注册阿里云账号并完成实名认证。详情请参见 注册阿里云账号。背景信息 为了方便您快速...

创建SLS Source Connector

本文介绍如何通过创建SLS Source Connector,通过 事件总线EventBridge 将数据从日志服务SLS导出至 云消息队列 Kafka 实例的Topic。前提条件 云消息队列 Kafka 云消息队列 Kafka 实例开启Connector。更多信息,请参见 开启...

使用ACL功能进行访问控制

背景信息 企业A购买了 云消息队列 Kafka ,企业A希望用户A只能从 云消息队列 Kafka 的所有Topic中消费消息,而不能向 云消息队列 Kafka 的任何Topic生产消息。注意事项 Kafka为公网/VPC类型实例提供默认SASL用户,默认SASL用户仅...

迁移上云

云消息队列 Kafka 提供全托管、免运维的实例迁移服务,支持把自建Kafka集群的元数据(Topic和Group配置信息)和消息数据同步到 云消息队列 Kafka 实例,迁移完成后 云消息队列 Kafka 实例的元数据与自建Kafka集群的元数据保持一致...

正式商用公告

正式商用细则 云消息队列 Kafka 的正式商用细则如下:为提高服务质量和用户体验,云消息队列 Kafka 全部以商用实例方式提供服务。实例的基本规格和定价信息请参见 计费概述。如果您有共享服务需求,可考虑阿里云 云消息队列 RocketMQ...

客户端发送问题

本文为您介绍 云消息队列 Kafka 客户端发送消息的常见问题。哪里可以找到发送最佳实践?如何进行发送消息的测试?使用客户端发送消息后,如何确定是否发送成功?生产者会建立多少个到Broker的连接?Java客户端设置回调是否会影响消息...

为什么需要升级实例来支持监控告警功能?

在控制台上可以查看和设置监控告警功能,但是在2018年11月以前部署的 云消息队列 Kafka 集群不支持上报监控告警数据,因此需要升级旧版本的 云消息队列 Kafka 实例集群,让它可以上报监控告警数据。若您要升级您的 云消息队列 Kafka ...

SDK概述

本文介绍 云消息队列 Kafka SDK、支持的多语言SDK。SDK简介 SDK(Software Development Kit)即软件开发工具包,包含示例Demo、库文件、编译工具链以及编译脚本等,不需要开发者进行任何其他的配置,直接可以在SDK对应目录环境下,进行...

默认配置映射关系

模式 值 云消息队列 Kafka 部分事件$.data.value 轻量消息队列(原 MNS)部分事件$.data.messageBody 云消息队列 RabbitMQ 版 部分事件$.data.body 云消息队列 MQTT 版 部分事件$.data.body 数据传输服务DTS 部分事件$.data 云消息队列 ...

借助工具迁移

本文为您介绍如何使用开源工具,独立完成将自建Kafka集群的数据迁移至 云消息队列 Kafka 实例。迁移流程 注意事项 如果是将阿里云上自建的Kafka集群进行迁移,建议在与自建Kafka集群相同地域购买 云消息队列 Kafka 实例,并在部署时...
< 1 2 3 4 ... 115 >
共有115页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用