消息队列 Kafka托管服务

_相关内容

Prometheus监控

云消息队列 Kafka 的所有指标数据已保存到您的阿里云 可观测监控 Prometheus 版 中,您可以通过 可观测监控 Prometheus 版 提供的API将 云消息队列 Kafka 的仪表盘的指标数据接入到本地自建Grafana中。具体操作,请参见 使用HTTP API...

查看接入点

如需使用客户端连接 云消息队列 Kafka 收发消息,您需要根据客户端的网络环境类型及传输的安全需要来配置接入点。默认接入点适用于在保密性较高的VPC环境收发消息;SASL接入点适用于无需对传输链路加密但需对消息收发鉴权;同时需要链路...

计费概述

说明 云消息队列 Kafka 的Connector组件依赖于 事件总线,云消息队列 Kafka 不会额外收取费用。事件总线 的计费说明,请参见 计费说明。同时,阿里云不承诺Connector的SLA,使用Connector所依赖的其他产品的SLA和费用说明请以对应...

RAM主子账号授权

背景信息 企业A开通了 云消息队列 Kafka 服务,该企业需要员工操作 云消息队列 Kafka 服务所涉及的资源,例如实例、Topic、Consumer Group。由于每个员工的工作职责不一样,需要的权限也不一样。企业A的需求如下:出于安全或信任的...

为什么Group不存在但能消费消息

问题现象 我在 云消息队列 Kafka 控制台 上,未查看到对应的Group,但此Group下却有消费线程在消费消息。可能原因 如果客户端使用 assign 方式消费消息,那么即使不创建Group,也可能消费消息。如果客户端使用 subscribe 方式消费消息,...

能否通过公网访问云消息队列 Kafka 实例?

网络类型为公网/VPC的 云消息队列 Kafka 实例支持通过公网访问。云消息队列 Kafka 提供VPC和公网/VPC两种网络类型的实例。如需通过公网访问,请购买公网/VPC实例。如果已购买VPC实例,请升级实例配置,变更VPC实例为公网/VPC实例。更...

能否通过公网访问云消息队列 Kafka 实例?

网络类型为公网/VPC的 云消息队列 Kafka 实例支持通过公网访问。云消息队列 Kafka 提供VPC和公网/VPC两种网络类型的实例。如需通过公网访问,请购买公网/VPC实例。如果已购买VPC实例,请升级实例配置,变更VPC实例为公网/VPC实例。更...

监控报警问题

本文为您介绍 云消息队列 Kafka 监控报警的常见问题。为什么需要升级实例来支持监控告警功能?报警项状态显示数据不足怎么办?如何监控开源Apache Kafka?为什么阿里云账号能看到监控信息而RAM用户看不到监控信息?为什么不能登录部署...

客户端发送问题

哪里可以找到发送最佳实践?如何进行发送消息的测试?使用客户端发送消息后,如何...使用云消息队列 Kafka 时客户端的报错及解决方案 无法ping通云消息队列 Kafka 的接入点 开启幂等功能,发送消息报“Cluster authorization failed”错误

是否支持Compact的日志清理策略?

开源版本为2.2.0或以上的 云消息队列 Kafka 实例支持Compact的日志清理策略。开源版本为2.2.0或以上的 云消息队列 Kafka 实例支持Compact的日志清理策略。如需升级实例的开源版本以支持Compact的日志清理策略,请参见 升级大版本。

Kafka实例小版本升级是否可以推迟或取消

本文为您介绍 云消息队列 Kafka 实例小版本升级过程中遇到的问题及相关说明。实例小版本升级是否可以推迟?云消息队列 Kafka 实例版本升级时会创建一条调度任务,如需推迟升级,可通过修改该调度任务的执行时间来实现:登录 云消息...

为Connector开启公网访问

前提条件 为Connector开启公网访问前,请确保您的 云消息队列 Kafka 实例已开启Connector。更多信息,请参见 开启Connector。开启公网访问 为Connector开启公网访问的方案如下:为Connector开启公网访问的操作流程如下:为部署了 云消息...

Filebeat

本文介绍如何将 云消息队列 Kafka 接入Filebeat。Filebeat Filebeat是用于转发和集中日志数据的轻量级传输程序。Filebeat可以监听指定的日志文件或位置,从中收集日志事件并将其转发到Elasticsearch或Logstash进行索引。Filebeat的工作...

是否支持延迟消息

和开源Apache Kafka一样,云消息队列 Kafka 同样不支持延迟消息。

为什么Group管理页面的Group变多了?

问题现象 在 云消息队列 Kafka 控制台 的 Group 管理 页面查看您Kafka集群上所有存在的Group时,显示的Group数量多于您手动创建的数量。可能原因 若Group的 自动创建 栏为 否,说明此Group创建于 云消息队列 Kafka 控制台 的 Group ...

如何快速使用云消息队列 Kafka 的Java SDK收发消息

六分钟上手 云消息队列 Kafka 。文档教程 快速入门

云消息队列Kafka版接入阿里Elasticsearch

消息队列 Kafka 云消息队列 Kafka 是阿里云提供的分布式、高吞吐、可扩展的消息队列服务。云消息队列 Kafka 版 广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域,已成为大数据生态中不可或缺的部分。更...

无法ping通云消息队列 Kafka 的接入点

问题描述 无法ping通云消息队列 Kafka 的接入点。本地客户端无法telnet Kafka或提示连接超时(Connection timed out)。问题原因 为了保证安全,云消息队列 Kafka 集群默认禁ping。连接VPC接入点时,客户端与Kafka不在同一VPC下。解决...

无法ping通云消息队列 Kafka 的接入点

问题描述 无法ping通云消息队列 Kafka 的接入点。本地客户端无法telnet Kafka或提示连接超时(Connection timed out)。问题原因 为了保证安全,云消息队列 Kafka 集群默认禁ping。连接VPC接入点时,客户端与Kafka不在同一VPC下。解决...

【通知】V1版本实例下线公告

变更内容 为了给您提供更优质、更稳定的产品服务云消息队列 Kafka V1版本计划于2025年11月30日下线,详情可查看产品公告和通知(短信、邮件、站内信、风险告警)。现就下线计划为您做如下提醒:2026年05月31日起,阿里云将不再提供...

自由使用Group

云消息队列 Kafka Serverless实例支持代码写入直接创建Group,无需在控制台手动创建,方便使用提升效率。注意事项 自由使用的Group的数量需遵循 云消息队列 Kafka 实例的规格限制,否则Group不能被自由使用。具体信息,请参见 使用...

创建SLS Source Connector

本文介绍如何通过创建SLS Source Connector,通过 事件总线EventBridge 将数据从日志服务SLS导出至 云消息队列 Kafka 实例的Topic。前提条件 云消息队列 Kafka 云消息队列 Kafka 实例开启Connector。更多信息,请参见 开启...

开发参考

本文介绍 云消息队列 Kafka 的SDK和API及Terraform的支持情况,供您进行对应的开发操作。开发参考 API参考指南 SDK参考 Terraform

实践教程

针对各种业务需求,云消息队列 Kafka 提供相关的实践教程,您可以根据本文查看适合您业务的实践教程文档。实践教程 最佳实践 生态对接

Topic的存储有哪些类型?

云存储和Local存储。云消息队列 Kafka 实例支持云存储和Local存储。详情请参见 存储引擎对比。

VPC接入

如果仅需要在VPC网络接入 云消息队列 Kafka ,您可以购买并部署VPC实例。前提条件 已授予 云消息队列 Kafka 访问其他云服务资源的权限。具体信息,请参见 步骤一:获取访问授权。已搭建VPC网络。具体操作,请参见 创建和管理专有网络...

公网和VPC接入

如果需要同时在VPC网络和公网接入 云消息队列 Kafka ,您需要购买并部署公网/VPC实例。前提条件 已授予 云消息队列 Kafka 访问其他云服务资源的权限。具体信息,请参见 获取访问授权。已搭建VPC网络。具体操作,请参见 创建和管理专有...

如何获取部署实例时需要的VPC信息?

在 交换机 页面,查看以下信息:交换机 实例ID/名称 专有网络 可用区 说明 请根据该页面的可用区(A~G)在 云消息队列 Kafka 控制台中选择对应的可用区(A~G)。例如,某VPC交换机(vSwitch)显示在 可用区B,那么在 云消息队列 Kafka...

为什么Group的状态一直处于“删除中”?

问题现象 在 云消息队列 Kafka 控制台 的 Group 管理 页面删除Group后,此Group的状态一直处于 删除中。可能原因 Group中存在活跃的订阅关系。Group上有消费线程在提交新的消费位点。解决方案 登录 云消息队列 Kafka 控制台,查看...

Filebeat发送失败问题

问题现象 在 云消息队列 Kafka 控制台 的 Topic 管理 页面,您已成功创建Topic,但使用Filebeat向该Topic发送消息却出现 Request was for a topic or partition that does not exist on this broker.的错误提示。可能原因 Filebeat向...

Filebeat发送失败问题

问题现象 在 云消息队列 Kafka 控制台 的 Topic 管理 页面,您已成功创建Topic,但使用Filebeat向该Topic发送消息却出现 Request was for a topic or partition that does not exist on this broker.的错误提示。可能原因 Filebeat向...

Logstash

本文介绍如何将 云消息队列 Kafka 接入Logstash。Logstash Logstash是开源的服务器端数据处理管道,能够同时从多个数据源采集数据,然后对数据进行转换,并将数据写入指定的存储中。Logstash的数据处理流程如下:输入:采集各种格式、...

使用Kafka Connect将SQL Server数据同步至云消息队列 ...

本教程介绍如何使用Kafka Connect的Source Connector将SQL Server的数据同步至 云消息队列 Kafka 。前提条件 在开始本教程前,请确保您已完成以下操作:已下载SQL Server Source Connector。具体信息,请参见 SQL Server Source ...

如何进行发送消息的测试?

本文为您介绍在 云消息队列 Kafka 控制台如何快速进行消息发送测试。快速体验消息收发 登录 云消息队列 Kafka 控制台,在左侧导航栏,单击 实例列表。在顶部菜单栏,选择地域,然后在 实例列表 页面单击目标实例名称。在左侧导航栏,...

为什么在控制台看不到Group的订阅关系?

问题现象 您已启动某个Group的消费线程,但在 云消息队列 Kafka 控制台 的 Topic 详情 页面的 订阅关系 页签,查不到Topic被Group订阅的信息,或者在 Group 详情 页面的 消费状态 页签,查不到该Group订阅的Topic信息。可能原因 客户端...

报警项状态显示数据不足怎么办?

可能原因 您使用的 云消息队列 Kafka 实例版本过旧,请将实例的小版本升级至最新版本以支持报警数据上报。解决方案 登录 云消息队列 Kafka 控制台。在 概览 页面的 资源分布 区域,选择地域。在 实例列表 页面,单击目标实例名称。在...

计费常见问题

本文为您介绍 云消息队列 Kafka 计费的常见问题。为什么购买了按小时后付费实例或Serverless实例后不使用也要收费?按照Topic规格购买的实例,如何转换为按照分区规格购买类型?为什么按流量峰值收费?按流量峰值收费的依据是什么?为...

监控报警问题

为什么需要升级实例来支持监控告警功能?报警项状态显示数据不足怎么办?...为什么不能登录部署云消息队列 Kafka 的机器?删除Group后仍然收到消息堆积的告警信息 为什么告警堆积量和控制台堆积量不一致?监控数据相关问题

创建Kafka Source Connector

本文介绍如何在 云消息队列 Kafka 控制台创建流入任务,将指定 云消息队列 Kafka 实例中的数据快速导入至另外的 云消息队列 Kafka 实例中。前提条件 您已购买 云消息队列 Kafka 实例,且实例处于 服务中 状态。具体步骤,请...

为什么限制Topic总数(分区总数)?

Topic总数(分区总数)太多会使集群性能和稳定性急剧下降。云消息队列 Kafka 的存储和协调机制是以分区为粒度的,分区数太多,会导致存储碎片化严重,集群性能和稳定性都会急剧下降。具体详情请 提交工单 联系技术人员进行咨询。
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用