分布式消息队列

_相关内容

应用场景

下文以支付转账为场景说明消息队列如何实现以下功能:异步解耦 分布式事务的数据一致性 削峰填谷 异步解耦 传统处理方式 最常见的一个场景是支付转账成功后,需要生成交易双方的账单,并更新用户权益,发送用户通知。传统的做法有以下两种...

概述

SOFAStack 消息队列(SOFAStack MQ,简称 SOFAMQ)是基于 Apache RocketMQ 构建的分布式消息中间件,并与金融分布式架构 SOFAStack 深度集成,为分布式应用系统提供异步解耦和削峰填谷的能力,支持事务消息、顺序消息、定时消息等多种消息...

产品优势

消息队列 Kafka 版 100%兼容开源,支持0.10.x~2.6.x的开源版本,无需代码改造无缝迁移上云,体验全托管、免运维的分布式消息队列服务。开箱即用 云消息队列 Kafka 版 100%兼容开源,使您无缝迁移上云。兼容开源:云消息队列 Kafka 版 100...

基于Flink的资讯场景实时数仓

部署架构图 选用的产品 云消息队列 Kafka 版 云消息队列 Kafka 版 是阿里云基于Apache Kafka构建的高吞吐量、高可扩展性的分布式消息队列服务,广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等,是大数据生态中不可或缺的...

基础术语

事务消息 Transactional message 消息队列提供类似 X/Open XA 的分布事务功能,通过消息队列的事务消息能达到分布式事务的最终一致。详情请参见 事务消息。顺序消息 Ordered message 消息队列提供的一种按照顺序进行发布和消费的消息类型,...

QueueMessage

MNS会尽量让高优先级的消息先出队列,正是因为分布式消息队列的一些特性不能百分之百保证高优先级的消息先被消费。消息类型 延时消息 这类消息发送到队列后,需要经过DelaySeconds指定的时间后才可被消费。发送(batch)send message请求时...

版本说明

0.6(2020-01-10)发布 SOFAStack 消息队列,是基于 Apache RocketMQ 构建的分布式消息中间件,并与金融分布式架构 SOFAStack 深度集成。支持多种消息类型:普通消息、定时消息、分区顺序消息、事务消息。详见 消息类型。提供专业、可靠、...

消息堆积

除了异步解耦功能,消息队列还有挡住前端数据洪峰的重要功能,以此保证后端系统的稳定性。这要求消息队列具有一定的消息堆积能力。消息队列能支持 10 亿级别的消息堆积,不会因为消息堆积导致性能明显下降。问题描述 在消息队列控制台的...

概述

分布式链路跟踪 SOFAStack 分布式链路跟踪是面向分布式架构、微服务架构与云原生架构的应用可观察性(Observability)的金融级解决方案。通过分布式链路跟踪,运维人员、开发人员和架构师能看清楚复杂的大规模微服务架构下的应用及服务之间...

应用场景

对于此种业务场景,分布式事务可以将会员服务、消息队列组成分布式事务模型,保证事务原子性。然后通过消息队列的可靠特性,确保消息一定能够被邮件服务消费,从而使得会员与邮件服务在同一个分布式事务中。同时,邮件服务也不会影响会员...

操作链路概述

本文将引导您快速体验 SOFAStack 消息队列,从创建资源、配置接入点到使用 SDK 收发消息。具体操作步骤如下:创建资源 创建工作空间 创建 Topic 创建 Group ID 获取 AK(AccessKey ID)和 SK(AccessKey Secret)获取接入配置 发送消息 ...

消息查询

SOFAStack 消息队列提供了三种消息查询的方式,分别是按 Message ID、Message Key 以及 Topic 查询。操作步骤 登录 SOFAStack 控制台。在左侧导航栏,选择 中间件>消息队列>消息查询。在 消息查询 页面,您可单击以下任一页签,然后按页面...

配置相关

消息队列配置相关的常见问题如下:消息队列消息在服务器保存多长时间?消息队列消息 Body 的长度限制是多少?消息队列客户端如何设置消费线程数?消息队列消息在服务器保存多长时间?存储的消息最多保存 3 天,超过 3 天未消费的消息会被...

产品架构

本文介绍 SOFAStack 消息队列的系统部署架构,方便您更好地理解消息队列的高可用性。消息队列在任何一个环境都是可扩展的,生产者必须是一个集群,消息服务器必须是一个集群,消费者也同样。集群级别的高可用,是消息队列跟其他的消息...

10 分钟本地试用公有云消息队列

本节介绍如何快速本地试用公有云消息队列服务。操作步骤 开通消息队列服务。说明 如果已开通服务,可以忽略这一步。如果没有账号,可使用支付宝扫描登录。登录 消息队列产品 页面。在 开通 SOFAMQ 消息队列体验版 页面,单击 确认开通。若...

查看订阅关系

在 SOFAStack 消息队列控制台,您可实时查看 Group ID 和 Topic 之间的订阅关系。本文介绍如何在消息队列控制台查看订阅关系。从 Topic 视角,查看即个 Topic 被哪些 Group ID 订阅了。从 Group 视角,查看某个 Group ID 订阅了哪些 Topic...

订阅消息

本文介绍如何通过 SOFAStack 消息队列的 Java SDK 订阅消息。订阅方式 消息队列支持以下两种订阅方式:集群订阅同一个 Group ID 所标识的所有 Consumer 平均分摊消费消息。例如某个 Topic 有 9 条消息,一个 Group ID 有 3 个 Consumer ...

接口和参数说明

SOFAStack 消息队列提供 Java SDK 实现消息发送与订阅,您可通过本文了解消息发送和订阅相关接口的参数说明。通用参数 参数名 参数说明 ENDPOINT 设置 TCP 协议接入点,从消息队列控制台的 概览>接入配置 获取。INSTANCE_ID 设置实例 ID,...

使用异常

本节将介绍消息队列常见的使用异常问题及相应的解决方案。无法连接 Broker 客户端启动失败,出现“Can not find name server with endpoint”报错 启动 Producer、Consumer 失败,Group ID 重复 主动订阅消息,获取队列列表失败 消息显示 ...

消息重试

本文介绍 SOFAStack 消息队列的消息重试机制和配置方式。顺序消息的重试 对于顺序消息,当消费者消费消息失败后,消息队列会自动不断地进行消息重试(每次间隔时间为 1 秒),这时,应用会出现消息消费被阻塞的情况。因此,建议您使用顺序...

什么是云消息队列 RocketMQ 版?

消息队列 RocketMQ 版 是阿里云基于Apache RocketMQ构建的低延迟、高并发、高可用、高可靠的分布式“消息、事件、流”统一处理平台,面向互联网分布式应用场景提供微服务异步解耦、流式数据处理、事件驱动处理等核心能力。为什么选择云...

事务消息

消息队列 RocketMQ 版 提供的分布式事务消息适用于所有对数据最终一致性有强需求的场景。本文介绍 云消息队列 RocketMQ 版 事务消息的概念、优势、典型场景、交互流程、使用规则以及示例代码。概念介绍 事务消息:云消息队列 RocketMQ 版...

死信队列

当一条消息初次消费失败,消息队列会自动进行消息重试。达到最大重试次数后,若消费依然失败,则表明消费者在正常情况下无法正确地消费该消息。此时,消息队列不会立刻将消息丢弃,而是将其发送到该消费者对应的特殊队列中。在消息队列中,...

日志配置

本文介绍 SOFAStack 消息队列的客户端日志的打印方式,以及默认和自定义配置。打印客户端日志 消息队列的 TCP Java SDK 基于 SLF4J 接口编程。依赖 log4j 或 logback 作为日志实现的示例代码如下所示。方式一:依赖 log4j 作为日志实现...

重置消费位点

在左侧导航栏,选择 中间件>消息队列>Group 管理。单击目标 Group ID 操作列的 重置消费位点,然后在 重置消费位点 对话框配置以下信息:Topic:选择重置消费位点针对的 Topic。重置类型:清除所有堆积消息,从最新位点开始消费:若选择...

API 概览

消息队列提供以下相关 API 接口。Topic 管理 API 描述 CreateMqSofamqTopic 创建 Topic DeleteMqSofamqTopic 删除 Topic ListMqSofamqTopic 查询 Topic 列表 UpdateMqSofamqTopic 更新 Topic 的读写权限 UpdateMqSofamqTopicRemark 修改 ...

Demo 工程

本文以 TCP 协议下的 Java 为例,提供操作示例帮助您从零开始搭建消息队列测试工程,提供 Spring 和纯 Java 两种使用方式。Demo 工程包含普通消息、顺序消息、事务消息和定时、延时消息的配置以及测试代码。前提条件 安装 IDE。您可以使用 ...

产品优势

消息队列 基于 Apache RocketMQ 构建的金融级分布式消息中间件,为分布式应用系统提供异步解耦和削峰填谷的能力,支持多种消息类型与消费模式,并具备高可靠、高吞吐、低延时等金融级特性。任务调度 提供分布式任务调度框架,实现任务的...

使用限制

SOFAStack 消息队列对某些具体指标进行了约束和规范,在使用过程中请注意不要超过相应的限制值,以免程序出现异常。具体的限制项和限制值请参见下表。限制项 限制值 说明 Topic 名称长度 64 个字符 Topic 名称长度不得超过该限制,否则会...

事务消息

基于 云消息队列 RocketMQ 版 分布式事务消息:支持最终一致性 上述普通消息方案中,普通消息和订单事务无法保证一致的原因,本质上是由于普通消息无法像单机数据库事务一样,具备提交、回滚和统一协调的能力。而基于 云消息队列 RocketMQ ...

SDK 版本说明

本文介绍 SOFAStack 消息队列 Java SDK sofamq-client-all 的各个版本信息,包含 SDK 的发布时间、下载链接以及更新点等。3.1.7(2021-04-10)版本号 发布时间 下载链接 3.1.7 2021-04-10 sofamq-client-all 3.1.7 新特性 集成 Metrics/...

消息队列RocketMQ版是否能保证消息不重复?

绝大多数情况下,消息是不重复的。作为一款分布式消息中间件,在网络抖动、应用处理超时等异常情况下,无法保证消息不重复,但是能保证消息不丢失。

功能特性

SOFAStack 消息队列在阿里云多个地域(Region)提供了高可用消息云服务。单个地域内采用多机房部署,可用性极高,即使整个机房都不可用,仍然可以为应用提供消息发布服务。消息队列提供 TCP 协议语言接入方式,方便应用快速接入消息队列...

应用场景

本文为您介绍 云消息队列 RabbitMQ 版 的应用场景,以便您更好地判断如何在业务中使用 云消息队列 RabbitMQ 版。...通过 云消息队列 RabbitMQ 版 构建分布式缓存,支持实时通知数据变化,有效降低页面响应时间,满足对变更的大量访问需求。

应用场景

下文先以用户注册为场景说明 云消息队列 RocketMQ 版 如何实现以下功能:异步解耦 分布式事务的数据一致性 消息的顺序收发 最后,再以电商的秒杀场景和价格同步场景分别说明 云消息队列 RocketMQ 版 所实现的削峰填谷和大规模机器的缓存...

功能与特性概述

消息队列 RocketMQ 版 的分布式特点和瞬变的网络条件,或者用户应用重启发布的情况下,可能导致消费者收到重复的消息。开发人员应将其应用程序设计为多次处理一条消息不会产生任何错误或不一致性。消息幂等最佳实践请参见 消费幂等。消息...

消息(Message)

Transaction:事务消息,云消息队列 RocketMQ 版 支持分布式事务消息,支持应用数据库更新和消息调用的事务一致性保障。消息队列 定义:实际存储当前消息的队列。更多信息,请参见 队列(MessageQueue)。取值:由服务端指定并填充。消息...

主题(Topic)

Transaction:事务消息,云消息队列 RocketMQ 版 支持分布式事务消息,支持应用数据库更新和消息调用的事务一致性保障。约束:每个主题只支持一种消息类型。行为约束 消息类型强制校验 云消息队列 RocketMQ 版 5.x版本将消息类型拆分到主题...

消息类型

事务消息 事务消息:消息队列提供类似 X/Open XA 的分布式事务功能,通过消息队列事务消息能达到分布式事务的最终一致。半事务消息:暂不能投递的消息,发送方已经成功地将消息发送到了消息队列服务端,但是服务端未收到生产者对该消息的二...

可观测性体系概述

作为一款典型的分布式中间件产品,云消息队列 RocketMQ 版 被广泛应用于业务核心链路中,每条消息都关联着核心业务数据的变化,通过可观测能力及时发现问题、定位问题、解决问题对于业务运行是一项重要的保障能力。本文介绍 云消息队列 ...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用