分布式队列双总线拿来干啥用

_相关内容

Spring集成

云消息队列 RabbitMQ 版 是集群分布式架构,在 CONNECTION 模式下,创建多个connection可以帮助客户端更好地和集群的多个服务节点连接,更高效地发送和消费消息。参数设置如下:/缓存模式设置为CONNECTION。connectionFactory.setCacheMode...

将云消息队列 Kafka 版的数据迁移至MaxCompute

MaxCompute和DataWorks一起向用户提供完善的数据处理和数仓管理能力,以及SQL、MR、Graph等多种经典的分布式计算模型,能够更快速地解决用户海量数据计算问题,有效降低企业成本,保障数据安全。本教程旨在帮助您使用DataWorks,将 云消息...

开通服务

本节介绍如何开通分布式事务服务。前提条件 已注册阿里云账号,并完成实名认证。操作步骤 开通 SOFAStack 产品服务。使用阿里云账号登录 阿里云官网。在上方菜单栏选择 产品与服务>中间件>金融分布式架构 SOFAStack。在 SOFAStack 产品主页...

功能特性

数据访问代理兼容 MySQL 协议和语法,支持分库分表、平滑扩容、服务升降配、透明读写分离和分布式事务等特性,具备分布式数据库全生命周期的运维管控能力。分库分表 支持 RDS、OceanBase、MySQL 的分库分表。在创建分布式数据库后,只需...

分布式序列问题

分布式序列是否全局唯一 单库单表的分布式序列可以保证生成的序列 ID 全局唯一。分库分表的分布式序列仅保证单个分片的序列 ID 唯一,如果需要确保分库分表的分布式序列全局唯一,可以在序列 ID 中拼接分库分表位,以此保证全局唯一。分布...

分布式事务问题

数据访问代理是否支持分布式事务 数据访问代理支持与分布式事务的集成使用。版本要求:数据访问代理 V2.9.5 或更高版本 分布式事务 V2.5.2 或更高版本 具体配置信息请参考 分布式事务>开发指南>依赖与配置项。在数据访问代理 V2.9.5 之前的...

任务管理高级配置参数说明

1 子任务单机并发数 并行计算 内存网格 网格计算 分布式模型,单台机器并发消费子任务的个数。5 子任务失败重试次数 并行计算 内存网格 网格计算 分布式模型,子任务失败自动重试的次数。0 子任务失败重试间隔 并行计算 内存网格 网格计算 ...

消息检索

当 云消息队列 Kafka 版 控制台提供的按位点查询和按时间查询消息的功能无法满足您搜索消息的需求时,您可以使用 云消息队列 Kafka 版 消息检索功能。消息检索支持按Topic分区、位点范围、时间范围以及消息Key和Value关键字检索。本文介绍...

微消息队列MQTT版推送事件到函数计算

前提条件 您已完成以下操作:事件总线EventBridge 开通事件总线EventBridge并授权 创建自定义总线 函数计算 创建服务 创建函数 创建日志项目和日志仓库 配置SLS触发器 收集导入日志 云消息队列 RocketMQ 版 开通消息队列服务并授权 创建...

什么是事件总线EventBridge

事件总线EventBridge 是阿里云提供的一款无服务器事件总线服务,支持阿里云服务、自定义应用、SaaS应用以标准化、中心化的方式接入,并能够以标准化的CloudEvents 1.0协议在这些应用之间路由事件,帮助您轻松构建松耦合、分布式的事件驱动...

天弘基金

业务挑战 在大规模分布式应用中,曾经的单体应用按横向和纵向的维度被拆分到集群的各个节点之中,为了解决服务及数据调用的问题,引入了分布式服务框架、分布式消息集群、分布式文件存储、分布式缓存等一系列服务。应用的拆分及分布式中间...

什么是蚂蚁链分布式身份服务 DIS

蚂蚁链分布式身份服务 DIS(Decentralized Identity Service),是一种基于区块链的身份管理方案,提供实体身份的创建、验证和管理等一整套功能,实现更规范化地管理和保护实体数据,同时保证信息流转的真实性和效率,解决了跨机构的身份...

使用Canal将MySQL的数据同步至云消息队列 Kafka 版

本教程介绍如何使用Canal将MySQL的数据同步至 云消息队列 Kafka 版。背景信息 Canal的主要用途是基于MySQL数据库增量日志解析,提供增量数据订阅和消费。Canal伪装自己为MySQL Slave,向MySQL Master发送dump请求。MySQL Master收到dump...

依赖与配置项

分布式事务不仅支持 SOFABoot 框架,也支持纯 Spring 的应用场景。本文将分别介绍针对不同的服务框架所要预先完成的依赖与配置项操作。无论是事务发起方还是参与者均需要完成本文的依赖与配置项操作。环境要求 必须使用 JDK 1.7 或以上版本...

集成概述

死信队列 支持 消息服务MNS 和 云消息队列 RocketMQ 版 等服务做死信队列。支持 云消息队列 Kafka 版 做死信队列。重试策略 统一支持。部分支持。依赖Kafka资源 不额外依赖。系统自动或手动创建任务位点Topic、任务配置Topic、任务状态...

什么是云消息队列 Confluent 版?

云消息队列 Confluent 版 阿里云和Apache Kafka的原厂创始公司Confluent合作,在ApacheKafka能力基础上支持消息流式处理以及大数据系统的集成的一站解决方案—— 云消息队列 Confluent 版。您可以购买适合您生产集群规模的企业版Kafka ...

产品概述

阿里云流数据处理平台数据总线DataHub是流式数据(Streaming Data)的处理平台,提供对流数据的发布(Publish),订阅(Subscribe)和分发功能,让您可以轻松构建基于流式数据的分析和应用。数据总线 DataHub服务可以对各种移动设备,应用...

云消息队列 RocketMQ 版

本文介绍如何在 云消息队列 RabbitMQ 版 控制台创建消息流入任务,将 云消息队列 RocketMQ 版 中的数据快速导入至 云消息队列 RabbitMQ 版。前提条件 您已购买 云消息队列 RocketMQ 版 实例,且实例处于 服务中 状态。具体步骤,请参见 ...

应用场景

基于蚂蚁集团中台战略及架构的最佳实践,将企业级公共能力进行抽象,形成以客户服务、运营服务、分布式架构为基础的业务中台体系,实现开放、可扩展、组件化、分布式的业务架构,支持业务快速、高效、低成本创新,满足互联网场景化快速多变...

基于事件总线EventBridge实现钉钉新增成员信息入库

本文介绍如何使用 事件总线EventBridge 集成钉钉连接器,将钉钉上成员信息变更投递到数据库。背景信息 钉钉连接平台通过可视化拖拽配置、一键订阅等方式,可以简单高效地实现钉钉、企业内部系统、其他厂商系统与钉钉第三方企业应用之间数据...

仪表盘

借助于阿里云ARMS Prometheus监控服务和Grafana的指标存储和展示能力,云消息队列 RocketMQ 版 提供可实时进行数据统计的仪表盘功能。该功能可帮助您一站、全方位、多维度地统计和观测指标,进而快速了解业务的运行状态。本文介绍仪表盘...

管理Kafka自定义连接器

登录 云消息队列 Kafka 版 控制台,在 概览 页面的 资源分布 区域,选择地域。在左侧导航栏,选择 Connector生态集成>消息流入(Source)。在 消息流入(Source)页面,单击 创建任务。在 消息流入创建 面板中,完成以下配置,单击 确定。...

消息队列RocketMQ版是否能保证消息不重复?

绝大多数情况下,消息是不重复的。作为一款分布式消息中间件,在网络抖动、应用处理超时等异常情况下,无法保证消息不重复,但是能保证消息不丢失。

Terraform

什么是Terraform 基本功能 Terraform是IT基础架构自动化编排工具,可以代码管理维护IT资源。更多信息,请参见 什么是Terraform。Terraform的命令行接口CLI(Command Line Interface)提供一种简单机制,用于将配置文件部署到阿里云或...

消息堆积和延迟问题

本文主要介绍 云消息队列 RocketMQ 版 TCP协议的Java客户端使用过程中,经常会出现的消息堆积和消息延迟的问题。通过了解 云消息队列 RocketMQ 版 客户端的消费原理和消息堆积的主要原因,帮助您可以在业务部署前更好的规划资源和配置,或...

概述

数据清洗/数据流出 消息集成提供了强大的、界面化的数据ETL(Extract-Transform-Load)配置能力,方便快捷地对完成上报、进入到消息队列的数据进行清洗、格式化、数据格式转换等操作。并支持将完成ETL处理的数据转储到下游。Serverless...

概述

数据清洗/数据流出 消息集成提供了强大的、界面化的数据ETL(Extract-Transform-Load)配置能力,方便快捷地对完成上报、进入到消息队列的数据进行清洗、格式化、数据格式转换等操作。并支持将完成ETL处理的数据转储到下游。Serverless...

开源MQTT迁移至云消息队列 MQTT 版

云端SDK可用于云端分布式应用部署,天然支持共享订阅,并提供消息收发、消息订阅、客户端上下线事件通知等能力,目前支持Java、Go语言的SDK。更多信息,请参见 云端开发概述。云端SDK支持在 云消息队列 MQTT 版 服务端层面进行订阅发布,而...

JMS概述

JMS使分布式应用能够以松耦合、可靠、异步的方式进行通信。云消息队列 RabbitMQ 版 JMS库支持 JMS 1.1。云消息队列 RabbitMQ 版JMS库 云消息队列 RabbitMQ 版 JMS库是 云消息队列 RabbitMQ 版 提供的JMS接口。JMS应用只需变更少量代码,...

存储引擎对比

在创建Topic时,您可以为 云消息队列 Kafka 版 选择云存储或Local存储引擎。云存储依托阿里云云盘算法、低延迟、低成本、弹性伸缩能力更好,适用于大多数场景;若有特殊需求,例如Compact、幂等、事务、分区顺序消息等,建议您选择Local...

步骤三:创建资源

当使用 云消息队列 Kafka 版 进行消息收发时,您需要在已成功部署的Kafka实例中创建Topic和Group资源。生产者需要将消息发送至指定Topic,消费者通过订阅Topic获取消息进行消费。消费者消费消息时,需要指定Group订阅对应的Topic。Group和...

事件驱动架构

什么是事件驱动架构 事件驱动架构是一种松耦合、分布式的驱动架构,收集到某应用产生的事件后实时对事件采取必要的处理后路由至下游系统,无需等待系统响应。使用 事件总线EventBridge 可以构建各种简单或复杂的事件驱动架构,以标准化的...

连接查询

说明 统计值基于分布式数据采集组件收集,可能存在延迟和误差。按Client ID查询 您可以指定Client ID查询客户端的连接信息和订阅关系。登录 云消息队列 MQTT 版 控制台,在顶部菜单栏选择要查询的地域,例如 华东1(杭州)。在左侧导航栏,...

作为Input接入

云消息队列 Kafka 版 可以作为Input接入Filebeat。本文说明如何在VPC环境下通过Filebeat从 云消息队列 Kafka 版 消费消息。背景信息 在开始本教程前,请确保您已完成以下操作:购买并部署 云消息队列 Kafka 版 实例。具体操作,请参见 VPC...

作为Input接入

云消息队列 Kafka 版 可以作为Input接入Logstash。本文说明如何在VPC环境下通过Logstash从 云消息队列 Kafka 版 消费消息。前提条件 在开始本教程前,请确保您已完成以下操作:购买并部署 云消息队列 Kafka 版 实例。具体操作,请参见 VPC...

如何快速测试云消息队列 Kafka 版服务端是否正常?

在创建并部署 云消息队列 Kafka 版 实例后,您可以使用 云消息队列 Kafka 版 控制台直接发送消息,快速测试服务端是否正常。前提条件 您已创建并部署 云消息队列 Kafka 版 实例,且实例处于 服务中 状态。操作流程 快速测试 云消息队列 ...

作为Output接入

云消息队列 Kafka 版 可以作为Output接入Logstash。本文说明如何在VPC环境下通过Logstash向 云消息队列 Kafka 版 发送消息。前提条件 购买并部署 云消息队列 Kafka 版 实例。具体操作,请参见 VPC接入。下载并安装Logstash。具体操作,请...

作为Input接入

云消息队列 Kafka 版 可以作为Input接入Filebeat。本文说明如何在公网环境下通过Filebeat从 云消息队列 Kafka 版 消费消息。背景信息 在开始本教程前,请确保您已完成以下操作:购买并部署 云消息队列 Kafka 版 实例。具体操作,请参见 ...

作为Input接入

云消息队列 Kafka 版 可以作为Input接入Logstash。本文说明如何在公网环境下通过Logstash从 云消息队列 Kafka 版 消费消息。前提条件 在开始本教程前,请确保您已完成以下操作:购买并部署 云消息队列 Kafka 版 实例。具体操作,请参见 ...

作为Output接入

云消息队列 Kafka 版 可以作为Output接入Logstash。本文说明如何在公网环境下通过Logstash向 云消息队列 Kafka 版 发送消息。前提条件 在开始本教程前,请确保您已完成以下操作:购买并部署 云消息队列 Kafka 版 实例。具体操作,请参见 ...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用