通过RocketMQ事务消息实现分布式事务
在日益复杂的分布式系统中,确保数据一致性成为一大挑战。本方案利用RocketMQ强大事务消息能力,确保跨服务事务的高可靠与最终一致性,同时还实现了事务处理的高效执行,是构建高性能、高可用分布式系统的关键路径。
基于云消息队列RocketMQ版分布式事务消息与传统XA事务方案对比 RocketMQ凭借其低延迟、高吞吐,以及对分布式事务的原生支持,能够在微服务架构中无缝集成,简化开发难度,同时提升系统整体的韧性和扩展性。传统XA事务 云消息队列RocketMQ版分布式事务消息 性能不足 传统XA事务往往需要在多个数据库或服务之间协调,事务提交...
金融分布式架构SOFAStack
阿里云金融分布式架构SOFAStack为金融用户提供全栈式的基础架构能力,是集项目管理、微服务开发、发布部署、监控运维、容灾高可用等全栈式解决方案,助力客户应用轻松转型分布式架构,保证风险安全的同时帮助业务需求敏捷迭代,支撑金融业务创新,开发人员学习成本最多可降低92%、应用开发效率可最多提升80%、运维人力成本最多可节省90%
蚂蚁金服自主研发的金融级分布式事务中间件,保障在大规模分布式环境下业务活动的最终一致性.实现任务的分布式处理,并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理.帮助企业统一管理对内外开放的 API,为网络隔离的系统间提供高性能、高安全、高可靠的通信,同时保障...
来自: 云产品
消息队列 RocketMQ 版
云消息队列 RocketMQ 版是基于 Apache RocketMQ 构建的分布式消息中间件,广泛用于异步解耦、削峰填谷等场景。可支撑千万级并发、万亿级数据洪峰,更稳定,更安全。
提供丰富的消息类型,满足各种严苛场景下的高级特性需求,当前支持的消息类型涵盖普通消息、顺序消息(全局顺序/分区顺序)、分布式事务消息、定时消息/延时消息.安全可控,满足企业集成风险控制.以消息主题、订阅组的粒度,对每个资源都进行严格的访问控制,确保运维操作安全性;全面支持阿里云 RAM 主子账号、黑白名单、...
来自: 云产品
全局事务服务GTS
全局事务服务用于处理分布式环境下高性能事务一致性问题。可以与DRDS、RDS、MySQL、PostgreSQL等数据源,EDAS、Dubbo及其他RPC框架,MQ消息队列等中间件产品配合使用,轻松实现分布式数据库事务、多库事务、消息事务、服务链路级事务及各种组合。
支持跨数据库分布式事务模式、跨服务的分布式事务消息队列分布式事务.跨数据库分布式事务.系统库、分表后,跨库事务几乎无法避免,GTS可以让应用轻松具备跨库事务处理能力.跨服务的分布式事务.提供跨库、跨服务的事务支持,实现业务链路级别的分布式事务.消息队列分布式事务.在多次调用消息系统的场景中,通过GTS应用可...
来自: 云产品
轻量消息队列(原 MNS)
轻量消息队列(原 MNS)是一款易集成、高并发、可弹性扩展的轻量消息队列服务。轻量队列模型、按量后付费的计费模式、自动适应高并发的弹性可扩展能力,让开发者低成本快速构建分布式、松耦合系统,高效地传递数据和通知消息。
【高级特性】事务消息全新升级,解决分布式事务最终一致性的最佳实践.高可用松耦合架构设计.通过上、下游业务系统的松耦合设计,即便下游子系统(如物流、积分等)出现不可用甚至宕机,都不会影响到核心交易系统的正常运转;灵活适应业务的快速增长.应业务要求新增业务系统时,不会影响基础的技术架构改动,也不会影响其他...
来自: 云产品
中间件
阿里云中间件产品支撑了淘宝、天猫、盒马、菜鸟、高德等阿里巴巴集团核心业务,整合了阿里云计算、存储、网络等基础产品,服务百万企业与开发者,助力系统稳定高效运行。
相关产品 微服务引擎 MSE 最佳实践 Soul 云原生网关最佳实践 编程猫 编程猫通过使用阿里云提供的云消息队列 RocketMQ 作为系统的消息总线来实现系统的解藕,削峰填谷,分布式事务,数据复制与广播等功能。相关产品 云消息队列 RocketMQ 版 最佳实践 RocketMQ 助力编程猫构建稳定的业务系统 伟东云教育 借助云拨测,伟东云...
来自: 云产品
新版产品集合页
基于丰富的产品,将计算、存储、网络、数据库、大数据、人工智能等最新产品技术与场景深度融合,为开发者打造稳定可靠的云基础设施以及云原生的开发环境。
云消息队列 Kafka 版消息队列 Kafka 版是阿里云基于 Apache Kafka 构建的高吞吐量、高可扩展性的分布式消息队列服务,广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等场景,是大数据生态中不可或缺的产品之一,阿里云提供全托管服务,用户无需部署运维,支持极致弹性,更专业、更可靠、更安全。...
来自: 云产品
表格存储Tablestore
表格存储Tablestore是阿里云自研的面向海量结构化数据存储的Serverless分布式数据库,它可提供低成本、高性能的存储方案,同时也可提供稳定与极致的数据服务。
分布式LSM存储引擎,每秒百万消息写入,毫秒级同步库拉取.帮助某IM工具实现了核心消息系统的全面重构,提升了扩展性和安全性。支撑了疫情期间持续的数据峰值,节省成本60%以上.大数据计算服务 MaxCompute.智能家居中如智能床中提供的睡眠健康管理,会采集睡眠中多项数据检测数据,帮助深度了解睡眠质量、睡眠状态等详细信息...
来自: 云产品
阿里邮箱协同办公解决方案
阿里邮箱源自于云计算技术,具有高稳定高可用性弹性扩展的容器化技术架构,实现安全,稳定,智能、高效的企业邮箱应用,方案具有公有云SaaS服务、本地独立部署,全栈国产化部署等多种构建方式,与钉钉无缝集成实现便捷、互通、高效的统一协同办公体验
与钉钉天然集成,实现邮件与钉钉的组织架构、通讯录、日历、钉盘、消息、音视频、Ding 等能力无缝集成.全球畅联的企业邮箱服务.依托阿里云全球化数据中心、专线网络、智能 DNS 解析、高信誉度 IP 和智能投递等技术,有效地解决海外邮件收发网络链路长、IP 信誉低、RDNS 反向检查容易失败等问题.图文卡片(支持一行2、3、4)...
来自: 解决方案
云存储网关CSG
阿里云云存储网关CSG是一款数据存储管理工具,以对象存储为后端存储。为企业应用提供文件挂载和数据共享服务。可灵活部署,无缝对接企业应用,并支持数据海量拓展和冷热分层。
主备架构双机实例,主备节点位于不同服务器实现秒级高可用,支持链接服务器、分布式事务、变更数据捕获等高级特性,涵盖 SQL Server 标准版和企业版.高可用版基础上增加只读实例,主实例与只读实例自动同步数据,提升七倍以上读性能,可实现RPO为零的数据可靠性,支持 SQL Server 企业版.3层安全防护,十项安全合规认证.云...
来自: 云产品
云上高并发系统改造
云上高并发系统改造
场景描述 随着业务的发展,系统并发压力越来越大,如何 进行系统改造以满足高并发场景的业务需求成 为了一个技术难题。本实践抽象于客户的实际场 景,提供高并发下系统改造的理论指导和部分实 操演示。主要适用于以下场景: 1.系统并发压力大,需要进行系统应用改造。 2.数据层并发压力大,需进行分库分表改造。 3.数据库数据量巨大,亟待分库分表解决查询 和写入瓶颈的场景。 方案优势/解决问题 1.在水平扩展阶段,我们除了通过SLB做负载 均衡外,我们可以通过SLB下挂nginx的方 式,增加负载均衡侧的可扩展性 2.在数据库拆分阶段,在做好数据规划后,我 们借助DTS进行数据迁移,通过DRDS将 RDS MySQL的数据拆分到多个分库和分 表中。 产品列表 专用网络VPC 负载均衡SLB 云服务器ECS 数据库RDSMySQL 数据传输服务DTS PrivateZone 分布式关系型数据库DRDS
同时针对传统的企业级应用,因数据不断扩充,急需更强计算能力的在线 事务型数据库,DRDS 近两年在复杂 SQL 优化、并行计算、分布式事务等方面取 得重大进展,可以有效满足此类诉求。注意点:虽然 DRDS支持平滑扩容,但扩容的扩展性有一定的局限性,推荐创建 DRDS 数据库时要考虑未来 2-3年数据的增长预期,做好 RDS 数量...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,数据传输,云解析 PrivateZone,云原生分布式数据库PolarDB-X,云速搭CADT
高弹性,低成本,云消息队列 RabbitMQ实践
随着业务增长,企业对消息队列性能和稳定性的需求提高,运维成本也随之增加。云消息队列 RabbitMQ 版通过架构优化避免了消息积压导致的内存泄漏和服务器故障等稳定性问题,解决了分布式系统中的脑裂难题,并支持弹性伸缩和按量计费,有效降低资源和运维成本。
消息队列 RabbitMQ 版通过架构优化避免了消息积压导致的内存泄漏和服务器故障等稳定性问题,解决了分布式系统中的脑裂难题,并支持弹性伸缩和按量计费,有效降低资源和运维成本。高弹性,低成本,云消息队列 RabbitMQ实践 随着业务增长,企业对消息队列性能和稳定性的需求提高,运维成本也随之增加。云消息队列 RabbitMQ ...
通过PAI-灵骏分布式训练和部署Llama 2模型
灵骏支持业界各类流行的开源大语言模型,包括Llama2系列、Bloom系列、Falcon系列、GLM/ChatGLM系列,以及领域大模型galactica等的高效训练和部署。本方案整体可用于企业样本标注、创意文本生成、智能对话助手、文本类创作辅助等场景。
训练效率、性价比提升 大模型训练只需简单配置即可自动分布式并发执行,优化的计算、网络、通信和存储架构提高资源利用率,加快模型训练速度,大幅缩减训练时间和成本 架构与部署 通过PAI-灵骏分布式训练和部署Llama 2模型 本方案实现了大模型开发全链路打通,流程全面覆盖训练到部署各环节,简化大模型应用,加速其在业务...
灵活配置,高效执行,快速集成分布式任务调度
企业级应用中经常会遇到数据定时处理、文件处理、报表生成等定时处理的任务,对于任务配置和执行率有较高要求,本文介绍如何利用SchedulerX来实施企业级定时任务的调度与管理,为定时任务提供高效、稳定和灵活的解决方案。
在线部署 适用客户 有托管任务管理需求 需要处理大规模数据处理任务 实现复杂任务编排与多样化任务类型支持的场景 方案优势 为什么选择 SchedulerX 阿里云分布式任务调度服务(SchedulerX)通过高可用性、高可靠性、强大的分布式架构和丰富的调度策略,为企业提供了一种灵活、高效、安全的任务调度解决方案。高可用性与高...
基于函数计算FC实现阿里云Kafka消息轻量级ETL处理
基于函数计算FC实现阿里云Kafka<em>消息</em>轻量级ETL处理
在大数据ETL场景,Kafka是数据的流转中心,Kafka中的数据一般是原始数据,可能存在多种数据混杂的情况,需要进一步做数据清洗后才能进行下一步的处理或者保存。利用函数计算FC,可以快速高效的搭建数据处理链路,用户只需要关注数据处理的逻辑,数据的触发,弹性伸缩,运维监控等阿里云函数计算都已经做了集成,函数计算FC也支持多种下游,OSS/数据库/消息队列/ES等都可以自定义的对接
(这里有异步调用和同步调用两种方式,为了能快速消费 ,这里选择异步调用,并且两种调用方式的正文负载大小不同,同步调用为 32MB,异步调用为 128KB)触发器启用状态:勾选 批量推送:默认关闭。(可以选择开启,然后可以设置批量推送的条数,批量推送 间隔,根据需求选择是否批量推送)推送格式:RawData(也可以...
来自: 最佳实践 | 相关产品:对象存储 OSS,函数计算,消息队列 Kafka 版
基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
基于函数计算FC实现企业级权限精准控制Kafka跨实例<em>消息</em>同步
应用场景 在大数据场景,企业的Kafka实例可能存在多种情况,比如使用阿里云Kafka服务,可能是自建开源Kafka,或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例,在这个前提下Kafka实例之间可能会需要消息同步的情况: 同帐号容灾场景:比如Kafka实例都是阿里云Kafka,但是Kafka实例会有主备之分,需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾:这类场景比如主Kafka是阿里云Kafka,备Kafka是IDC开源自建Kafka,或者是其他云上的Kafka。 不同业务之间消息同步:因为现在的业务通常不会是信息孤岛,都需要消息互通,所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例,并且这两个Kafka实例归属不同的RAM角色,有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题(重试机制,容错机制,死信队列等)。 大幅提升构建消息同步架构的效率,降低构建复杂度问题。
(这里有异步调用和同步调用两种方式,为了能快速消费 ,这里选择异步调用,并且两种调用方式的正文负载大小不同,同步调用为32MB,异步调用为128KB) 触发器启用状态:勾选  批量推送:默认关闭。(可以选择开启,然后可以设置批量推送的条数,批量推送 间隔,根据需求选择是否批量推送) 推送格式:RawData(也...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,函数计算,消息队列 Kafka 版
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
基于函数计算FC实现阿里云Kafka<em>消息</em>内容控制MongoDB DML操作
在大数据ETL场景,将Kafka中的消息流转到其他下游服务是很常见的场景,除了常规的消息流转外,很多场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后,会自动触发函数计算中的函数,接收到消息,对消息内容做判断,然后再操作MongoDB。用户可以对提供的默认函数代码做修改,来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数计算和MongoDB控制台做少量配置即可。
l 云消息队列 Kafka 版:云消息队列 Kafka 版是阿里云提供的分布式、高吞吐、可扩展的 队列服务。云消息队列 Kafka 版广泛用于日志收集、监控数据聚合、流式数据处理、在 线和离线分析等大数据领域,已成为大数据生态中不可或缺的部分。l 云数据库 MongoDB 版(ApsaraDB for MongoDB):完全兼容 MongoDB 协议,基于...
来自: 最佳实践 | 相关产品:函数计算,消息队列 Kafka 版,云数据库 MongoDB版
消息队列 Confluent 版
云消息队列 Confluent 版是阿里云与 Apache Kafka 项目创始团队所创立的 Confluent 公司合作,基于 Apache Kafka 核心能力提供的企业级全托管消息队列服务,旨在为企业提供集成消息流式处理与大数据系统的一站式解决方案。
消息队列 Confluent 版是阿里云与 Apache Kafka 项目创始团队所创立的 Confluent 公司合作,基于 Apache Kafka 核心能力提供的企业级全托管消息队列服务,旨在为企业提供集成消息流式处理与大数据系统的一站解决方案.云消息队列 Confluent 版正式发布!云消息队列 Confluent 版正式发布!立即购买(新用户首月1折).谢...
来自: 云产品
SLS数据入湖Kafka最佳实践
SLS数据入湖Kafka最佳实践
应用和数据分散在多云或混合云,在面对多云/混合云这样大的趋势下,数据无法进行统一的聚合、分析处理和导出等,本方案给出了在多云/混合云场景下,构建通过标准的Kafka协议和托管服务,SLS可以连接Kafka数据入湖导入,然后进行统一的海量数据的集中存储、智能转储、聚合分析查询等。
 云消息队列Kafka版:是阿里云基于ApacheKafka构建的高吞吐量、高可扩 展性的分布式消息队列服务,广泛用于日志收集、监控数据聚合、流式数据处 理、在线和离线分析等场景,是大数据生态中不可或缺的产品之一,阿里云提 供全托管服务,用户无需部署运维,更专业、更可靠、更安全. Serverless应用引擎SAE...
来自: 最佳实践 | 相关产品:云服务器ECS,日志服务(SLS),Serverless 应用引擎,消息队列 Kafka 版
RocketMQ性能压测快速方案
RocketMQ性能压测快速方案
在客户对产品性能存疑或者给客户进行POC验证时可以用本实践来快速完成性能测试。
 云消息队列RocketMQ版:是阿里云基于ApacheRocketMQ构建的低延迟、高 并发、高可用、高可靠的分布式消息、事件、流”统一处理平台,面向互联网分布 应用场景提供微服务异步解耦、流式数据处理、事件驱动处理等核心能力。文档版本:20240506 6RocketMQ性能压测快速方案 前置条件 前置条件 在进行本文操作之前,您需要...
来自: 最佳实践 | 相关产品:云服务器ECS,弹性公网IP,消息队列 RocketMQ 版,云速搭
< 1 2 3 >
共有3页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用