Trino（即原PrestoSQL）是一个开源的分布式SQL查询引擎，适用于交互式分析查询。EMR-3.44.0和EMR-5.10.0版本开始改用社区正式名称Trino，之前各版本控制台显示为Presto，内核其实是Trino，使用时请注意区分。基本特性 Trino使用Java语言...
GTS 已经全面兼容和支持开源分布式事务 Seata，实现与 Seata 的协议兼容，支持使用 Seata 的应用无缝迁移到云上，基于 GTS 提供的服务高效运行。Seata 简介 Simple Extensible Autonomous Transaction Architecture（Seata）是一款开源的...
Dubbo：开源分布式服务框架 H2C：开放的网络通信框架。实现原理 SOFARPC 中的远程调用是通过服务模型来定义服务调用双方的。服务分为：服务消费方：对应 RPC 的调用端，可以理解为调用客户端，即“引用(Reference)”。服务提供方：对应 RPC...
开源项目 2018 年 4 月，蚂蚁集团宣布开源 SOFAStack 金融级分布式架构。得益于社区的信任和支持，目前已经累积超过 3.4 万的 Star 数和超过 100 家企业用户，并持续向打造金融级云原生多个技术领域的标杆努力（数据统计截止时间为 2020 月...
有开源产品同样可以实现分布式任务调度，本文介绍SchedulerX和开源产品的对比，帮助您更好的了解分布式任务调度和SchedulerX。产品名称 定时调度 工作流 分布式任务 白屏化任务治理 任务类型 报警监控 使用成本 Quartz Cron 不支持 不支持 ...
HDFS（Hadoop Distributed File System）是一种Hadoop分布式文件系统，具备高度容错特性，支持高吞吐量数据访问，可以在处理海量数据（TB或PB级别以上）的同时最大可能的降低成本。HDFS适用于大规模数据的分布式读写，特别是读多写少的场景...
YARN是一个分布式的资源管理系统。YARN是Hadoop系统的核心组件，主要功能包括负责在集群中的资源管理，负责对作业进行调度运行以及监控。基本概念 名称 描述 ResourceManager 负责集群的资源管理与调度，为运行在YARN上的各种类型作业分配...
PelicanDT（Pelican Distributed Test），是阿里云提供的一款针对 Linux 系统的测试环境模拟工具，是主要针对分布式应用提供的集成测试解决方案，用于帮助开发者简单、高效地测试分布式应用。PelicanDT 现已 开源。PelicanDT 具有以下特点...
分布式表不存储数据，仅仅是底层表的一个View，但可以在多个服务器上进行分布式查询。本例中使用随机函数rand()，表示数据会随机写入各个节点的本地表。CREATE TABLE demo.hits_all on CLUSTER cluster_emr AS demo.hits_local ENGINE=...
本文为您介绍P2P分布式下载缓存的使用方法。前提条件 EMR环境：已在E-MapReduce上创建EMR-3.42.0及后续版本、EMR-5.6.0及后续版本的集群，且选择JINDODATA服务，详情请参见 创建集群。非EMR环境：具体请参见 JindoFSx存储加速系统使用指南...
操作步骤 步骤一：进入开源应用市场 登录 企业级分布式应用服务EDAS控制台。在 概览 页面，单击 开源应用 页签。步骤二：搜索与筛选应用 在 开源应用 页面中，支持通过以下方式查找所需应用：搜索框：输入应用名称、关键词（例如：n8n、AI...
对于数据库来说，答案是明确的：开源+分布式，开源解决成本问题，分布式解决性能和容量问题。同年11月11日，TDDL（Taobao Distributed Data Layer）首次发布，开创了分布式数据库中间件+开源数据库应用在高并发交易系统的先河。当时的TDDL...
在分布式任务调度领域中，Quartz、ElasticJob和XXL-JOB是广受欢迎的开源解决方案。为了更深入地理解分布式任务调度技术并全面评估SchedulerX在此领域的优势与特点，本文将对比SchedulerX与这些主流开源产品的特性与功能。项目 Quartz ...
传统企业在开源的分布式架构技术上人才储备较少。因此，目前不少的传统企业都会尝试开源与商业化结合的方案，在保持自主可控的基础上，进行分布式架构的落地探索。趋势四：中国力量与全球玩家同场竞技 由于我们有极其庞大的人口基数和世界...
快速使用ClickHouse OSS与ClickHouse间的数据导入与导出 常见问题 Trino Trino原名PrestoSQL，是一个开源的分布式SQL查询引擎，适用于交互式分析查询。Trino 通过命令行方式连接Trino 常见问题 Flink Flink是一个流式的数据流执行引擎，...
数据库 GoldenDB分布式数据库 V6 金篆信科有限责任公司 数据库 MariaDB 10.5.22 开源组件 数据库 MongoDB 3.6.8 开源组件 数据库 MySQL 8.0.36 开源组件 数据库 PostgreSQL 13.16 开源组件 数据库 Redis 6.2.7 开源组件 大数据平台 阿里云...
Spring Cloud SOFA 集成了蚂蚁集团开源的分布式链路追踪系统 SofaTracer。SofaTracer 遵循 OpenTracing 规范，通过一个全局的 TraceId 将分布在各个服务节点上的同一次请求串联起来，并支持主动上报的方式提供给服务端进行展示，达到透视化...
Dubbo Dubbo是一个开源的分布式服务框架，提供高性能和透明化的RPC远程服务调用方案。ECS 云服务器 ECS（Elastic Compute Service）是一种简单高效、处理能力可弹性伸缩的计算服务。帮助您快速构建更稳定、安全的应用。EDAS 企业级分布式...
Flink核心是一个流式的数据流执行引擎，其针对数据流的分布式计算提供了数据分布、数据通信以及容错机制等功能。基于流执行引擎，Flink提供了更高抽象层的API以便您编写分布式任务。背景信息 EMR Flink完全兼容开源Flink，相关内容请参见...
商业版本 除了开源版能力，还对接服务注册中心，支持消息、分布式事务等能力。适合有上云需求、对外（公有云、外部专有云）输出需求的场景。商业版参考文档。各个版本对中间件的支持以及更加详细的对比如下：能力/中间件 SOFABoot 开源版 ...
X企业版（分布式）基础版（裸进程）纯内核形态（RPM）⽀持 不⽀持 高级版（带管控）软件栈形态（MyBase One）⽀持 ⽀持 产品特性 PolarDB分布式轻量版 坚定遵循自主可控、开放生态的发展思路，持续围绕 MySQL 开源生态构建分布式能力，以求...
业务端分库分表 当前业务已采用开源组件实现分库分表架构，属于核心场景，数据规模大、并发量高、以及稳定性是该场景的主要诉求，同时受限于开源组件的限制，缺少有效的分布式运维能力，例如：分布式DDL、扩缩容等。透明分布式。分布式快速...
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎。本文介绍Presto的基本特性、系统组成和优势等信息。注意事项 EMR-3.45.0和EMR-5.11.0版本开始支持Presto，其版本号通常为0.2XX。此前各版本中的组件版本号为3XX的Presto，其...
PolarDB-X 支持集中式和分布式一体化形态，具备金融级数据高可用、分布式水平扩展、HTAP混合负载、低成本存储和极致弹性等能力。PolarDB-X 坚定以兼容MySQL开源生态，从SQL语法、事务行为、生态工具等多个维度都做了深度兼容，应用无需或者...
分布式事务 DTX（Distributed Transaction-eXtended）是蚂蚁集团自主研发的金融级分布式事务中间件，用来保障在大规模分布式环境下业务活动的最终一致性。在蚂蚁集团内部被广泛地应用于交易、转账、红包等核心资金链路，服务于亿级用户的...
本文主要介绍在操作分布式事务过程中的常见问题。SOFAStack 是否可以部署在虚拟机、物理机上？可以，SOFAStack 部署支持物理机、虚机机 VM。SOFAStack 当前是否只支持阿里云飞天 ACK？SOFAStack 部署支持多云异构、目前支持华为云、开源 ...
采用分布式架构，不同 server 在内存中调度不同的定时任务，对数据库压力小，大大降低了漏触发的概率。客户端日志丢失可能性 调度特别频繁会导致小文件特别多，从而影响客户端的性能，一旦客户端机器挂了，这台机器上所有日志文件也会丢失...
发起方 initiator 分布式事务的发起方负责启动分布式事务，通过调用参与者的服务，将参与者纳入到分布式事务当中，并决定整个分布式事务是提交还是回滚。一个分布式事务有且只能有一个发起方。参与者 participant 参与者提供分支事务服务。...
提供丰富的服务治理功能 消息队列 基于 Apache RocketMQ 构建的分布式消息中间件 提供高可用消息云服务 任务调度 提供分布式任务调度框架 提供自动化任务调度服务 分布式事务 金融级分布式事务中间件 支持跨数据库、跨服务以及混合分布式...
分布式事务（Distributed Transaction-eXtended，简称 DTX）是蚂蚁集团自主研发的金融级分布式事务中间件，支持跨数据库、跨服务以及混合的方式处理分布式应用，具备多种接入模式和金融级配套功能，本文将主要介绍分布式事务的功能特性。...
背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 登录 分布式任务调度平台。首次使用并登录分布式任务调度平台，在弹出的对话框中单击 开通。在 分布式任务管理 页面，单击 立即购买。在 确认订单 页面 ...
本节介绍如何开通分布式事务服务。前提条件 已注册阿里云账号，并完成实名认证。操作步骤 开通 SOFAStack 产品服务。使用阿里云账号登录 阿里云官网。在上方菜单栏选择 产品与服务 中间件 金融分布式架构 SOFAStack。在 SOFAStack 产品主页...
分布式事务可应用在多个涉及数据库操作的领域，尤其在金融领域可以做到全场景的覆盖与落地验证，包括：支付与转账、账务：对于吞吐量有很高的要求 金融与理财：往往涉及的金额较大，所以对于产品的稳定性要求非常高 保险与监管报送：参与方...
分布式事务是保障金融级分布式系统数据一致性的核心技术。本文系统阐述了其核心概念、功能特性、产品优势及应用场景，为构建高可靠、高一致的分布式业务系统奠定基础。
分布式任务调度SchedulerX是阿里巴巴基于Akka架构自研的新一代分布式任务调度平台，提供定时调度、调度任务编排和分布式批量处理等功能。您可以在控制台配置、管理您的定时调度任务、查询任务执行记录和运行日志，还可以通过工作流进行任务...
背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 首次使用并登录分布式任务调度平台，在弹出的对话框中单击 开通。在 分布式任务管理 页面，单击 立即购买。在 确认订单 页面 服务协议 区域，选中 我已...
SOFAStack 提供了一套用于快速构建金融级分布式架构的中间件，是在严苛的金融场景里锤炼出来的最佳实践。要使用 SOFA 中间件，例如微服务或消息队列，推荐使用 SOFABoot 框架进行开发。SOFABoot SOFABoot 是蚂蚁科技基于 Spring Boot 自研...
技术合作伙伴 开源技术社区 开源项目布局 2018 年 4 月，蚂蚁集团宣布开源 SOFAStack 金融级分布式架构。得益于社区的信任和支持，目前已经累积超过 2.5 万的 Star 数和超过 100 家企业用户，并持续朝打造金融级云原生多个技术领域的标杆...
微服务产品在蚂蚁集团内部已支撑数万个节点规模的分布式应用架构，具有高可用性、高可扩展性、高性能、高时效性、稳定可靠等核心优势，并提供丰富的功能来帮助用户简化分布式系统的管理，让业务开发人员可以专注于业务逻辑实现，提升研发...
分布式中间件 蚂蚁分布式中间件的产品发展路径，一直秉承引领和拥抱业界先进标准和实践，同时亦能满足传统金融架构的平滑迁移、融合适配，以稳妥应对业务升级变更，并积极应对金融交易系统所面临的服务和数据扩展性、事务一致性、秒级容灾...