分布式系统的备份-分布式系统的备份文档介绍内容-移动阿里云

全局事务服务 GTS（文档停止维护）

ACID（Atomicity、Consistency、Isolation、Durability）特性，但在分布式系统中并不容易，GTS 可以保证分布式系统中的分布式事务的 ACID 特性。\nGTS 支持 DRDS、RDS、MySQL 等多种数据源，可以配合 EDAS 和 Dubbo 等微服务框架使用，兼容...

文件存储HDFS版

文件存储HDFS版允许您就像在Hadoop分布式文件系统(Hadoop Distributed File System) 中管理和访问数据。您无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布式文件...

文件存储 NAS

阿里云文件存储NAS是一个可共享访问，弹性扩展，高可靠，高性能的分布式文件系统。兼容POSIX文件接口，可支持上千台弹性计算ECS、容器服务ACK等计算节点共享访问，您无需修改应用程序，即可无缝迁移业务系统上云。

应用场景

服务注册与分布式系统协调 MSE注册配置中心能够实现服务注册与发现、配置管理、分布式数据管理等功能，支持多种引擎类型（兼容Nacos、ZooKeeper和Eureka）。能够应用于以下业务场景。微服务注册与发现在快速发展的云计算时代，微服务应用...

应用场景

消息队列作为分布式系统中的重要组件，可以很好的应对这些场景。下文以支付转账为场景说明消息队列如何实现以下功能：异步解耦分布式事务的数据一致性削峰填谷异步解耦传统处理方式最常见的一个场景是支付转账成功后，需要生成交易双方的...

什么是企业级分布式应用服务EDAS

借助EDAS搭建起业内第一个成熟的分布式业务系统，帮助快鱼解决原有多套系统之间商品、渠道等数据不一致等问题，保障系统的快速迭代和敏捷开发，降低研发周期及成本。微服务架构下，很好地支持海量数据及应用的并发，系统效率提高了25倍，...

Dataphin管道任务运维补数据只有20220430才会报错...

问题描述 Dataphin管道任务运维补数据只有20220430才会报错“org....HDFS（hadoop 的分布式文件系统），但是某个HDFS文件，做了特殊权限，导致写入失败。解决方案检查该HDFS文件的权限，确保用户对该HDFS文件有写入权限。适用于 Dataphin

基本概念

在广义上，一个调用链代表一个事务或者流程在（分布式）系统中的执行过程。在OpenTracing标准中，调用链是多个Span组成的一个有向无环图（Directed Acyclic Graph，简称DAG），每一个Span代表调用链中被命名并计时的连续性执行片段。下图是...

基本概念

在广义上，一个调用链代表一个事务或者流程在（分布式）系统中的执行过程。在OpenTracing标准中，调用链是多个Span组成的一个有向无环图（Directed Acyclic Graph，简称DAG），每一个Span代表调用链中被命名并计时的连续性执行片段。下图是...

技术架构

PolarFS是中国内地面向DB应用设计的采用了全用户空间I/O栈的低延迟高性能分布式存储系统（参见VLDB 2018 上的文章 PolarFS:An Ultra-low Latency and Failure Resilient Distributed FileSystem for Shared Storage Cloud Database），其...

NAS存储卷概述

CNFS分布式缓存利用并行多链接、计算端读写缓存、高效Lease机制等技术提升容器读写NAS中数据的效率，使NAS文件系统的使用感受更接近本地文件系统。具体操作，请参见：创建CNFS管理NAS文件系统（推荐）通过CNFS方式使用NAS文件系统持久化...

NAS存储卷概述

CNFS分布式缓存利用并行多链接、计算端读写缓存、高效Lease机制等技术提升容器读写NAS中数据的效率，使NAS文件系统的使用感受更接近本地文件系统。具体操作，请参见：创建CNFS管理NAS文件系统（推荐）通过CNFS方式使用NAS文件系统持久化...

什么是文件存储HDFS版

文件存储HDFS版就像在Hadoop分布式文件系统（Hadoop Distributed File System）中一样管理和访问数据。您无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布式文件...

对接Jaeger

Service借助阿里云日志服务的海量数据处理能力，让您享受Jaeger在分布式追踪领域给您带来便捷的同时无需过多关注后端存储系统的问题。Jaeger UI部分仅提供查询、展示Trace的功能，对分析问题、排查问题支持不足。使用Jaeger on Alibaba ...

PAI-TF概述

PAI-TF的作业都是基于底层的分布式调度系统动态调度至不同机器。当您提交PAI-TF作业时，无需担心是否需要提前申请GPU物理主机，PAI-TF所需要的GPU资源随作业的提交动态分配，随作业的结束动态释放。全局计算调度当您在使用MaxCompute计算...

事务消息

分布式系统调用的特点为一个核心业务逻辑的执行，同时需要调用多个下游业务进行处理。因此，如何保证核心业务和多个下游业务的执行结果完全一致，是分布式事务需要解决的主要问题。以电商交易场景为例，用户支付订单这一核心操作的同时会...

应用场景

消息队列RocketMQ版作为分布式系统中的重要组件，可用于应对这些挑战，例如解决应用的异步解耦。下文先以用户注册为场景说明消息队列RocketMQ版如何实现以下功能：异步解耦分布式事务的数据一致性消息的顺序收发最后，再以电商的秒杀...

存储概述

文件存储NAS一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统，支持NFS和SMB协议。更多信息，请参见文件存储NAS概述。对象存储OSS一个海量、安全、低成本、高可靠的存储空间，适合存储非结构化数据（如图片、音视频等）。更多...

快速入门

文件存储HDFS版适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户进行海量数据存储和离线计算的业务场景，充分满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。开通文件存储HDFS版...

文件存储HDFS版

您可以像在Hadoop分布式文件系统（Hadoop Distributed File System）中管理和访问数据那样使用文件存储HDFS版。您无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布...

文件存储HDFS版

您可以像在Hadoop分布式文件系统（Hadoop Distributed File System）中管理和访问数据那样使用文件存储HDFS版。您无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布...

安装ACCL库

背景信息 ACCL面向阿里云灵骏架构设计，通过算法与拓扑的深入协同来收获更好的通信性能，充分挖掘高性能RoCE网络的带宽效率、最大化分布式训练系统的可扩展性。ACCL提供了简单易用的C++ API，语义与MPI等主流集合操作接口相近。ACCL提供了...

选择存储卷类型

实例、容器服务等计算节点的文件存储服务，是一种可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。它的读写性能相较于对象存储 OSS 而言较高。使用说明NAS 为共享存储，支持同时被多个 Pod 挂载，即一个 PVC 可以同时被多个 Pod ...

支持的云服务

云盘概述文件存储NAS文件存储NAS是一个可共享访问、弹性扩展的分布式文件系统，通过NFS等标准文件访问协议进行访问。您可以使用NAS作为容器的持久化存储，在创建ECI实例时将其挂载到容器上。什么是文件存储NAS对象存储OSS对象存储OSS是一个...

使用云存储（PVC方式）

文件存储NAS一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统，支持NFS和SMB协议。更多信息，请参见文件存储NAS概述。对象存储OSS一个海量、安全、低成本、高可靠的存储空间，适合存储非结构化数据（如图片、音视频等）。更多...

RAPIDS加速图像搜索最佳实践

阿里云文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。兼容POSIX文件接口，可支持数千台计算节点共享访问，可以挂载到弹性计算ECS、弹性裸金属服务器、容器服务ACK、弹性容器ECI、批量计算BCS、高性能计算EHPC、...

RAPIDS加速机器学习最佳实践

阿里云文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。兼容POSIX文件接口，可支持数千台计算节点共享访问，可以挂载到弹性计算ECS、弹性裸金属服务器、容器服务ACK、弹性容器ECI、批量计算BCS、高性能计算EHPC、...

微服务分布式事务

本文介绍微服务分布式事务的场景描述、解决问题、架构图及操作参考链接。场景描述本文档适用于在分布式应用中，多个服务间存在分布式事务的场景。通过阿里云全局事务服务（GTS）保障数据的最终一致性，提供简单、易用、高效的分布式事务...

NAS存储卷概述（ASK）

它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口，天然适配原生操作系统，提供共享访问，同时保证数据一致性和锁互斥。它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问...

NAS存储卷概述

它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口，天然适配原生操作系统，提供共享访问，同时保证数据一致性和锁互斥。它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问...

Spark计算引擎

Spark是一个通用的开源的分布式处理系统，通常用于大数据工作负载。Spark既支持使用SQL，又支持编写多种语言的DataFrame代码，兼具易用性和灵活性。Spark通用化的引擎能力可以同时提供SQL、批处理、流处理、机器学习和图计算的能力。...

NAS存储卷概述

它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口，天然适配原生操作系统，提供共享访问，同时保证数据一致性和锁互斥。它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问...