若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。DTS不支持同步源库中的临时表、系统内部的...
详情请参见 通过无感集成（Zero-ETL）同步数据。若您已经设置了 联邦分析 链路，您仍可在华东1（杭州）、华东2（上海）、华南1（深圳）、华北2（北京）、美国（弗吉尼亚）地区看到 联邦分析 入口，以便进行链路管理。前提条件 PolarDB ...
本文介绍如何创建MySQL Source Connector，通过DataWorks将数据从阿里云数据库RDS MySQL版导出至 云消息队列 Kafka 版 实例的Topic。前提条件 在导出数据前，请确保您已完成以下操作：为 云消息队列 Kafka 版 实例开启Connector。更多信息...
已创建 RDS MySQL实例 或 Serverless实例 注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标...
其他限制 单个数据同步任务只能同步一个数据库，如需同步多个数据库，您需要为每个数据库配置数据同步任务。不支持同步TimescaleDB插件表、包含跨Schema继承关系的表。如果待同步的表中包含SERIAL类型的字段，源库会自动为该字段创建一个...
数据传输服务DTS（Data Transmission Service）支持两个PostgreSQL数据库之间（比如RDS PostgreSQL、自建PostgreSQL）的双向数据实时同步，适用于异地多活（单元化）、数据异地容灾等多种应用场景。本文以 RDS PostgreSQL 实例间的双向同步...
其他限制 单个数据同步任务只能同步一个数据库，如需同步多个数据库，您需要为每个数据库配置数据同步任务。不支持同步TimescaleDB插件表、包含跨Schema继承关系的表。不支持同步DATATYPE、VIEW、PROCEDURE、FUNCTION、SEQUENCE、EXTENSION...
数据库名称 填入源 AnalyticDB PostgreSQL版 实例中待同步数据所属数据库的名称。数据库账号 填入源 AnalyticDB PostgreSQL版 实例的数据库账号，需具备待同步对象的读权限。数据库密码 填入该数据库账号对应的密码。目标库信息 选择已有...
数据传输支持下载数据同步任务的同步对象配置信息，并支持通过导入 CSV 文件的方式实现自动配置和确认同步对象的配置信息，以实现保存任务配置信息和批量、快速配置任务。下载对象配置 新建数据同步任务后，您可以下载同步对象的配置信息。...
无 配置目标数据湖信息 目标数据库 存储目标表的数据库。database_1 目标数据表名称 作业会以此名称来建表。anti_rds 存储格式 目标表的数据格式。Hudi 数据湖存储位置 数据存储的OSS路径。格式为 oss:/Bucket名称/OSS目录名称/。oss:/doc-...
若目标库为MySQL实例或 PolarDB MySQL版 集群，由于数据库产品的限制，不支持迁移包含RELOAD、CREATE TABLESPACE、FILE或ALL PRIVILEGES权限的账号。系统账号（如root、mysql.infoschema、mysql.session、mysql.sys等）和内置账号不支持...
如果您需要将关系型数据库中的数据实时同步到阿里云Elasticsearch Serverless（简称ES Serverless）中进行搜索分析，可通过数据传输服务DTS快速创建源库到目标库ES Serverless的实时同步作业，适用于对实时同步要求较高的同步场景。...
创建源库到目标数据库的同步或迁移实例。相关配置文档，请参见 同步方案概览 和 迁移方案概览。重要 同步实例：同步类型 默认已勾选 增量同步，您只需勾选 全量同步，请勿勾选 库表结构同步。迁移实例：迁移类型 勾选 全量迁移 和 增量迁移...
数据同步任务中，OceanBase 数据库 MySQL 兼容模式至 AnalyticDB MySQL、RDS PostgreSQL 实例至 OceanBase 数据库 Oracle 兼容模式 和 OceanBase 数据库相同租户之间的数据同步 为库到库的匹配规则配置。在 选择迁移对象 区域，选中 匹配...
说明 执行-verify 前，需先停止DSync工具的同步进程，并确保源库无新的数据写入（例如停止实例或应用）。此操作会执行全表扫描，消耗较多资源且耗时较长。verify 表示全量数据校验，注意校验命令需单独执行./dsync-verify-progress-logfile...
DataWorks提供了一键MaxCompute数据同步节点功能，帮助您快速完成从MaxCompute到Hologres数据库的数据同步，可以实现对MaxCompute表数据的高效查询。本文将详细介绍如何使用一键MaxCompute数据同步节点。背景信息 您可以通过SQL语句直接将...
Database 选择您所需同步的Hologres数据库。Schema 选择您所需同步的Schema。Table 选择您所需同步的表名称。过滤条件 系统会根据您使用的分区表自动生成过滤条件，您也可以根据实际需求进行调整。满足过滤条件的数据将被保留。说明 过滤...
对于目标端为数据库的数据同步任务，在 增加对象 对话框的左侧 源端对象 区域，选中需要同步的对象，单击，将其添加至右侧列表中。选择增加的同步对象后，您可以对目标端对象进行重命名、设置行过滤或移除对象等操作。选择完成后，单击 下...
本教程以RDS MySQL数据库为例，为您介绍基于Dataphin如何调用DataX同步数据。前提条件 已开通RDS MySQL实例，且RDS MySQL实例的网络类型为专有网络。如何开通RDS MySQL实例，请参见 创建RDS MySQL实例。已创建RDS MySQL实例的数据库和账号...
注意事项 性能影响：数据迁移过程，尤其是全量同步阶段，会对源数据库和目标数据库产生一定的读写负载。建议您在业务低峰期执行迁移，并提前评估数据库的承载能力。安全配置：在业务割接前，建议对目标 PolarDB 集群的写入权限进行管控，仅...
本文介绍云数据库MongoDB 6.0版本推出的新特性和优化项。速览 本文从以下方面介绍云数据库MongoDB 6.0版本：新特性 可查询加密（Queryable Encryption）集群同步（Cluster-to-Cluster Sync）优化项 时序集合（Time Series Collection）变更...
总结 本文介绍了一种使用自动同步工具的方式，将内网DNS的解析记录同步至本地自建IDC内部DNS服务器的方式。方便运维工程师搭建混合云DNS解析方案，有效的降低了混合云场景下DNS配置的复杂度，同时能够避免专线或者VPN的故障对自建IDC内部...
源为自建SQL Server或RDS SQL Server的同步方案 源为自建MongoDB或云数据库MongoDB的同步方案 源为自建Redis或云数据库Tair/Redis的同步方案 源为MariaDB的同步方案 源为Db2 for LUW的同步方案 源为Db2 for i（AS/400）的同步方案 源为数据...
说明 数据库容器CDB（Container Database）是Oracle 12c及之后版本的数据库新特性，用于承载多个可插拔数据库PDB（Pluggable Database）。操作步骤 创建账号并配置账号权限。您需要规划一个数据库的登录账户用于后续执行操作，此账号需要...
操作步骤 您可以先创建一个新的RDS PostgreSQL数据库作为备库，然后在备库中同步主库的PostgreSQL数据，最后使用逻辑订阅功能，在备库中实时同步主库的数据，从而实现备库的功能。具体操作步骤请参考以下内容：登录 RDS控制台，参见 恢复...
本文为您介绍如何通过DataWorks数据集成实时同步数据库中的数据至Hologres。前提条件 开通DataWorks，详情请参见 入门概述。开通Hologres实例并绑定至DataWorks工作空间，详情请参见 DataWorks快速入门。已开通云数据库。说明 跨地域是否...
PolarDB PostgreSQL版同步至AnalyticDB PostgreSQL 云数据库SelectDB版 库表结构同步 全量数据同步 增量数据同步 单向同步 PolarDB PostgreSQL版同步至云数据库SelectDB版 源为PolarDB-X的同步方案 重要 PolarDB-X 1.0中的数据库须基于RDS ...
Db2 for LUW同步至PolarDB-X 2.0 说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到目标数据库。类型 说明 源库限制 带宽要求：源库所属的服务器需具备足够出口带宽，否则将影响数据同步速率。待...
DML操作：INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 所需权限 授权方法 RDS SQL Server实例 待同步数据库的所有者权限。修改账号权限 云原生数据仓库AnalyticDB PostgreSQL实例 LOGIN权限。目标表的SELECT、CREATE、INSERT、...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的...
权限要求，请参见 RDS MySQL实例间的单向同步、RDS SQL Server间的同步、云数据库MongoDB版（副本集架构）同步至云数据库MongoDB版（副本集架构或分片集群架构）、云数据库MongoDB版（分片集群架构）同步至云数据库MongoDB版（副本集架构或...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
适用场景 创建数据库至消息队列的数据同步任务时，数据传输支持您在选择需要同步的 Topic 类型后，通过 更改 Topic 功能重新选择 Topic 名称。操作步骤 将数据同步任务配置至 选择同步对象 步骤。详情请参见相应类型的 数据同步 任务文档。...
DML操作：INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 所需权限 授权方法 RDS SQL Server实例 待同步数据库的所有者权限。修改账号权限 云原生数据仓库AnalyticDB PostgreSQL实例 LOGIN权限。目标表的SELECT、CREATE、INSERT、...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
如果您使用备用库同步数据，则还可以通过如下语句检查Binlog是否开启。show variables like"log_slave_updates;返回结果为 ON 时，表明备用库已开启Binlog。如果返回的结果与上述结果不符，请参考 MySQL官方文档 开启Binlog。使用如下语句...
数据库名称 填入源 Db2 for LUW 中迁移对象所属数据库的名称。数据库账号 填入 Db2 for LUW 的数据库账号，权限要求请参见 创建账号并授予权限。数据库密码 填入该数据库账号对应的密码。目标库信息 选择已有连接信息 若您需要使用 已录入...
数据库名称 填入源 Db2 for LUW 中迁移对象所属数据库的名称。数据库账号 填入 Db2 for LUW 的数据库账号，权限要求请参见 创建账号并授予权限。数据库密码 填入该数据库账号对应的密码。目标库信息 选择已有连接信息 若您需要使用 已录入...
Mongo Shell是MongoDB自带的数据库管理工具。云数据库MongoDB支持通过Mongo Shell管理数据库账号。本文介绍如何通过Mongo Shell创建和查询数据库账号。前提条件 已创建云数据库MongoDB实例。不同类型实例的创建方法如下：创建单节点实例 ...