说明 若勾选了 库表结构同步，DTS会将源数据库中待同步表的结构（包含外键）同步到目标数据库。同步拓扑 本场景为单向同步，需选择 单向同步。目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中...
本文为您介绍如何将MySQL整库同步Kafka，从而降低多个任务对MySQL数据库造成的压力。背景信息 MySQL CDC数据表主要用于获取MySQL数据，并可以实时同步数据表中的修改，经常用在复杂的计算场景。例如，作为一张维表和其他数据表做Join操作。...
信息项 示例值 所属数据源 mysql4.2.0 数据库名称 odc_test 源表名称 employee 影子表名称 employee_t 在 SQL 开发窗口的 工单 页签中单击 影子表同步 新建影子表同步。在 新建影子表同步 面板中指定以下信息。选择对象。信息项 说明 数据...
其他限制 单个数据同步任务只能同步一个数据库，如需同步多个数据库，您需要为每个数据库配置数据同步任务。同步期间，如果同步对象的选择粒度为Schema，在待同步的Schema中创建了新的表或使用RENAME命令重建了待同步的表，您需要在对该表...
由于全量数据同步会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量同步完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE列的同步精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。准备工作 必需：获取源库实例、...
说明 以业务数据库数据同步到MaxCompute数据仓库为例，当有大量的数据存储在数据库系统里，需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时，数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...
说明 支持的变量解释：DATASOURCE_NAME_SRC：源端数据源名称 DB_NAME_SRC：源端数据库名称 TABLE_NAME_SRC：源表名称 DATASOURCE_NAME_DEST：目标端数据源名称 DB_NAME_DEST：目标端数据库名称 TABLE_NAME_DEST：目标表名称 DB_NAME_SRC_...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。准备工作 在正式配置数据同步作业之前，您需要 为自建MySQL创建账号并设置binlog。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例为 PolarDB，选择目标实例为 MySQL，并选择同步拓扑为 单向同步。登录 ...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例和目标实例均为 MySQL，并选择同步拓扑为 单向同步。登录 数据传输控制...
同步源数据库 同步目的数据库 RDS MySQL实例 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过数据库网关接入的自建数据库 通过云企业网CEN接入的自建数据库 RDS MySQL实例 ECS上的自建数据库 通过专线、VPN网关或智能...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。操作步骤 购买数据同步实例，详情请参见 购买数据同步任务。说明 购买时，选择源实例和目标实例均选择为 MySQL，并选择同步拓扑为 单向同步。登录 ...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。准备工作 在正式配置数据同步作业之前，您需要 为自建MySQL创建账号并设置binlog。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。准备工作 将目标RDS实例所属的云账号设置为授信云账号，允许通过数据传输服务访问源RDS实例所属云账号的相关云资源。详情请参见 跨阿里云账号任务...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
源实例为PolarDB MySQL版的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：MySQL（RDS MySQL、自建MySQL）...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。准备工作 在正式配置数据同步作业之前，您需要 为自建MySQL创建账号并设置binlog。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例和目标实例均为 MySQL，并选择同步拓扑为 单向同步。登录 数据传输控制...
注意事项 类型 说明 源库限制 待同步的表需具备主键或唯一约束（仅具有唯一约束的表不支持库表结构同步，建议使用主键约束），且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如同步对象为表级别，且需进行编辑（如表列名映射...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的...
如果您的自建Oracle版本为12c及以上，待同步表的名称长度需不超过30个字节。如同步对象为表级别，且需进行编辑（如表列名映射），则单次同步任务仅支持同步至多1000张表。当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步...
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档以新建数据归档为例，介绍如何在 ODC 中将同一项目的数据库 odc_test 中的表 employee 归档到数据库 test2 ...
为避免该问题，您可以在数据同步配置时，选择同步表A和表B所在的整个数据库作为同步对象。准备工作 将目标RDS实例所属的云账号设置为授信云账号，允许通过数据传输服务访问源RDS实例所属云账号的相关云资源。详情请参见 跨阿里云账号任务...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的...
云原生分布式数据库 PolarDB-X 是阿里巴巴致力于解决单机数据库服务瓶颈而自主研发的分布式数据库产品，高度兼容MySQL协议和语法，支持自动化水平拆分、在线平滑扩缩容、弹性扩展、透明读写分离，具备数据库全生命周期运维管控能力。...
注意事项 类型 说明 源库限制 待同步的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如同步对象为表级别，且需进行编辑（如表列名映射），则单次同步任务仅支持同步至多1000张表。当超出数量限制，...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的...
如果您需要同步数据库名称和表名称，请使用SQL命令创建Catalog，并添加catalog.table.metadata-columns参数。详情请参见 SQL命令。不支持同步MySQL视图。消息队列Kafka√无。MongoDB√暂不支持分库分表合并同步。暂不支持同步MongoDB元信息...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
一键建仓 一键创建实时同步的数据仓库，数据在秒级的延迟下，同步至 AnalyticDB for MySQL 数据库中。数据库迁移 通过创建工单实现数据库迁移、校验和清理的闭环操作。运维管理 通知管理 可根据您的业务需求，订阅不同功能模块的消息事件，...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
常见的支持实时数据同步的数据库包括：Oracle、Polar DB、PolarDB MySQL等。说明 如需查看更多支持的数据库，请参见 支持的数据源及同步方案。相关原理：MySQL Reader、Oracle数据源、PolarDB Reader、SQL Server Reader、Hologres数据源。...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 数据库至数据库的数据同步项目新增支持匹配规则能力，可以助力用户在数据同步项目中通过简单的配置通配符...
本文将介绍支持普通用户的功能概览。入门操作 在 申请权限 中申请目标实例、库、...数据库克隆 数据库克隆功能提供MySQL数据库的克隆功能。工单 工单管理 DMS提供产品内的工单审批和工单执行状态通知功能，可通过钉钉和邮件两种方式进行通知。
任务运行成功（即 最近运行状态 显示为 成功）后，可以在 作业开发 SQL开发 页面，查看同步到 企业版或湖仓版 集群的数据库和表。SELECT*FORM test_adb.person;返回结果：+-+-+-+-+|id|name|age|city|+-+-+-+-+|1|23|Bob|Hangzhou|+-+-+-+-...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的...