在DTS 同步任务 页面可以查询创建的同步任务，并可以对同步任务进行修改同步对象、设置监控报警、修改同步速度等操作，详情请参见 DTS产品文档。重要 为保障灾备实例数据的实时性，请不要暂停同步灾备实例的同步任务。常见问题 灾备实例...
什么是全球多活数据库集群 同步拓扑管理 支持对同步任务的同步拓扑进行升级，将单向同步任务升级为双向同步任务，以满足不断发展的业务需求。单向同步升级至双向同步 冲突策略管理 冲突检测 支持对INSERT导致的唯一性冲突、UPDATE更新的...
数据同步支持离线数据同步任务的新建。离线数据同步任务支持的云计算资源类型为MySQL、Oracle、SQL Server、Hdfs、ftp、PostgreSQL、Hive、MaxCompute、AnalyticDB PostgreSQL、OSS。本文以同步MySQL数据源到MaxCompute目标端为例，介绍...
数据同步支持离线数据同步任务的新建。离线数据同步任务支持的云计算资源类型为MySQL、Oracle、SQL Server、Hdfs、ftp、PostgreSQL、Hive、MaxCompute、AnalyticDB PostgreSQL、OSS。本文以同步MySQL数据源到MaxCompute目标端为例，介绍...
更多信息，请参见 创建和管理专线网关ECR。IPsec连接 说明 仅IPsec连接运行BGP动态路由协议时，路由同步功能才会生效。为IPsec连接开启路由同步功能后，企业版转发路由器自动向IPsec连接的BGP路由表中同步VPN连接关联的企业版转发路由器...
如为增量同步任务，DTS要求源数据库的WAL日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的WAL日志至少保留7天以上（您可在全量同步完成后将WAL日志保存时间设置为24小时以上），否则DTS可能因无法获取WAL日志而导致任务...
如为增量同步任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量同步完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取...
添加并开启云产品数据源同步任务后，您可查看对应同步任务的详细信息，包括同步状态、数据同步存储表、同步任务运行信息等。您也可根据需要在数据同步存储表中新增字段。本文介绍如何查看云产品数据源的同步任务和数据同步存储表。查看同步...
这里可以看到同步任务的点位和同步时间发生了变化，同步时间就是刚刚数据写入DataHub的时间，同步点位变成了1（点位从0开始计算，点位为0表示第一条数据已经写入）。然后在ES查看一下数据的同步情况，通过Kibana可以看到数据已经同步成功。
如为增量同步任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量同步完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取...
通过数据传输服务DTS（Data...您可以根据实际情况，选择是否对全量同步任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 同步类型 选择了 全量同步 时...
新增离线数据同步任务后，需对任务进行上线操作，同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务，具体操作，请参见 新增离线数据同步任务、批量新增离线数据...
新增离线数据同步任务后，需对任务进行上线操作，同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务，具体操作，请参见 新增离线数据同步任务、批量新增离线数据...
源库操作限制：在结构同步和全量同步阶段，请勿执行库或集合的结构变更，否则数据同步任务会失败。若仅执行全量数据同步，请勿向源实例中写入新的数据，否则会导致源和目标数据不一致。其他限制 在任务开始前，需要为源端待同步的数据添加...
查看数据同步任务详情（可选）在使用逻辑迁移（DTS数据同步）方式进行一键升级的过程中，若遇到迁移报错（如预检查失败）或者其他异常状态（如复制延迟异常高）时，您可以前往对应的DTS数据同步任务的详情页，查看数据同步任务的具体信息。...
管理同步任务 您可以对 已提交 状态的同步任务，执行如下操作。操作 描述 编辑 编辑同步任务：将鼠标悬停在某个同步任务后的 图标上，单击 编辑。进入同步任务配置页面修改同步任务，详情请参见 配置同步任务。代码编写页面仅限解锁及被您...
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的集合，分批配置多个任务，或者配置整库的同步任务。需开启Oplog日志。说明 DTS要求源数据库的Oplog日志至少保留7天以上，否则DTS可能因无法获取Oplog日志而导致任务失败...
一键迁移 您可以在一键迁移中同时配置历史迁移任务和实时数据同步任务。在LTS控制台的左侧导航栏，选择 Lindorm/HBase迁移>一键迁移。单击 创建任务。按需填写并勾选相关参数和操作：源集群、目标集群、表结构迁移、实时数据复制、历史数据...
数据集成是稳定高效、弹性伸缩...在数据集成同步任务配置前，您可以在DataWorks 数据源管理 页面，配置好您需要同步的源端和目标端数据库或数据仓库的相关信息，并在同步过程中，通过选择数据源名称来控制同步读取和写入的数据库或数据仓库。
如为全量同步和增量同步任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量同步完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取Binlog而导致任务失败，极端情况下甚至可能会导致数据不一致或丢失。...
源库、目标库无法连接后的重试时间 在同步任务启动后，若源库或目标库连接失败则DTS会报错，并会立即进行持续的重试连接，默认持续重试时间为720分钟，您也可以在取值范围（10~1440分钟）内自定义重试时间，建议设置30分钟以上。...
编辑项目 项目管理-删除项目 项目管理-成员管理 项目管理-查看分组管理 项目管理-分组管理-创建服务单元分组 项目管理-分组管理-编辑服务单元分组 项目管理-分组管理-删除服务单元分组 项目管理-分组管理-创建应用分组 项目管理-分组管理-...
如为增量同步任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量同步完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取...
您可以在数据传输服务DTS（Data Transmission Service）控制台创建数据同步任务，实时或定时将 云数据库 RDS MySQL 版 实例的增量数据同步至 函数计算 的指定函数。然后结合同步至函数中的数据，在 函数计算 编写相应的代码，对接收到的...
是否限制增量同步速率 您也可以根据实际情况，选择是否对增量同步任务进行限速设置（设置 每秒增量同步的行数RPS 和 每秒增量同步的数据量(MB)BPS），以缓解目标库的压力。环境标签 您可以根据实际情况，选择用于标识实例的环境标签。本...
如为增量同步任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量同步完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取...
源库、目标库无法连接后的重试时间 在同步任务启动后，若源库或目标库连接失败则DTS会报错，并会立即进行持续的重试连接，默认持续重试时间为720分钟，您也可以在取值范围（10~1440分钟）内自定义重试时间，建议设置30分钟以上。...
您可以根据实际情况，选择是否对全量同步任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 同步类型 选择了 全量同步 时才可以配置。是否限制增量...
是否限制增量同步速率 您也可以根据实际情况，选择是否对增量同步任务进行限速设置（设置 每秒增量同步的行数RPS 和 每秒增量同步的数据量(MB)BPS），以缓解目标库的压力。环境标签 您可以根据实际情况，选择用于标识实例的环境标签。本...
管理 查看 项目管理-查看项目列表 项目管理-创建项目 项目管理-编辑项目 项目管理-删除项目 项目管理-成员管理 项目管理-查看分组管理 项目管理-分组管理-创建服务单元分组 项目管理-分组管理-编辑服务单元分组 项目管理-分组管理-删除服务...
如为增量同步任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量同步完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取...
新增脚本同步任务后，需对任务进行上线操作，脚本同步任务上线后会按照创建任务中设置的调度周期执行。本文介绍如何上线脚本同步任务。前提条件 已新增脚本同步任务，具体操作，请参见 新增脚本同步任务。操作步骤 登录 数据资源平台控制台...
新增脚本同步任务后，需对任务进行上线操作，脚本同步任务上线后会按照创建任务中设置的调度周期执行。本文介绍如何上线脚本同步任务。前提条件 已新增脚本同步任务，具体操作，请参见 新增脚本同步任务。操作步骤 登录企业数据智能平台。...
Binlog日志：RDS MySQL默认已开启Binlog，您需确保binlog_row_image的值为full，否则预检查阶段提示报错，且无法成功启动数据同步任务。参数设置方法，请参见 设置实例参数。重要 若源实例为自建MySQL，则需开启Binlog，并且设置binlog_...
如为增量同步任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量同步完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取...
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
表级血缘 表级血缘页面为您展示包括集成同步任务、自定义血缘的计算任务及系统可自动解析血缘的SQL计算任务和逻辑表任务血缘关系图。序号 描述 ① 快捷操作区 隐藏数据源表：勾选后将隐藏来自数据源的表对象及其下游。隐藏已删除表：血缘在...
DTS专属集群是在某一地域由多台相同规格的ECS虚拟机组成的集群，用于管理和配置DTS迁移、同步和订阅任务。相比DTS共享集群，DTS专属集群具有资源独享、稳定性更好、性能更优和成本更低的特点。优势 相比DTS的DTS公共集群（常规售卖模式），...
模块 说明 相关文档 数据地图 DataWorks数据地图提供了企业级数据管理平台，能够基于统一元数据的底层建设，提供数据对象的管理和盘点的能力，以及数据对象的快速查找和深度理解的能力。数据地图概述 安全中心 数据保护伞 审批中心 安全...
本文将引导您快速创建并管理消息路由任务，实现单元化部署环境下跨单元消息路由和同步。说明 该功能仅适用于支持 LDC 单元化架构的环境。创建路由任务 您可以登录消息队列控制台，根据业务需求创建跨地域的消息同步任务。操作步骤如下：...