警告 完成数据同步作业的配置后，请勿变更源数据库或目标数据库的 架构类型（例如将主从架构变更为集群架构），否则会导致数据同步失败。前提条件 源和目标Redis实例支持的版本，请参见 同步方案概览。说明 如需跨版本同步（仅支持从低版本...
警告 完成数据同步作业的配置后，请勿变更源数据库或目标数据库的 架构类型（例如将主从架构变更为集群架构），否则会导致数据同步失败。前提条件 源Redis数据库的版本为2.8、3.0、3.2、4.0或5.0版本。说明 目标Redis数据库支持的版本为2.8...
当您需要停止数据同步或重新配置数据同步时，您可以通过本文的方法来重置数据同步作业。前提条件 数据同步作业不处于 未配置 状态。费用影响 包年包月：无影响。按量付费：数据同步作业将转变为 未配置 状态并停止计费，再次完成数据同步...
参数 描述 读取并发配置 该参数用于配置全量同步阶段从源端读取数据的并发数，最大限制为 512.并发数过高可能会造成源端压力过大，影响业务。写入并发配置 该参数用于配置全量同步阶段往目标端写入数据的并发数，最大限制为 512。并发数过...
在 MySQL到ClickHouse分析实例数据同步配置 页面，选择 ClickHouse实例，并分别填写MySQL实例和ClickHouse实例对应的 用户名 和 密码。单击 测试连接以进行下一步，进行实例连通性校验。测试连接成功，进行下一步。测试连接失败，进行异常...
下线时间 2024年03月01日 00:00:00 下线内容 旧版OpenAPI的版本号 旧版OpenAPI的名称 OpenAPI的功能 对应的2020版OpenAPI的名称 2016-08-01 ConfigurationSynchronizationJob 配置同步实例 ConfigureSynchronizationJob ...
整库离线、整库（实时）全增量、整库（实时）分库分表等整库级别同步配置指导 操作流程请参见 数据集成侧同步任务配置。常见问题 实时同步Oracle、PolarDB、MySQL任务重复报错 主备同步数据恢复问题 主备同步问题指Oracle使用主从灾备，当...
参数 描述 读取并发配置 该参数用于配置全量同步阶段从源端读取数据的并发数，最大限制为 512.并发数过高可能会造成源端压力过大，影响业务。写入并发配置 该参数用于配置全量同步阶段往目标端写入数据的并发数，最大限制为 512。并发数过...
您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作的权限。详情请参见：数据库环境准备概述。背景信息 各类方案介绍及写入表分区说明请参见：数据集成侧同步任务能力说明。操作流程 步骤一：...
您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作的权限。详情请参见：数据库环境准备概述。背景信息 各类方案介绍及写入表分区说明请参见：全增量同步任务能力说明。操作流程 步骤一：选择...
您可能需要为应用的多个环境（例如开发环境、测试环境等）同步配置，或者您的应用部署在阿里云的不同地域上，需要跨地域同步配置。您可以创建多个微服务空间，在其中一个空间中创建配置，再将此配置同步到其他空间中。为同地域内的多个微...
警告 完成数据同步作业的配置后，请勿变更源数据库或目标数据库的 架构类型（例如将主从架构变更为集群架构），否则会导致数据同步失败。前提条件 源Redis数据库的版本为2.8、3.0、3.2、4.0、5.0、6.0版本。说明 如需跨版本同步（仅支持从...
您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作的权限。详情请参见：数据库环境准备概述。操作流程 步骤一：选择同步方案 步骤二：配置网络连通 步骤三：设置同步来源与规则 步骤四：设置...
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 重要 仅正向任务（即源库同步至目标库）支持同步DDL，反向任务（即目标库同步至源...
数据同步支持重新配置同步作业，如果您需要修改同步作业的源实例，那么可以使用 重新配置任务 功能，重新配置同步作业。
本文为您介绍如何构建同步任务，将业务数据源的数据同步到Dataphin平台中的目标表。前提条件 已完成同步目标表的创建，详情请参见 新建同步目标表。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。在数据 开发 页面，按照下图操作指引，...
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 重要 仅正向任务（即源库同步至目标库）支持同步DDL，反向任务（即目标库同步至源...
本文为您介绍如何构建同步任务，将业务数据源的数据同步到Dataphin平台中的目标表。前提条件 已完成同步目标表的创建，详情请参见 新建同步目标表。操作步骤 登录 Dataphin控制台。在Dataphin控制台页面，选择工作区地域 后，单击 进入...
在 SCIM用户同步配置 区域，单击 生成新的SCIM密钥。在 SCIM密钥生成成功 对话框，复制SCIM密钥，然后单击 确定。禁用SCIM密钥 警告 禁用后，使用该SCIM密钥的同步任务将会失败。在左侧导航栏，单击 设置。在 SCIM用户同步配置 区域，单击...
您可能需要为应用的多个环境（例如开发环境、测试环境等）同步配置，或者您的应用部署在阿里云的不同地域上，需要跨地域同步配置。您可以创建多个微服务空间，在其中一个空间中创建配置，再将此配置同步到其他空间中。为同个地域内的多个...
3、登录同步配置 登录同步配置包含两个步骤，分别是编辑登录配置、开启同步配置。步骤一：编辑登录配置 输入登录名字段：该字段作为用户登录时的账号名称，如sAMAccountName。输入显示名字段：该字段作为用户登录时的账号名称，如...
DataWorks为您提供的实时数据同步功能，方便您使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。使用限制 实时同步不支持在数据开发界面运行任务，您需要保存、...
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象。DDL语法同步方向限制 为保障双向同步链路的稳定性，DDL更新只能在其中一个同步方向进行同步。即一旦某个同步方向配置了DDL同步，则在反方向上不支持DDL同步，只...
场景 工具 配置案例 从自建库同步至云数据库Redis DTS 从自建Redis集群同步至Redis集群实例 从ECS上的自建Redis同步至Redis实例 从ECS上的Codis集群同步至Redis实例 从ECS上的Twemproxy Redis集群同步至Redis实例 云数据库Redis间同步 DTS ...
ConfigurationSynchronizationJob 配置同步作业。ConfigureDtsJob 配置作业。ConfigureEtlJob 配置ETL任务。ConfigureMigrationJob 配置DTS的数据迁移任务。ConfigureMigrationJobAlert 配置监控报警。ConfigureSubscription 配置订阅任务...
您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作的权限。详情请参见：数据库环境准备概述。背景信息 方案属性 说明 可同步的表个数 支持将源端多表数据写入至目标端多个Topic。支持通过目标...
您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作的权限。详情请参见：数据库环境准备概述。操作流程 步骤一：选择同步方案 步骤二：配置网络连通 步骤三：设置同步来源与规则 步骤四：设置...
步骤三：设置同步来源与规则 步骤四：设置目标表 步骤五：DDL消息处理策略 步骤六：设置任务运行资源 执行同步任务 同步任务运维 实时同步报警配置 Merge节点监控报警配置 创建同步任务 选择同步方案。创建同步解决方案任务，选择需要同步...
步骤三：设置同步来源与规则 步骤四：设置目标表 步骤五：DDL消息处理策略 步骤六：设置任务运行资源 执行同步任务 同步任务运维 实时同步报警配置 Merge节点监控报警配置 创建同步任务 选择同步方案。创建同步解决方案任务，选择需要同步...
在配置数据集成同步任务之前，您需要首先定义好同步任务的源端和目的端数据源信息，以便在配置同步任务时，能够通过选择数据源名称来确定数据的读取和写入数据库。本文将介绍配置数据源时您需要了解的相关信息。数据源功能概述 配置数据源...
整库离线读同步配置指导 操作流程请参见 数据集成侧同步任务配置。附录：脚本Demo与参数说明 附录：离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要在任务脚本中按照脚本的统一格式要求编写脚本中的reader...
当主实例写入时，系统会自动将主实例的数据同步给从实例，因此从实例的在不使用的情况下，CPU和内存也有一定的开销（约为主实例的 1/8），同时也建议主从实例的规格配置差异不要太过明显。更多技术原理请参见 高可用技术揭秘。使用说明 ...
您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作的权限。详情请参见：数据库环境准备概述。背景信息 方案属性 说明 读写表个数 支持将源端多表数据写入至目标端多表。支持通过自定义目标...
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
4、进入同步配置 同步功能可以将授权的部门和部门下的员工同步到网盘 点击配置检测可以看到同步的部门数量和员工数量，如果此步骤报错，请检查上一步的授权是否按要求完成。同步类型可以选择手动同步或者自动同步，手动同步是仅同步一次，...
整库离线读同步配置指导 操作流程请参见 数据集成侧同步任务配置。附录：脚本Demo与参数说明 附录：离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要在任务脚本中按照脚本的统一格式要求编写脚本中的reader...
配置同步任务是将数据源的数据同步到目标表的过程。本文为您介绍如何配置同步任务。配置流程说明 同步任务的配置流程如下图。来源表和目标表均支持多种数据源。数据库类型 数据源 关系型数据库 MySQL、Oracle、Microsoft SQL Server、...
DataWorks将根据同步配置，自动解析出运行当前同步任务的SQL语句。您可使用该语句进入Hologres的代码编辑页面使用SQL方式执行同步任务。说明 生成的SQL Script无法编辑。当同步任务配置更新时，刷新SQL Script，即可生成新的SQL语句。使用...
整库离线读同步配置指导 操作流程请参见 数据集成侧同步任务配置。附录：脚本Demo与参数说明 附录：离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要在任务脚本中按照脚本的统一格式要求编写脚本中的reader...