如果源端存在包含时区信息的数据类型（例如 TIMESTAMP WITH TIME ZONE），请您确保目标端数据库支持并存在源端对应的时区，否则将导致数据迁移过程中产生数据不一致的问题。库表汇聚场景下：建议您使用匹配规则的方式映射源端和目标端的...
（2）由于源端数据库或目标端数据库自身原因导致的；（3）由于源端数据库或者目标端数据库用户名、密码修改后，客户未及时通知阿里云运维更新导致的；（4）客户的疏忽或由客户授权的操作所引起的；（5）客户未遵循 OceanBase 数据传输服务...
内置变量可选值包括：EXECUTE_TIME（执行时间，Long 类型）、DB_NAME_SRC（源端数据库名称，String 类型）、DATASOURCE_NAME_SRC（源端数据源名称，String 类型）、TABLE_NAME_SRC（源端表名，String 类型）、DB_NAME_DEST（目标端数据库...
动作 动作 说明 请求巡航路径 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如巡航标记配置了API数据源为 http://api.test ，传到 请求巡航路径 动作的数据为 { id:'1'}，则最终请求接口为 ...
SourceObjectSelectionRules array object 否 每条规则可选择待同步源端对象的不同对象类型，如选择源端数据库、源端数据表 object 否 每条规则可选择待同步源端对象的不同对象类型，如选择源端数据库、源端数据表 Action string 否 选择...
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
解法【示例2】：在目标端数据库侧修复问题（比如提高 MAX_CONNECTION_ERRORS 的值）后，重启任务。DTS-10015 无法连接到Redis。DTS-10015:unreachable redis network.JedisConnectionException:Could not get a resource from the ...
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
动作 动作 说明 请求地理数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如路况层配置了API数据源为 http://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
内置变量可选值包括：EXECUTE_TIME（执行时间，Long 类型）、DB_NAME_SRC（源端数据库名称，String 类型）、DATASOURCE_NAME_SRC（源端数据源名称，String 类型）、TABLE_NAME_SRC（源端表名，String 类型）、DB_NAME_DEST（目标端数据库...
动作 动作 说明 请求动态轨迹 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如动态轨迹配置了API数据源为 http://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
动作 动作 说明 请求地理数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如路况层配置了API数据源为 https://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
任务设置 清理源端已归档数据：勾选后根据设置条件进行源端数据清理，默认立即清理且不做备份；清理任务完成后支持回滚。指定任务时长：任务启动指定时长后，若未完成则会暂停调度，等待下一次调度。开启目标表结构同步：任务调度前进行...
若源端数据更新快，数据量多，但同步延迟大，您可以：修改任务配置：您可以在源端数据库最大连接数许可范围内，基于同步库或表个数综合评估调整实时同步并发数。说明 并发设置上限为当前资源组支持的最大并发数。不同规格资源组支持的最大...
动作 动作 说明 请求区域热力图 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如区域热力层配置了API数据源为 https://api.test ，传到 请求区域热力图 动作的数据为 { id:'1'}，则最终请求接口为 ...
前提条件 目标数据库主机需要有充足的存储空间来存放导入的数据和因此而带来的日志文件增长，两者加起来的空间增长大概是源端数据库大小的2~3倍（如果数据库是Full模式）。如果目标数据库是在本地自建环境，请确保宿主机有足够的存储空间；...
高级配置 设置同步来源与规则 选择源端数据源中需要同步的库和表后，同步任务默认将源端数据库、数据表写入目标端同名Schema或同名表中，如果目标端不存在该schema或表，将会自动创建。同时，您可以通过 目标Schema名映射自定义、目标表名...
动作 动作 说明 请求插值点数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如克里金等值面层配置了API数据源为 http://api.test ，传到 请求插值点数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
DataWorks为您提供的实时数据同步功能，方便您使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。核心能力 实时同步支持的能力如下图所示：能力 描述 多种数据源...
动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如植被配置了API数据源为 http://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 htp:/api.test?id=1。...
动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如植被配置了API数据源为 https://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 ...
动作 动作 说明 请求插值点数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如等值面层配置了API数据源为 https://api.test ，传到 请求插值点数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
开启事务级连接池后，当客户端发送请求时，会先与 PolarDB 代理建连，代理不会马上将其与后端数据库建连，而是先从事务级连接池里查找是否存在可用的连接（判断是否为可用连接的条件：user、dbname和系统变量这3个参数值是否一致）。...
该白名单 IP 地址为 迁移评估 选择源端数据库类型 对话框中显示的 OceanBase 数据评估服务器的 IP 地址段。重要 多个 IP 地址使用英文逗号（,）分隔，且逗号前后不允许有空格。单个实例最多添加 1000 个 IP 地址或 IP 段。如果 IP 地址较多...
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
如果在创建数据同步任务时，您仅配置了 增量同步，数据传输要求源端数据库的本地增量日志保存 48 小时以上。如果在创建数据同步任务时，您配置了 全量同步+增量同步，数据传输要求源端数据库的本地增量日志至少保留 7 天以上。否则数据传输...
开启事务级连接池后，当客户端发送请求时，会先与 PolarDB 代理建连，代理不会马上将其与后端数据库建连，而是先从事务级连接池里查找是否存在可用的连接（判断是否为可用连接的条件：user、dbname和系统变量这3个参数值是否一致）。...
动作 动作 说明 请求地理边界geojson数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如区域热力层配置了API数据源为 https://api.test ，传到 请求地理边界geojson数据接口 动作的数据为 { id:'1'}，则...
修改脏数据策略会导致写入失败数据被舍弃，目标端数据与源端数据不一致，除非有明确原因不建议修改。告警接收方式 DataWorks对实时同步任务设置告警时支持一些告警接收方式：邮件、短信、电话、钉钉、webhook。邮件 告警信息以邮件形式向...
动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如文字标签配置了API数据源为 http://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
全密态云数据库是达摩院数据库与存储实验室的自研产品，可以杜绝数据库应用服务端数据拥有者以外的任何人接触到用户的明文数据，提高数据管理的强安全性和隐私性。全密态数据库（EncDB）-提供端到端（客户端到数据库服务端）全程加密的高...
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。核心能力 ...
动作 动作 说明 请求地理边界geojson数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如区域热力层配置了API数据源为 https://api.test ，传到 请求地理边界geojson数据接口 动作的数据为 { id:'1'}，则...
请求裁剪边界数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如等值面层配置了API数据源为 https://api.test ，传到 请求裁剪边界数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
自动建表 一次配置即可处理源端数据库中的数百张表，系统将自动在目标端创建表结构，无需手动干预。灵活映射 支持自定义目标库/表命名规则；支持自定义源端和目标端的字段类型映射，灵活适应目标端的数据结构模型。调度与依赖管理 调度时间...
出现脏数据导致的实时任务报错 常见的场景有目标列类型和源端数据不兼容，查看实时任务运行日志、查看脏数据的输出内容，请确认是源端数据问题还是目标端问题，如果是目标表结构问题，可能需要重建目标表以恢复实时任务。重新加载表：需要...
动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如粒子配置了API数据源为 http://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 http://api.test?id=1 。...
支持 半结构化存储数据源 API 支持 支持 SAP Table 支持 不支持 Salesforce 支持 不支持 整库迁移支持的数据源 数据源类型 数据源 相关文档 来源端数据源 MySQL、Oracle、Microsoft SQL Server、OceanBase、IBM DB2、MaxCompute、FTP、...
动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如水体配置了API数据源为 https://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 ...
动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如水体配置了API数据源为 http://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 htp:/api.test?id=1。...