MSCK REPAIR TABLE SYNC_DIR用于自动同步指定OSS目录下的分区信息。使用场景 分区比较多，MSCK整张大表比较慢，如只想同步特定目录下所有的分区信息。有些OSS目录不想再同步进入分区表，但MSCK工具会强制同步整个大目录分区信息，可以使用...
基于API触发的单次反向同步 除了使用过程中自动触发的元数据同步，针对同步指定目录下文件的需求，您还可以通过调用API的方式主动地触发指定文件夹的同步。云存储网关会将以OSS上该文件夹的元数据为基准与本地同步，同步任务完成后该目录下...
SYNC_DIR 'Location' 同步指定分区。未设置该参数，则默认同步全表。其中 Location 为指定分区的所在的OSS路径。示例 自动同步全表分区。MSCK REPAIR TABLE adb_external_db.partition_table_test;自动同步指定分区。MSCK REPAIR TABLE adb...
在下一次同步文件时，ossutil会读取指定目录下的快照信息进行增量同步。include 包含符合指定条件的所有文件。更多信息，请参见 include和exclude选项。exclude 不包含任何符合指定条件的文件。更多信息，请参见 include和exclude选项。...
本文介绍同步备份功能，同步备份是一项方便、高效的云存储功能，支持 云与本地数据双向实时同步，实现多终端设备数据保持最终一致。功能特点 云-端数据双向同步：在本地存储和编辑的最新文件/文件夹实时同步至云端，云端已上传及更新的文件...
only-current-dir 仅同步当前目录下的文件，忽略子目录及子目录下的文件。output-dir 指定输出文件所在的目录。输出文件是指批量同步文件出错时产生的report文件，默认保存在当前目录下的 ossutil_output 目录。bigfile-threshold 设置断点...
如果您想要将自建HBase或阿里云HBase中的数据迁移或同步至Lindorm 宽表引擎，可以通过LTS服务完成存量数据迁移和实时数据同步。...迁移自带二级索引的表 迁移时变更压缩和编码方式 迁移或同步指定时间段内的数据 限速历史数据迁移任务
您可以使用 云备份 来同步源端数据（包括NAS、HDFS、S3兼容存储等）到目的端（包括阿里云上）。在同步前，您需要完成操作授权、安装和激活客户端。（推荐）使用RAM用户AccessKey RAM是阿里云提供的用户身份管理与资源访问控制服务。RAM允许...
商品管理 是 渠道商供货工作台 最重要的模块之一。本章节将为渠道商介绍在商品...人工同步 如需同步指定商品信息，可使用人工同步功能。单品同步 单个商品人工同步请参考 人工同步商品数据。批量同步 多个商品批量同步请参考 批量人工同步。
您如果在使用GDB的服务中，想指定一个新的字段同步至ES中，您可以重新执行该操作，加入需要指定的字段即可，但是需要特别注意的是，本操作是覆盖操作，因此您需要将以前指定的同步字段也一并写入，还要注意该操作一定要在向GDB写入数据之前...
创建边界路由器VBR后，系统会自动为VBR创建一张路由表，您可以在该路由表中添加和管理指定同步路由条目（前缀路由）。应用场景 以下是创建VBR后，指定同步路由（前缀路由）的典型应用场景：安全矩阵管理 外部专线接入数据中心时，出口部署...
在实际业务场景中，通常会选择当天的数据进行同步，指定 where 条件为 gmt_create>$bizdate。where 条件可以有效地进行业务增量同步。where 条件不配置或为空，则视作全表同步数据。否 无 querySql 在部分业务场景中，where 配置项不足以...
根据提示继续完成配置至 迁移选项/同步选项 页面，在 增量同步起始位点 区域，请指定同步某个时间节点之后的数据，默认为当前系统时间。说明 根据您选择的迁移/同步类型，该页面会显示不同的参数配置。此处主要为您介绍增量同步起始位点，...
在实际业务场景中，通常会选择当天的数据进行同步，指定 where 条件为 gmt_create>$bizdate。where 条件可以有效地进行业务增量同步。where 条件不配置或为空，则视作全表同步数据。否 无 querySql 在部分业务场景中，where 配置项不足以...
离线同步任务支持您通过配置类似的数据过滤功能来决定同步全量数据还是增量数据，配置过滤条件时，将只同步满足过滤条件的数据。同时，过滤条件可以结合调度参数使用，实现过滤条件随任务调度时间的动态变化，进而实现增量数据的同步。该...
背景信息 数据集成基于源端数据库与目标端数据库类型为您提供丰富的数据同步任务，同步类型包括：整库离线同步（一次性全量同步、周期性全量同步、离线全增量同步、一次性增量同步、周期性增量同步）、一键实时同步（一次性全量同步，实时...
如果您想要将源HBase集群或源Lindorm实例中某个时间段的历史数据迁移至新的Lindorm实例，或想要同步实时数据到新Lindorm实例，可以在创建任务时添加相关时间参数，修改任务配置。本文介绍通过LTS控制台创建任务时配置迁移或同步时间范围的...
reportMsgReceived(SyncMessage syncMessag)声明 public static void reportMsgReceived(SyncMessage msg)说明 用于在 syncCallback 中收到同步推送的数据后，调用该接口通知移动同步服务端接收同步数据成功。在没有收到 reportMsgReceived...
位点设置：支持断点续传或从指定同步起始位置开始同步。FailOver：为避免FailOver导致频繁启动任务占用系统资源，您可配置指定时间段内FailOver出现次数超过指定次数时，任务自动结束运行。如果您不配置Failover次数，将根据5分钟内，...
调用ModifySynchronizationObject接口修改数据同步实例中的同步对象。说明 调用本接口时，数据同步实例需处于未启动或同步中状态。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer...
您可以在 获取代码示例 页面中下载数据同步组件的最佳实践代码。public void button1Clicked(View view){/使用 getUtdid 方法获取设备 ID。String utdid=UTDevice.getUtdid(MainActivity.this);在 Logcat 打印数据同步数据。Log.e("=",...
column 必须显示您指定同步的列集合，不允许为空。是 无 splitPk DB2 Reader进行数据抽取时，如果指定 splitPk，表示您希望使用 splitPk 代表的字段进行数据分片。数据同步系统会启动并发任务进行数据同步，以提高数据同步的效能：推荐 ...
离线同步任务使用调度参数，再结合 运维中心 补数据 功能，可实现基于一套任务配置，批量将历史数据同步至目标数据库或数据仓库指定表或表指定分区。调度参数说明请参见：调度参数支持的格式。说明 分库分表支持MySQL、SQL Server、Oracle...
例如在测试时，您可以使用where条件指定实际业务场景，通常会选择当天的数据进行同步，指定where条件为 id>2 and sex=1：where 条件可以有效地进行业务增量同步。where 条件不配置或者为空，视作全表同步数据。否 无 querySql（高级模式，...
整库离线同步方案包括周期性全量同步、周期性增量同步、一次性全量同步、一次性增量同步、一次性全量周期性增量同步。本文以一次性全量周期性增量同步至MaxCompute为例，为您讲解如何将整库数据离线同步至MaxCompute。前提条件 已完成数据...
整库离线同步方案包括周期性全量同步、周期性增量同步、一次性全量同步、一次性增量同步、一次性全量周期性增量同步。本文以一次性全量周期性增量同步至OSS为例，为您讲解如何将整库数据离线同步至OSS。前提条件 已完成数据源配置。您需要...
是 无 splitPk HybridDB for MySQL Reader进行数据抽取时，如果指定 splitPk，表示您希望使用splitPk代表的字段进行数据分片，数据同步因此会启动并发任务进行数据同步，从而提高数据同步的效能。推荐 splitPk 用户使用表主键，因为表主键...
是 无 splitPk AnalyticDB for MySQL 3.0 Reader进行数据抽取时，如果指定 splitPk，表示您希望使用 splitPk 代表的字段进行数据分片，数据同步因此会启动并发任务进行数据同步，提高数据同步的效能。推荐 splitPk 用户使用表主键，因为表...
DRDS（PolarDB-X 1.0）数据源为您提供读取和写入DRDS（PolarDB-X 1.0）双向通道的功能，本文为您介绍DataWorks的DRDS（PolarDB-X 1.0）数据同步的能力支持情况。支持的版本 实时读取 支持DRDS（PolarDB-X 1.0）实例。创建DRDS（PolarDB-X 1...
SynchronizationDirection String 否 Forward 指定同步方向，取值：Forward：正向。Reverse：反向。说明 默认取值为 Forward。只有当数据同步实例的同步拓扑为双向同步时，才需要传入本参数。SynchronizationReplicatorCompareEnable ...
SQL Server数据源为您提供读取和写入SQL Server双向通道的功能，本文为您介绍DataWorks的SQL Server数据同步的能力支持情况。支持的版本 SQL Server Reader使用驱动版本是com.microsoft.sqlserver sqljdbc4 4.0，驱动能力具体请参见 官网...
是 无 splitPk MariaDB Reader进行数据抽取时，如果指定 splitPk，表示您希望使用 splitPk 代表的字段进行数据分片，数据同步因此会启动并发任务进行数据同步，提高数据同步的效能。推荐 splitPk 用户使用表主键，因为表主键通常情况下比较...
PolarDB-X 2.0数据源为您提供读取和写入PolarDB-X 2.0的双向通道，本文为您介绍DataWorks的PolarDB-X 2.0数据同步的能力支持情况。使用限制 PolarDB-X 2.0数据源仅支持使用 独享数据集成资源组。支持的版本 离线读写：支持PolarDB-X 2.0，...
例如测试时，可以将where条件指定实际业务场景，往往会选择当天的数据进行同步，将where条件指定为 id>2 and sex=1。where条件可以有效地进行业务增量同步。where条件不配置或者为空，视作全表同步数据。否 无 querySql（高级模式，向导...
本文为您介绍如何创建一个阿里云Logstash实例，并通过Logstash的管道配置，完成阿里云Elasticsearch实例间的数据同步。背景信息 在开始本文操作前，请先了解以下背景信息：什么是阿里云Elasticsearch 什么是阿里云Logstash 前提条件 注册...
在实际业务场景中，通常会选择当天的数据进行同步，可以将 where 条件指定为 gmt_create>$bizdate：where 条件可以有效地进行业务增量同步。where 条件不配置或为空时，则视作全表同步数据。否 无 querySql 在部分业务场景中，where 配置项...
使用限制 说明 DataWorks的MaxCompute数据源可使用 Tunnel Endpoint 地址访问相应MaxCompute项目的Tunnel服务，从而通过上传、下载等方式同步该项目的数据。2023年12月11日 之后创建的MaxCompute数据源，若数据源所在的DataWorks服务与需要...
是 无 splitPk Vertica Reader进行数据抽取时，如果指定 splitPk，表示您希望使用 splitPk 代表的字段进行数据分片，数据同步因此会启动并发任务进行数据同步，提高数据同步的效能。推荐 splitPk 用户使用表主键，因为表主键通常情况下比较...
指定同步链路的具体配置步骤，请参见 同步方案概览 中的相关配置文档。说明 本文以 RDS MySQL 实例间的单向同步（先配置后购买）为例进行介绍，配置参数仅供参考，请以实际界面为准。准备工作 当源或目标库为自建数据库时，您还需要做一些...
SynchronizationDirection String 否 Forward 指定同步方向，取值：Forward：正向。Reverse：反向。说明 默认取值为 Forward。只有当数据同步实例的同步拓扑为双向同步时，才需要传入本参数。ClientToken String 否 0c593ea1-3bea-11e9-b96...