本文介绍如何使用数据传输服务（Data Transmission Service，简称DTS），实现 RDS MySQL 实例间的数据迁移。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在业务不停服的情况下，平滑地完成数据库的迁移...
云数据库ClickHouse是面向联机分析处理的列式数据库，基于大宽表的聚合分析查询性能非常优异，比其他分析型数据库速度快一个数量级，通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库（例如自建MySQL或RDS MySQL）...
数据库类型 选择 Tair/Redis。接入方式 选择 云实例。实例地区 选择目标Redis实例所属地域。实例ID 选择目标Redis实例的ID。数据库密码 填入连接目标Redis数据库的密码。说明 数据库密码格式为<user>:。例如，Redis实例自定义的用户名为...
数据库类型 选择 PolarDB-X 1.0。接入方式 选择 云实例。实例地区 选择源 PolarDB-X 1.0 实例所属地域。是否跨阿里云账号 本示例使用同一阿里云账号进行同步，需选择为 不跨账号。实例ID 选择源 PolarDB-X 1.0 实例ID。数据库账号 填入源 ...
云数据库ClickHouse是面向联机分析处理的列式数据库，基于大宽表的聚合分析查询性能非常优异，比其他分析型数据库速度快一个数量级，通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库（例如自建MySQL或RDS MySQL）...
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 同步至 阿里云流式数据服务DataHub，帮助您快速实现使用流计算等大数据产品对数据实时分析。前提条件 已创建源实例 RDS MySQL。说明 源实例 RDS MySQL 的创建方式，...
数据库类型 选择 MySQL。接入方式 选择 ECS自建数据库。实例地区 选择源MySQL数据库所属地域。是否跨阿里云账号 本示例为同一阿里云账号间的同步，选择 不跨账号。ECS实例ID 选择源MySQL数据库所属ECS实例ID。端口 填入源MySQL数据库的服务...
数据库类型 选择 ClickHouse。接入方式 选择 云实例。实例地区 选择目标ClickHouse集群所属地域。是否跨阿里云账号 本示例为同一阿里云账号间的迁移，选择 不跨账号。集群类型 请根据实际情况选择ClickHouse集群的类型。集群ID 选择目标...
背景信息 DataWorks运维中心支持对周期任务、手动任务、实时同步任务等多种类型任务进行运维管理，并针对任务本身及任务执行使用的资源等各类对象提供多种监控方式，方便您根据监控报警及时发现并处理异常，保障数据生产的高效与稳定。...
数据传输服务DTS（Data Transmission Service）支持自建MariaDB同步至 RDS MariaDB 实例，实现数据的实时同步。前提条件 已创建目标 RDS MariaDB 实例，创建方式，请参见 快速创建RDS MariaDB实例。目标 RDS MariaDB 实例的存储空间须大于...
更多关于主键列、排序键、分区键的信息，请参见 CREATE TABLE。分区键 可以不设置，但不可以选择为可空的字段，否则迁移任务将会失败。保存任务并进行预检查。若您需要查看调用API接口配置该实例时的参数信息，请将鼠标光标移动至 下一步...
说明 投递Topic 中_vpc_与_data_delivery_间的信息即为您需要填入的 dts_job_id。例如 投递Topic 为 cn_hangzhou_vpc_cxti86dc11z*_data_delivery_version2 时，则 dts_job_id 需填入 cxti86dc11z*。topic 投递的目标Topic。在 投递通道...
数据库类型 选择 PolarDB-X 1.0。接入方式 选择 云实例。实例地区 选择源PolarDB-X 1.0实例所属地域。是否跨阿里云账号 本场景使用同一阿里云账号进行同步，需选择为 不跨账号。实例ID 选择源PolarDB-X 1.0实例ID。数据库账号 填入源...
数据库类型 选择 AnalyticDB PostgreSQL。接入方式 选择 云实例。实例地区 选择目标 AnalyticDB PostgreSQL 实例所属的地域。实例ID 选择目标 AnalyticDB PostgreSQL 实例的ID。数据库名称 填入目标 AnalyticDB PostgreSQL 实例中用于接收...
数据库类型 选择 PolarDB（兼容Oracle）接入方式 选择 云实例。实例地区 选择源 PolarDB PostgreSQL版（兼容Oracle）集群所属地域。是否跨阿里云账号 本示例为同一阿里云账号间同步，选择 不跨账号。实例ID 选择源 PolarDB PostgreSQL版...
数据库类型 选择 PolarDB-X 2.0。接入方式 选择 云实例。实例地区 选择源 PolarDB-X 2.0 实例所属地域。是否跨阿里云账号 本示例为同一阿里云账号间的同步，选择 不跨账号。实例ID 选择源 PolarDB-X 2.0 实例ID。数据库账号 填入源 PolarDB...
MySQL整库数据离线同步至Hive 2023.4.12 更新功能 数据集成 补充 行模式、列模式 两种数据读取与写入方式，可针对宽表与时序表进行数据读取与写入。Tablestore数据源 Tablestore Stream数据源 2023.4.7 新增功能 数据集成 DataWorks数据...
背景信息 数据库备份DBS 基于Copy Data Management（CDM）技术可以实现快速恢复独立的DBS沙箱实例（即数据库实例），使备份数据快速可用。更多信息，请参见 DBS沙箱功能概览。当您恢复沙箱实例后，您可以通过 数据传输服务DTS 将沙箱实例...
数据库类型 选择 MySQL。接入方式 根据源库的部署位置进行选择，本文以 公网IP 为例介绍配置流程。说明 当自建数据库为其他实例类型时，您还需要执行相应的准备工作，详情请参见 准备工作概览。实例地区 选择源MySQL数据库所属地域。域名或...
数据库类型 选择 MySQL。接入方式 根据源库的部署位置进行选择，本文以 公网IP 为例介绍配置流程。说明 当自建数据库为其他实例类型时，您还需要执行相应的准备工作，详情请参见 准备工作概览。实例地区 选择源MySQL数据库所属地域。主机名...
您可通过发起恢复功能，实现租户、数据库和表为粒度的数据恢复。背景信息 恢复数据时可根据已备份的备份集进行恢复，包括物理备份和逻辑备份。说明 如您需要开通逻辑备份恢复，请联系 OceanBase 技术支持人员。发起恢复任务时，如果要将...
除了支持标准的 JDBC 编程接口（API），OceanBase Connector/J 还兼容 Oracle Driver 的使用方式，OceanBase 的 Oracle 模式兼容 Oracle 的大部分语法。OceanBase Connector/J 采用一键安装模式，驱动安装包名称为：oceanbase-client-[版本...
为保障同步链路稳定性，建议将配置文件 redis.conf 中 repl-backlog-size 参数的值适当调大。请勿在源库中执行 FLUSHDB 和 FLUSHALL 命令，否则将导致源和目标的数据不一致。源库需开启AOF日志。如果源库中的某些Key使用了过期（expire）...
本次发布两种构建湖仓一体的方式：与阿里云OSS+DLF构建湖仓一体能力：通过MaxCompute和OSS实现。该方式需要配套使用阿里云产品数据湖构建DLF（Data Lake Formation）。数据湖的元数据（Schema）全部位于DLF中。MaxCompute可以利用DLF对湖...
是否限制增量同步速率 增量迁移时会开启对源库的多并发读取及对目标库的多并发写入，如果单库的业务压力较大，可能对另外一个库也造成较大的写入压力；如果不希望对数据库影响太大，可以限制迁移的速率上限。环境标签 用于标识DTS任务的...
数据库类型 选择 AnalyticDB PostgreSQL。接入方式 选择 云实例。实例地区 选择目标 AnalyticDB PostgreSQL 实例所属的地域。实例ID 选择目标 AnalyticDB PostgreSQL 实例的ID。数据库名称 填入目标 AnalyticDB PostgreSQL 实例中用于接收...
目标库信息 数据库类型 选择 PostgreSQL。接入方式 选择 云实例。实例地区 选择目标 RDS PostgreSQL 实例所属地域。实例ID 选择目标 RDS PostgreSQL 实例ID。数据库名称 填入目标 RDS PostgreSQL 实例中迁移对象所属数据库的名称。数据库...
目标库信息 选择已有的DMS数据库实例（可选，如未创建可忽略此处选择，直接在下方配置数据库信息即可）本示例无需选择，输入下方的数据库信息即可。数据库类型 选择 MySQL。接入方式 选择 云实例。实例地区 选择目标 RDS MySQL 实例所属...
源库信息 选择已有的DMS数据库实例（可选，如未创建可忽略此处选择，直接在下方配置数据库信息即可）本示例无需选择，输入下方的数据库信息即可。数据库类型 选择 MySQL。接入方式 选择 云实例。实例地区 选择源 RDS MySQL 实例所属地域。...
如果OSS对象被修改、覆盖或删除，JindoFS在读取OSS对象的时候，首先会检查OSS对象的Meta信息和MD5，然后对比本地缓存的信息，检查是否发生了变化。如果发生了变化，本次读取放弃本地缓存直接读取OSS，并更新缓存。JindoFS Block模式可以...
数据传输服务DTS（Data Transmission Service）支持 RDS MySQL 实例间的数据同步。支持的源和目标数据库 MySQL间同步支持以下源或目标数据库。本文以 RDS MySQL 实例为源和目标数据库介绍配置流程，其他数据源配置流程与本案例类似。源数据...
适合数据量较大的订阅实例。选择为 半价配置费+1元/GB数据流量费，从2020年12月18日开始，DTS会对该订阅实例额外收取数据流量费用。订阅时长 在预付费模式下，选择包年包月实例的时长和数量，包月可选择1~9个月，包年可选择1~3年。说明 该...
数据库类型 选择 AnalyticDB MySQL 3.0。接入方式 选择 云实例。实例地区 选择目标 云原生数据仓库AnalyticDB MySQL版 3.0所属地域。实例ID 选择目标 云原生数据仓库AnalyticDB MySQL版 3.0实例ID 数据库账号 填入目标 云原生数据仓库...
数据库类型 选择 PostgreSQL。接入方式 选择 云实例。实例地区 选择源 RDS PostgreSQL 实例所属地域。实例ID 选择源 RDS PostgreSQL 实例ID。数据库名称 填入源 RDS PostgreSQL 实例中迁移对象所属数据库的名称。数据库账号 填入源 RDS ...
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标库的表存储空间会比源库的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
说明 如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志...
目标库信息 数据库类型 选择 SelectDB。接入方式 选择 云实例。实例地区 选择目标SelectDB实例所属地域。实例ID 选择目标SelectDB实例的ID。数据库账号 填入目标SelectDB实例的数据库账号，权限要求请参见 数据库账号的权限要求。数据库...
数据库类型 选择 PolarDB-X 1.0。接入方式 选择 云实例。实例地区 选择源 PolarDB-X 1.0 实例所属地域。是否跨阿里云账号 本示例为同一阿里云账号间同步，选择 不跨账号。实例ID 选择源 PolarDB-X 1.0 实例ID。数据库账号 填入源 PolarDB-X...
源库信息 数据库类型 选择 PolarDB-X 1.0。接入方式 选择 云实例。实例地区 选择源 PolarDB-X 1.0 实例所属地域。实例ID 选择源 PolarDB-X 1.0 实例ID。数据库账号 填入源 PolarDB-X 1.0 实例的数据库账号，权限要求，请参见 数据库账号的...
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...