当您需要将云数据库RDS MySQL或云原生数据库PolarDB MySQL中的数据迁移至 云数据库ClickHouse 中进行实时分析时，本文档为您提供了以RDS MySQL为参考的示例，以帮助您轻松完成数据迁移任务。前提条件 已创建目标 云数据库ClickHouse 集群，...
表设计的最佳实践 基于以上的数据模型，我们便可以将同一类时序数据的度量（如上图中的AQM）设计为表名，并按照SQL的 CREATE TABLE 语法进行表设计。以上文的空气质量监测的时序模型为例，可以采用的表定义如下所示。CREATE TABLE aqm(city...
创建数据库块表。语法 boolean ST_CreateChunkTable(cstring tableName)参数 参数名称 描述 tableName 数据库块表的名称。命名要求如下：以字母开头，以字母或数字结尾。由小写字母、数字或下划线（_）组成。长度为2~64个字符。名称在当前...
本章节介绍如何通过 云数据库SelectDB 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库SelectDB 提供多源数据目录功能（Multi-Catalog或Catalog），支持对接...
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
创建数据库块表。语法 boolean ST_CreateChunkTable(cstring tableName)参数 参数名称 描述 tableName 数据库块表的名称。命名要求如下：以字母开头，以字母或数字结尾。由小写字母、数字或下划线（_）组成。长度为2~64个字符。名称在当前...
当RDS实例负载过大时，可以将该实例的一个数据库或表垂直拆分至另外一个单独的实例中。本文介绍如何通过双写方案和简易拆分方案实现垂直拆分。背景信息 假设一个RDS实例上有数据库A和B，随着业务增长实例瓶颈也日趋可见，如想要减轻该实例...
数据库备份DBS 提供数据恢复能力，通过创建恢复任务将已完成备份的数据恢复到云数据库、本地数据库或DBS沙箱中，可用于误操作后恢复以及分析历史数据等场景。前提条件 DBS备份计划的运行状态为 运行中。已完成数据库备份。相关操作，请参见...
支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 全量迁移 库表结构迁移 增量迁移 Db2 for LUW CONNECT、SELECT权限 CONNECT、SELECT权限 DBADM权限 AnalyticDB PostgreSQL版 目标库...
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
开源rds_dbsync的pgsql2pgsql是一个用于迁移PostgreSQL数据库的工具，常用于数据库备份、迁移、复制和同步等操作，可实现PostgreSQL、PPAS、Greenplum Database、AnalyticDB PostgreSQL版 数据库间相互迁移。pgsql2pgsql支持的功能 pgsql2...
支持 不支持 全球数据库 全球数据库网络（Global Database Network，简称GDN）是由分布在同一个国家内多个地域的多个 PolarDB 集群组成的网络。GDN网络中所有集群的数据保持同步，网络中每个集群均提供读服务（写服务会被转发到主集群处理...
恢复目标数据库 数据库所在位置 本例中将备份集恢复至提前新建的 RDS实例 实例中，请确保目标数据库服务正在运行中，同时还支持恢复至如下数据库实例所在位置：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入...
全量初始化会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量初始化完成后目标实例的表空间比源实例的表空间大。在DTS同步期间，不允许有除DTS外的数据写入目标库，否则会导致源库与目标库数据不一致。例如，有除DTS外的数据...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
数据库备份DBS 支持恢复已有备份数据到源备份数据库实例上，同时也支持恢复到其它已有数据库实例上，包括RDS实例、ECS上的自建数据库等，可用于误操作后恢复以及分析历史数据等场景。本文以恢复到已有RDS实例为例介绍恢复操作。前提条件 已...
在知晓误操作发生的时间点后，可以通过此方式，将误操作的数据库或者表恢复到误操作发生之前。前提条件 已存在备份集。因为按时间点恢复是先将所选时间点前的一个全量数据备份恢复到集群，然后根据Redo日志恢复增量数据到所选时间点。若您...
本文介绍如何在数据库自治服务DAS中接入阿里云ECS自建数据库。前提条件 DAS目前支持接入的ECS自建数据库引擎有：MySQL PostgreSQL MongoDB Redis 说明 目前DAS仅支持接入6.0及以下版本的自建Redis。部署数据库实例的ECS与DAS属于同一个阿里...
支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 全量迁移 库表结构迁移 增量迁移 Db2 for LUW CONNECT、SELECT权限 CONNECT、SELECT权限 DBADM权限 PolarDB MySQL版 目标库的读写...
即在 配置任务对象及高级配置 阶段中，同步类型 勾选了 库表结构同步 或者 迁移类型 勾选了 库表结构迁移。注意事项 当前仅MySQL实例（含RDS MySQL和自建MySQL）间的同步或迁移实例，支持将源库的账号迁移至目标库。说明 目标RDS MySQL实例...
恢复目标数据库 数据库所在位置 本例中将备份集恢复至提前新建的 RDS实例 实例中，请确保目标数据库服务正在运行中，同时还支持恢复至如下数据库实例所在位置：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入...
AnalyticDB PostgreSQL 数据库由许多数据库对象组成，包括表（table）、索引（index）、序列（sequence）、视图（view）、以及数据库（database），数据库对象在逻辑上是彼此分离，相互之间可以有包含关系。一个 AnalyticDB PostgreSQL ...
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。在DTS迁移期间，若有除DTS外的数据写入目标库，则会导致源库与目标库数据不一致。您可以在DTS...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
前提条件 已创建源 Db2 for LUW 数据库和目标 云原生数据仓库AnalyticDB MySQL版 3.0实例，支持的版本，请参见 同步方案概览。目标数据库的存储空间须大于源数据库占用的存储空间。注意事项 说明 在库表结构同步过程中，DTS会将源数据库中...
本文介绍如何通过 数据库备份DBS 恢复已完成备份的 PolarDB MySQL版 数据库，可用于误操作后恢复以及分析历史数据等场景。前提条件 已完成数据库备份。相关操作，请参见 PolarDB MySQL版逻辑备份。操作步骤 登录 DBS控制台。单击左侧导航栏...
支持的源和目标数据库 源数据库（副本集架构）目标数据库（副本集架构、分片集群架构）云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能...
数据库（Database）数据库属于目录，内部包含表、列、视图、函数和数据类型等。表（Table）表属于数据库。在 云数据库SelectDB版 中，表 是存储结构化数据的一种特殊形式。一张表由行（Row）和（Column）组成，其中行表示一行数据，列表示...
源数据库（单节点架构）目标数据库（所有架构）云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据...
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
本文介绍如何在 数据库备份DBS 中恢复已完成逻辑备份的Redis数据库，可用于误操作后恢复以及分析历史数据等场景。前提条件 已完成数据库备份。具体操作，请参见 Redis逻辑备份。操作步骤 本例中备份集将恢复到提前新建的 云数据库Redis ...
DBS还支持恢复至如下数据库实例所在位置：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的自建数据库 无公网IP:Port的自建数据库(通过数据库网关DG接入)说明 若您选择恢复至其他位置，您还需配置其他参数，...
TRUNCATE TABLE 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移：待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限，以允许...
数据库列表 var databasesToProcess=["database1","database2","database3"];shardNames.forEach(function(shardName){/遍历指定的数据库列表 databasesToProcess.forEach(function(dbName){ var dbInstance=db.getSiblingDB(dbName);获取...
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源数据库的表存储空间大。DTS会尝试恢复七天之内迁移失败任务。因此业务切换至目标实例前，请务必结束或释放该任务，...
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 数据库同步至 PolarDB分布式版。前提条件 已创建源 Db2 for LUW 数据库和目标 PolarDB分布式版 实例，支持的版本，请参见 同步方案概览。说明 PolarDB分布式版 需兼容...
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
重要 任务使用的源和目标数据库账号，需要具有元数据表mysql.user、mysql.db、mysql.columns_priv、mysql.tables_priv的SELECT权限。目标库已存在的账号和系统账号（如root、mysql.infoschema、mysql.session、mysql.sys等）不支持迁移。源...
PolarFS是中国内地面向DB应用设计的采用了全用户空间I/O栈的低延迟高性能分布式存储系统（参见VLDB 2018 上的文章 PolarFS:An Ultra-low Latency and Failure Resilient Distributed FileSystem for Shared Storage Cloud Database），其...