数据管理DMS 的空库初始化功能支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。前提条件 支持的数据库类型如下：MySQL：RDS MySQL、PolarDB MySQL版、...
希望对数据库的表结构设计规范进行管控。例如建表时一定要有主键，在已有表上新增字段不允许为空等。希望数据库不能执行例如删数据、删表等高危操作的语法，仅能执行数据查询（SELECT）语法。希望对数据库的某些操作进行差异化的审批流程...
一级功能 二级功能 功能描述 结构变更 结构设计 可以对目标库、表进行符合研发规范的表结构设计，保障多套环境（例如开发环境、测试环境、生产环境）之间结构的一致性。结构同步 支持对比不同数据库、指定表之间的表结构，产生差异化脚本并...
表结构发布流程化可保障您在自助变更表结构的同时，满足企业的设计规范、不同数据库环境之间相关表结构的一致性，大大提升生产发布的成功率。本文以自定义结构设计流程为例为您介绍规范、安全的表结构发布流程，流程节点包括设计结构...
场景说明 某学校为方便学生在线上快捷选课、学期末快速统计成绩，计划建立一个学生选课系统，该系统后端数据库采用阿里云RDS PostgreSQL数据库，针对此场景，需要设计数据库相关表结构，数据库表中需要存储学生信息、课程信息以及成绩信息...
背景信息 为解决变更数据库表结构时的锁表问题，ODC V4.2.0 版本提供了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...
适用场景 变更数据库表结构。变更表的字符集和校验集、调整时区等。规避Optimize Table操作回收表空间、降低碎片率引起的锁表。具体操作，请参见 无锁结构变更回收碎片空间。支持的数据库类型 RDS MySQL、PolarDB MySQL版、MyBase MySQL、...
数据管理DMS提供的结构设计功能，可以实现对目标库、表进行符合研发规范的表结构设计。您可按需自定义不同业务线的研发流程，保障多套环境（例如开发环境、测试环境、生产环境）之间结构的一致性。本文以物理库为例，介绍进行结构设计的...
默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 Kafka topic database.history.kafka.topic=dbhistory ...
数据管理DMS提供的结构设计功能，可以实现对目标库、表进行符合研发规范的表结构设计。您可按需自定义不同业务线的研发流程，保障多套环境（例如开发环境、测试环境、生产环境）之间结构的一致性。本文以物理库为例，介绍进行结构设计的...
设置审批流程 自定义工单审批流程 数据库开发管理 功能集 功能 功能描述 参考文档 结构变更 结构设计 可以实现对目标库、表进行符合研发规范的表结构设计。您可按需自定义不同业务线的研发流程，保障多套环境（例如开发环境、测试环境、...
数据管理DMS提供的结构设计功能，可以实现对目标库表进行符合研发规范的表结构设计。您可按需自定义不同业务线的研发流程，保障多套环境（例如开发环境、测试环境、生产环境）之间结构的一致性。本文介绍逻辑表结构设计的方法。背景信息 分...
数据管理DMS的DevOps迭代提供了逐阶段推进研发流程的...删除可选数据库：从 迭代可选数据库 列表中勾选要删除的目标数据库，单击，目标数据库从 迭代可选数据库 列表中移除。迭代模板：单击 迭代模板 后的迭代模板名称，查看迭代模板详情。
可视化数据查询结果呈现 Y Y Y SQL格式化 Y Y Y SQL智能提示 Y Y Y 表结构管理 表结构对比 Y Y Y 表结构编辑 Y Y Y 表结构同步 Y Y Y 数据字典导出 5个 无限制 无限制 表结构设计规范 N N Y 表结构研发流程 N N 支持跨云账号、跨数据库和自...
数据管理DMS 提供的表结构设计规范中的字段存在性保障功能，帮助您后续进行数据分析、数据清理等操作。本文介绍通过配置安全规则完成保障字段存在性的操作步骤。前提条件 系统角色为管理员、DBA。查看系统角色的具体方法，请参见 查看我的...
更多详情，请参见 表结构设计。观察集团商品销售总表中的几列数据，按单据编号分布较随机，且购物篮分析中，会用到单据编号做JOIN，因此用单据编号做分区键；用日期做二级分区，由于不再导入数据，在这里选择lifecycle为100。建表语句如下...
设计关系型数据库表结构时一般尽量避免使用大宽表，因为过多的列往往加重IO和内存负担而影响性能，例如即使只需要少部分列数据时仍然要读取整个行而导致大量无效IO，一般会考虑通过拆分表或使用关联表等方式来优化表结构。对于列存来说大宽...
更多详情，请参见 表结构设计。观察集团商品销售总表中的几列数据，按订单编号分布较随机，因此用订单编号做分区键，用日期做二级分区，由于不再导入数据，在这里选择lifecycle为100。建表语句如下：Create Table `demo_orders`(`商品编号`...
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
本文将为您介绍如何导出表结构、SQL查询结果集、整个数据库。前提条件 数据库关联的安全规则已开启 结果集是否支持导出 规则（系统默认开启）。更多信息，请参见 SQL窗口-关系型数据库。具有目标数据库的查询、导出等权限。更多信息，请...
数据库 库表结构迁移 全量迁移 增量迁移 ECS自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移：待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW MyBase MySQL实例 读写权限 数据库账号创建及授权方法：自建...
数据库 库表结构迁移 全量迁移 增量迁移 自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移：待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限，以允许DTS创建库dts，用于记录迁移期间的心跳...
即在 配置任务对象及高级配置 阶段中，同步类型 勾选了 库表结构同步 或者 迁移类型 勾选了 库表结构迁移。注意事项 当前仅MySQL实例间的同步或迁移、MySQL实例同步或迁移到 PolarDB MySQL版 集群、PolarDB MySQL版 集群间的同步或迁移实例...
注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
TRUNCATE TABLE 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移：待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限，以允许...
DDL CREATE TABLE、DROP TABLE、RENAME TABLE、TRUNCATE TABLE、ADD COLUMN、DROP COLUMN 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 PolarDB-X 2.0 SELECT权限 SELECT权限 REPLICATION SLAVE、REPLICATION CLIENT及待...
重要 任务使用的源和目标数据库账号，需要具有元数据表mysql.user、mysql.db、mysql.columns_priv、mysql.tables_priv的SELECT权限。目标库已存在的账号和系统账号（如root、mysql.infoschema、mysql.session、mysql.sys等）不支持迁移。源...
TRUNCATE TABLE 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 OceanBase 用户 SELECT权限 租户 普通租户 普通租户 普通租户 重要 需要在OceanBase数据库所在服务安装oblogproxy（增量日志代理服务）并配置系统租户，详情请...
RDS MySQL实例 MySQL自建数据库：有公网IP的自建数据库 ECS上的自建数据库 通过数据库网关接入的自建数据库 通过云企业网CEN接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 说明 本文以 RDS MySQL 实例为源数据库介绍配置...
支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 源 PolarDB-X 2.0 SELECT权限 SELECT权限 REPLICATION SLAVE、REPLICATION CLIENT及待迁移对象的...
DDL DROP TABLE、RENAME TABLE、TRUNCATE TABLE、ADD COLUMN、DROP COLUMN 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 PolarDB-X 2.0 实例 SELECT权限 SELECT权限 REPLICATION SLAVE、REPLICATION CLIENT及待迁移对象的...
说明 如果选择 库表结构迁移，DTS会将源数据库中待迁移表的结构（包含外键）迁移到目标数据库。如果未选择 增量迁移，为保障数据一致性，数据迁移期间请勿在源实例中写入新的数据。目标已存在表的处理模式 预检查并报错拦截：检查目标数据...
TRUNCATE TABLE 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移：待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限，以允许...
注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
支持增量迁移的SQL 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL ADD COLUMN DROP COLUMN、DROP TABLE TRUNCATE TABLE 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 源 PolarDB MySQL版 集群 SELECT权限 SELECT...
本文介绍如何解决结构设计中表结构与变更基准库中表结构不一致问题。解决方法 请在目标表关联的所有工单状态为 设计中 的工单（工单状态为 已发布 ...此时，系统会重新采集数据库元数据，确保结构设计中的表结构和变更基准库中的表结构一致。
TRUNCATE TABLE 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 自建MariaDB数据库 SELECT权限 SELECT权限 增量数据迁移：待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限，以允许...
注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
在MaxCompute、数据库的表结构发生变化后（仅指数据表的列有新增或删减），会触发自动扫描并扫描有变化的列；数据表的行发生变化不会触发自动扫描。对该数据源中的所有数据收取全量扫描费用。在OSS文件新增和修改后会触发自动扫描。说明 ...
注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...