Q：数据库的备份文件占用实例磁盘空间吗？A：数据备份和日志备份存放于阿里云提供的备份空间，不占用实例的存储空间。说明 备份空间不对外开放访问。如需下载备份，请参见 下载备份。备份空间提供免费额度，超出额度时需付费，具体请参见 ...
Q：数据库代理的架构是怎样的？是否具备故障切换机制？如何保障其高可用性？A：数据库代理采用双节点高可用架构，流量按1:1均匀分配至两个代理节点。系统会持续检查代理节点的健康状态。当发现某个节点故障时，会主动断开该节点上的连接，...
RDS MySQL提供了两种方式升级数据库版本，您可以通过控制台直接升级数据库，也可以新购一个高版本MySQL实例，通过DTS数据迁移任务将原实例数据迁移至新实例中，实现数据库版本的间接升级。说明 RDS MySQL不支持从控制台直接降低数据库版本...
本文介绍如何使用 数据灾备 备份RDS MySQL只读实例。前提条件 已购买备份计划。购买方法，请参见 创建备份计划。说明 购买时，选择数据库类型为 MySQL，并选择备份...Q：数据灾备 支持备份只读实例的全量备份数据和增量备份数据吗？A：支持。
常见问题 Q：数据尚未从热数据盘存储至冷数据盘的原因是什么？A：数据是否迁至冷数据盘，取决于system.parts表中 move_ttl_info.min 和 move_ttl_info.max 的值大小。您可以使用以下语句获取二者的值。SELECT move_ttl_info.min,move_ttl_...
Q：同步数据对源集群性能有影响吗？A：同步数据涉及查询操作，会消耗源集群部分查询性能。Q：同步数据对业务有影响吗？A：同步数据能够保证同步过程不丢失数据，停机（即暂停业务，不产生增量数据，而非停用数据库）时间小于10分钟，如果有...
本文介绍如何使用Percona XtraBackup工具，将RDS MySQL的物理备份文件恢复到自建数据库。背景 RDS MySQL支持将实例备份文件恢复到自建数据库，当前支持物理备份文件恢复、逻辑备份文件恢复等多种方式。如何选择数据恢复方案，请参见 MySQL...
场景实践：批量处理多业务线分区表数据 本示例展示如何使用 赋值节点 和 for-each 节点 批量处理多个业务线的用户行为数据，实现一套处理逻辑服务多条产品线的自动化数据处理。业务背景 假设您是一家综合性互联网公司的数据开发工程师，...
说明 该参数在 数据库所在位置 参数为 有公网IP:Port的自建数据库、通过专线/VPN网关/智能网关接入的自建数据库、无公网IP:Port的自建数据库（通过数据库网关DG接入）时显示。端口 目标数据库的连接端口。说明 当 数据库所在位置 参数为 ...
方案架构与优势 以上图示基于典型数据分析场景设计，可以满足当日近实时数据的写入以及历史离线数据的更新与查询分析场景。实现增全量数据的统一校正（包括数据聚合、去重和反作弊等），定期将全量数据回写至DWD，并对应地更新DWS和ADS的...
Query ID 执行时间（单位：秒）DuckDB分析只读实例 RDS MySQL常规实例（InnoDB引擎）ClickHouse q1 0.92 1134.25 3.47 q2 0.15 1800 1.52 q3 0.53 802.94 3.65 q4 0.46 1000.45 2.77 q5 0.5 1800 5.38 q6 0.22 566.73 0.73 q7 0.59 1800 6....
Archive类型除了下载文件，还会在当前工作目录自动解压文件，此时需要用到两个 External Volume相关的参数来指引Spark程序处理External Volume对象包含的OSS数据：说明 以下参数需要配置在DataWorks的ODPS Spark节点配置项的 参数 中或配置...
在 数据源参数设置 页签中添加q1和q12两个参数，并按需进行配置。参数 描述 读取方式 可选择为顺序读取参数或是随机读取参数。数据轮询一次 设为轮询一次之后，在整个压测过程中，数据只会被使用一次；被指定为轮询一次的数据，即也为基准...
AnalyticDB PostgreSQL版 提供了样本数据集，方便您快速体验或测试 AnalyticDB PostgreSQL版 实例。样本数据集的相关查询语句，请参见 示例查询。注意事项 存储弹性模式实例内核小版本需为V6.3.10.3及以上，Serverless模式实例内核小版本需...
Q：数据导入工单预检查失败，提示不允许提交XXXX变更语句，该如何处理？A：管理员或DBA需要修改SQL变更安全规则，允许在导入时执行某类型SQL。如下以补充允许提交CREATE_TABLE为例：在DMS控制台中，找到并进入 安全规则 功能页面。编辑目标...
在小Q报告中，除了在编辑时可以添加仪表板组件、小Q问数及小Q解读结果等内容外，还支持在查看仪表板、进行小Q解读及小Q问数时，随时将感兴趣的内容添加到报告中，无需在编辑报告的过程中重复生成，从而提升数据分析的便捷性与效率。...
Q：业务成功切换后，为什么连接不上 PolarDB 数据库或连接成功但只支持读操作无法执行写入操作？A：切换域名后，可能会存在DNS解析缓存问题，在缓存过期时间内可能会出现连接不上数据库或数据库只支持读操作无法执行写入操作等情况，建议您...
Q：业务成功切换后，为什么连接不上 PolarDB-X 2.0标准版 数据库或连接成功但只支持读操作，无法执行写入操作？A：切换域名后，可能会存在DNS解析缓存问题，在缓存过期时间内可能会出现连接不上数据库或数据库只支持读操作无法执行写入操作...
A：两者间的区别如下表：对比项 一键升级RDS MySQL至 PolarDB MySQL版 一键克隆RDS MySQL至PolarDB MySQL版 是否支持迁移或同步增量数据 支持 不支持 是否影响源RDS操作 不影响 不影响 源和目标的MySQL版本能否不同 可以不同 可以不同 Q：...
恢复FAQ Q：数据误操作时，例如误删除（表、数据库、集群等）、误修改（整体覆盖或误修改表中的列、行、数据等），如何进行恢复？A：您可以根据业务场景，选择不同的方式恢复数据。恢复数据详情请参见 恢复方式一：按时间点恢复 和 恢复...
恢复FAQ Q：数据误操作时，例如误删除（表、数据库、集群等）、误修改（整体覆盖或误修改表中的列、行、数据等），如何进行恢复？A：您可以根据业务场景，选择不同的方式恢复数据。恢复数据详情请参见 恢复方式一：按时间点恢复 和 恢复...
基本问题 Q：云数据库专属集群MyBase 是什么意思？它和RDS数据库的区别是什么？A：云数据库专属集群MyBase 是由多台主机（底层服务器，如ECS I2服务器、神龙服务器）组成的集群，详情请参见 常见术语。相比直接使用RDS 或Redis 实例，专属...
常见问题 Q：JDBC读取数据报错：java.lang.NumberFormatException:For input string:"xxxx"A：尝试按照普通数据类型解析密文数据，例如 getInt/getBigDecimal/getBoolean/getLong/getFloat/getDouble，由于密文不符合普通数据类型格式要求...
说明 示例中-s 100 参数会产生大概6亿行的数据（67 GB），您可以根据情况适当调整测试数据量。git clone ...
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。核心能力 ...
Q：数据库被攻击了怎么办？A：查看集群白名单中的IP地址是否设置为0.0.0.0/0。Q：为什么无法通过ECS访问 PolarDB 数据库？A：请按以下步骤进行排查：检查ECS和 PolarDB 是否位于同一地域。检查ECS和 PolarDB 的网络类型是否相同，如果ECS和...
数据复制方式为异步，涉及数据保护的参数为：innodb_flush_log_at_trx_commit=2 sync_binlog=1000 说明 系统参数模板的参数不允许通过自定义参数模板进行修改。参数说明如下。参数 取值 说明 innodb_flush_log_at_trx_commit 1 事务提交时...
通过选择已注册的数据源端数据和目标端，实现全量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线全量数据同步一次性调度的任务。前提条件 已新建工作组，具体操作，请参见 新建工作组。已在工作组中...
数据管理DMS离线集成是一种低代码的数据开发工具，您可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。支持的数据库类型 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB...
场景三：定义目标字段 注意事项 在DataStudio界面单击运行 或高级运行 时，仅支持手动为离线同步任务配置的变量赋值常量，由于数据集成无法直接使用开发环境冒烟测试功能，建议您通过以下方式验证调度参数在调度场景下的替换情况。...
动作 动作 说明 请求热力线层 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如热力线层配置了API数据源为 https://api.test ，传到 请求热力线层 动作的数据为 { id:'1'}，则最终请求接口为 ...
本教程以MySQL数据源中的用户基本信息 ods_user_info_d 表和HttpFile中的网站访问日志数据 user_log.txt 文件为例，通过数据集成离线同步任务分别同步至私有OSS中，再通过Spark SQL创建外部表来访问私有OSS数据存储。本章节旨在完成数据...
本教程以MySQL数据源中的用户基本信息 ods_user_info_d 表和HttpFile中的网站访问日志数据 user_log.txt 文件为例，通过数据集成离线同步任务分别同步至私有OSS中，再通过Spark SQL创建外部表来访问私有OSS数据存储。本章节旨在完成数据...
离线同步任务支持您通过配置类似的数据过滤功能来决定同步全量数据还是增量数据，配置过滤条件时，将只同步满足过滤条件的数据。同时，过滤条件可以结合调度参数使用，实现过滤条件随任务调度时间的动态变化，进而实现增量数据的同步。该...
数据集成提供向导式的开发引导，您无需编写任何代码，通过在界面勾选数据来源与去向，并结合DataWorks调度参数，实现将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍向导模式配置离线同步任务的常规配置，各...
当需要实现更精细化的离线任务配置时，可以使用 脚本模式，通过编写数据同步的JSON脚本并结合DataWorks调度参数，将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务的常见配置，各数据源...
轨迹线层 子组件拥有交互配置，可单击某个线或鼠标移入到线时，触发数据请求，抛出回调值，实现在单击或鼠标移入到线时，动态加载不同线的数据。默认抛出所单击区域的 id 值，具体配置请参见 如何配置数字翻牌器组件的回调ID。蓝图编辑器...
动作 动作 说明 请求热力线层 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如热力线层配置了API数据源为 https://api.test ，传到 请求热力线层 动作的数据为 { id:'1'}，则最终请求接口为 ...
A：不同规格实例的传输性能不同，当实例其他参数相同且影响因素（传输网络的带宽和网络延时等）固定时，规格越高性能越强，更多信息请参见 数据迁移链路规格说明 和 数据同步链路规格说明。Q：为什么数据同步实例的价格普遍高于数据迁移...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...