通过此方式，可以有效降低数据同步延迟，实现数据的平滑过渡，减少对线上业务的影响。方案概述 本方案的核心思路是通过双写机制，在保障业务连续性的前提下完成数据迁移。基本流程如下：准备目标集群：购买目标集群，并在目标集群中创建好...
本文介绍冷数据的特点和适应场景，通过表格存储Tablestore和Delta Lake结合示例，演示数据的冷热分层。冷热分层可以充分利用计算和存储资源，以低成本承载更优质服务。背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和...
以MaxCompute、Hologres为例，2个任务写同一个分区数据（同步前清理分区数据 truncate），第一个任务写入的数据可能会被第2个同步任务清理掉。关系数据库配置了前置处理preSql、后置处理postSql等，第一个任务写入的数据可能会被第2个同步...
建议清除过期的Redis数据，云数据库和自建数据库的方法如下：云数据库 Tair（兼容 Redis）：登录 云数据库 Tair（兼容 Redis）控制台，执行清除数据操作。自建Redis数据库：使用redis-full-check做校验，检验的过程中执行SCAN 等命令触发...
本文档介绍配置资产数据的方法，以及资产数据面板的内容，包括数据接口、数据源、数据过滤器和数据轮询频次等。操作步骤 登录 DataV控制台。在 我的可视化 页面，单击您创建的可视化应用项目上方的 编辑 按钮。在画布编辑器页面，单击 图层...
若缺少任一任务的权限，将导致以下后果：直接目标任务无权限：若您对补数据的根任务或其任何下游任务没有操作权限，补数据 将无法执行。中间任务无权限：若某个无权限的任务是此次补数据的中间节点（其上下游均在补数据范围内），系统将对...
DLF存储优化支持表级自适应Compaction、过期快照清理、分区生命周期管理、废弃文件清理等能力，帮助用户降低Paimon表使用和运维复杂度，提升计算和存储的使用效率。本文讲述DLF后台执行的智能存储优化策略及其执行机制。重要 产品在邀测...
元素 描述 表名（Table）时序表代表一系列同类时序数据的集合，例如为空气质量传感器建立一个Table，存储所有传感器的监测数据。标签（Tag）Tag描述数据源的特征，通常不随时间变化，例如传感器设备，包含设备DeviceId、设备所在的Region等...
迁移性能 延迟 同步延迟 是指同步或迁移到目标库的最新数据的时间戳，与源库的当前时间戳之间的差值。如果延迟为0，则源数据库与目标库的数据完全同步。说明 DTS实例的延迟时间可能不会始终显示为0。在源库无数据写入且DTS实例的延迟为0...
备份数据量指当月备份数据的流量，为每次备份持续累计的结果。即使这个备份因为达到备份上限后被删除了，实际数据量也不会下降。如果增量备份数据量为0，可能原因为：从未开启过增量备份。如何开启，请参见 开启或关闭增量日志备份。已开启...
数据源配置是创建组件和展示业务数据的关键步骤，具有数据接入、数据处理和数据实时更新的功能。本文介绍如何进行配置组件数据。功能说明 DataV-Board 支持接入 各种业务数据，包括静态数据、数据库、应用网关等。通过数据源配置，将业务...
数据水印 可在文件中嵌入水印或将文件的水印提取出来，在数据的散布或分发过程中追溯源头。权限管理 您可以申请实例、库、表、敏感列等内容的权限，还可以查看拥有的权限。解决方案 数据归档 数据归档功能支持定时将大表的数据归档至其他...
数据水印 可在文件中嵌入水印或将文件的水印提取出来，在数据的散布或分发过程中追溯源头。开启安全访问代理 使用标准的MySQL、HTTPS协议，直接连接安全访问代理生成的数据库实例的代理地址，实现数据库的安全访问。数据安全卫士 数据安全...
只要写入过程中没有出现报错，相应的数据一定会写入成功，即使遇到机器宕机等情况，都可以通过恢复WAL的方式恢复数据，保障数据的持久性，不会出现数据写入后非预期不可见的情况。但是由于宽表引擎的特性比较多，例如数据版本号、时间戳、...
数据水印 可以嵌入水印或将文件的水印提取出来，在数据的散布或分发过程中追溯源头。开启安全访问代理 使用标准的MySQL、HTTPS协议，直接连接安全访问代理生成的数据库实例的代理地址，实现数据库的安全访问。数据安全卫士 数据安全卫士...
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
图表样式 飞线层是3D地球的子组件，支持独立的样式和数据配置，包括飞线的半径、弧度、类型以及起始点经纬度等，适用于OD数据的线型表达，通常表示两地之间的关联，如物流、交易等。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项...
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
开通敏感数据保护 管理敏感数据 管理分类分级模板 管理识别模型 新增脱敏算法 数据水印 可用于数据的散布或分发过程中追溯源头，其包含水印嵌入和水印提取。水印嵌入是指将标识信息嵌入到数据或文件中，使其具备一定的标识度；水印提取是指...
说明 若接收数据的目标表不是通过DTS创建（同步类型 未选中 库表结构同步），则需确保该表与源库中待同步的表具备相同的主键或非空唯一约束，否则可能会导致目标数据库中出现重复数据。待同步的数据库名称中间不能包含短划线（-），例如dts...
使用数据探查 数据探查功能分析当前数据的 质量、结构、分布 和 统计信息，帮您完成数据的预览、探查、加工、分析和可视化。数据探查简单模式：选中数据，单击上方工具栏的 数据探查，系统会自动分析每列数据的 类型、分布、空值 和 重复值...
通过只读权限，DSC 可以检测并识别云数据库实例（表、Bucket）中的敏感数据，以保障数据的安全性。一键连接说明 支持的数据资产类型：RDS、PolarDB、PolarDB-X、PolarDB-X 2.0（只读实例不支持）、Redis、OSS、TableStore、MaxCompute。...
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
DB2数据源作为数据中枢，为您提供读取和写入DB2数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DB2数据同步的能力支持情况。支持的版本 DB2 Reader和DB2 Writer使用的DB2驱动版本为 IBM Data Server Driver ...
说明 若接收数据的目标表不是通过DTS创建（迁移类型 未选中 库表结构迁移），则需确保该表与源库中待迁移的表具备相同的主键或非空唯一约束，否则可能会导致目标数据库中出现重复数据。待迁移的数据库名称中间不能包含短划线（-），例如dts...
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
StarRocks提供两种分桶方式：哈希分桶：根据数据的分桶键值，将数据划分至分桶。选择查询时经常使用的条件列组成分桶键，能有效提高查询效率。随机分桶：随机划分数据至分桶。这种分桶方式更加简单易用。数据类型 除了基本的数据类型，如...
数据过滤 您将要同步数据的筛选条件，暂时不支持limit关键字过滤。SQL语法与选择的数据源一致，此处可以不填。切分键 读取数据时，根据配置的字段进行数据分片，实现并发读取，可以提升数据同步效率。此处可以不填。选择数据去向。参数 ...
组件示例数据源面板中默认只配置了第一个数据的图标字段，如您还需配置其他选项的图标，可自定义配置对应数据项的 imgSrc 字段。参数 说明 宽度 图标的宽度。高度 图标的高度。距离文字间距 图标与文字之间的距离。选项悬浮样式 参数 说明 ...
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
逻辑表 输入表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中提供数据的数据表的结构。当选择数据表时，。当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的...
Paxos协议 Paxos协议在组复制中的作用包括：确保集群中各节点收到数据的顺序一致，这是多主模式实现的基础。确保多数派收到数据后事务才能提交，提升数据可靠性。在Paxos协议中，使用锁的方式来实现节点间顺序一致性，这种方式存在一定的...
Oracle 数据库写入 GIS 类型数据的限制如下：不支持写入 SRID 为 0、4327 和 4328 的数据。不支持写入 SDO_POINT_TYPE(0.00001,0.00001,0)等会在使用 get_wkt 之后被转换成科学计数法表示的数据。仅支持写入坐标数据范围在-2147483647~...
图表样式 基本散点图是使用散点来展示数据的一种图表，适用于展示不同时间下离散数据的差异。基本散点图支持自定义x轴、y轴以及散点的样式，支持多系列数据配置，支持提示框交互和动画效果展示。样式面板 搜索配置：单击 样式 面板右上角的...
请求路径和方法 请求路径 请求方法 描述/api/delete_data POST 删除数据 请求内容 名称 类型 是否必需 描述 默认值 举例 metric String 是 待删除数据的 Metric 无 cpu tags Map 否 待删除的时间线。该参数不是必选，在没有 tag 的情况下,...
本文档旨在介绍如何通过提交数据归档工单实现归档数据。背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档以新建数据归档为例，介绍如何在 ODC 中将同一项目的...
图表样式 指标对比饼图是饼图的一种，与基本饼图相比，指标对比饼图能够同时展示数据的真实值和百分比值，适用于展示两个指标数据的对比情况，仅支持两个数据系列的配置。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在...
组件示例数据源面板中默认只配置了第一个数据的图标字段，如您还需配置其他选项的图标，可自定义配置对应数据项的 imgSrc 字段。参数 说明 宽度 图标的宽度。高度 图标的高度。距离文字间距 图标与文字之间的距离。选项悬浮样式 参数 说明 ...
通过只读权限，DSC 可以检测并识别云数据库实例（表、Bucket）中的敏感数据，以保障数据的安全性。重要 若您是在2025年6月30日 18：00前购买的数据安全中心或者当前版本为企业版1.0、高级版1.0和基础版（已停止新购），以上情况请参考 资产...
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...