参数说明 参数名称 描述 lob_1 在比较操作中第一个大对象的位置，和参数 lob_2 代表的大对象的数据类型必须相同。lob_2 在比较操作中第二个大对象的位置，和参数 lob_1 代表的大对象的数据类型必须相同。amount 如果大对象是BLOB类型，则是...
DBMS_REDACT内置包用于对低权限用户或应用查询的数据进行脱敏处理，保护数据库数据安全。DBMS_REDACT子程序总览 子程序 说明 ADD_POLICY Procedure 添加数据脱敏策略。ALTER_POLICY Procedure 修改数据脱敏策略。DISABLE_POLICY Procedure ...
DataWorks数据集成支持复杂网络环境下的数据同步，您可在数据开发（DataStudio）界面直接 创建离线同步节点，用于离线（批量）数据周期性同步；实时同步任务运维，用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。背景...
动作 动作 说明 请求飞线 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。飞线层配置了API数据源为 https://api.test ，传到 请求飞线 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 。导入飞线...
动作 动作 说明 请求飞线 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如飞线层配置了API数据源为 https://api.test ，传到 请求飞线 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 。导入...
动作 动作 说明 请求飞线 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如弧线层配置了API数据源为 https://api.test ，传到 请求飞线 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 。导入...
OD飞线是三维城市构建器的图层，支持独立的样式和数据配置，能够以飞线的形式表现地理位置上两个点之间的OD数据，可以用来展示两地之间的关联信息，如物流、交易等。本文介绍OD飞线各配置项的含义。在场景编辑器左侧图层列表中，单击 OD飞...
线热力层是基础平面地图的子组件，支持独立的样式、数据和交互配置，能够以热力线的形式表现地理位置上的线路信息，适用于地图上线路图的大屏展示，例如展示地铁线路图。本文介绍线热力层各配置项的含义。重要 当前为v1.x版本的线热力层子...
DataWorks的数据集成为您提供MongoDB Writer插件，可从其他数据源中读取数据，并将数据同步至MongoDB。本文以一个具体的示例，为您演示如何通过数据集成将MaxCompute的数据离线同步至MongoDB。前提条件 本实践进行操作时，需满足以下条件。...
任务调度与管理 离线同步依托DataWorks强大的调度能力，为您实现离线任务的周期性自动调度执行，同时，可以结合DataWorks调度参数，实现增量数据和全量数据写入到目标表对应分区，离线同步任务的运维操作与其他离线调度任务操作一致，支持...
该图元的主要特征：一条弧线对应一个线数据，且线仅包含两个点，对应起点和终点。线具有流动动画，且具有方向性，动画配置项中的速度的正负可控制方向。飞线线型有“矢量”和“贴图”两种，“矢量”型由基线叠加高亮线组成，无需贴图；...
long startTime,long endTime)参数：metric-metric startTime-start timestamp endTime-end timestamp 删除时间线 deleteMeta public void deleteMeta(String metric，Map String,String tags)从接口复制的说明：TSDB 删除时间线数据。...
动作 动作 说明 请求飞线 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如弧线层配置了API数据源为 https://api.test ，传到 请求飞线 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 。导入...
请求轨迹线数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如动态轨迹层配置了API数据源为 https://api.test ，传到 请求数据 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 。导入...
附录：脚本Demo与参数说明 离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要按照统一的脚本格式要求，在任务脚本中编写相应的参数，详情请参见 脚本模式配置，以下为您介绍脚本模式下数据源的参数配置详情。...
Dataphin支持自定义离线数据源，以满足不同业务场景数据同步的需求。前提条件 对于RDBMS数据库，已获取数据库驱动文件。对于其他类型数据库，获取数据源连接配置项的JSON代码和读/写插件。背景信息 RDBMS数据库即关系型数据库，如MySQL、...
Dataphin支持自定义离线数据源，以满足不同业务场景数据同步的需求。前提条件 对于RDBMS数据库，已获取数据库驱动文件。对于其他类型数据库，获取数据源连接配置项的JSON代码和读/写插件。背景信息 RDBMS数据库即关系型数据库，如MySQL、...
数据写入场景 面对具有突发性和热点性的客户行为日志，如评论、评分和点赞，传统的关系型数据库和离线数据分析方法在处理这类数据时可能存在资源消耗大、成本高、数据延迟以及更新复杂的问题，通常只能满足次日分析需求。针对上述问题，您...
创建TDSQL for MySQL数据源 创建Hive数据源 创建MySQL数据源 创建Microsoft SQL Server数据源 创建PostgreSQL数据源 创建Oracle数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for MySQL 3.0数据源 创建AnalyticDB for ...
否 0[0,99999999]中值滤波、滑动平均滤波、FIR滤波、最大值滤波、最小值滤波、趋势线拟合滤波：参数名 参数描述 是否必填 参数默认值 参数范围 采样方式 获取滤波数据的方式。按时间：使用过去一段时间的输入数据。按次数：使用过去若干次...
使用DataWorks数据地图查看表或数据服务API时，可在对应的详情页面查看详细的血缘信息，这对于数据溯源及管理有很大帮助，本文为您介绍数据地图的血缘查看能力。表血缘 查看入口 查找某张表并进入表详情页面后，您可以单击 血缘信息 页签，...
DataV通过与DataWorks数据服务的对接，通过交互式分析Hologres连接DataWorks数据服务开发并生成API，快速在DataV中调用API并展现MaxCompute的数据分析结果。数据服务对接DataV产生背景 MaxCompute是阿里巴巴集团自主研究的快速、完全托管的...
大容量支持：单次导入数据量可达百GB级别，适合大规模迁移离线数据。异步高并发：非阻塞异步写入，提高了集群资源的利用率。兼容性强：支持读取HDFS、S3等远端存储数据。操作便捷：可通过标准的MySQL协议创建导入任务，进行数据导入。可...
数据配置功能可以对文件参数进行二次定义、数据轮询一次等相关设置。本文介绍如何使用数据配置指令。背景信息 数据配置指令功能如下：自定义参数：二次定义全局参数，包括全局自定义参数和全局文件参数。文件参数设置：根据实际需求指定...
自定义条件 过滤条件，例如输入ID 12，表示将ID的值大于12的数据传输至目标路径。说明 仅当传输链路为ApsaraDB for RDS传输到MaxCompute时，才会显示当前参数。目标端配置 开发目标端 开发环境中传输链路输出端的云计算资源类型。逻辑表 ...
100 splitInterval:6h mem:Xms6G-Xmx6G 1.5 MB 230000 12分钟30秒 CPU占比为30%2 总时间线数据为600万 总数据点数为2592000000 1 channel:10 oidCache:true oidBatch:100 splitInterval:6h mem:Xms8G-Xmx8G 292 MB 200000 2小时55分钟30秒 ...
自定义条件 过滤条件，例如输入ID 12，表示将ID的值大于12的数据传输至目标路径。说明 仅当传输链路为ApsaraDB for RDS传输到MaxCompute时，才会显示当前参数。目标端配置 开发目标端 开发环境中传输链路输出端的云计算资源类型。逻辑表 ...
您可以根据不同的数据来源选择不同的导入方式：离线数据导入：如果数据源是Hive或HDFS，推荐使用 Broker Load。如果数据表很多导入比较麻烦可以使用Hive外表，性能会比Broker load导入效果差，但是可以避免数据搬迁。如果单表的数据量特别...
背景信息 在数据传输控制台创建从 OceanBase 数据库 Oracle 租户迁移数据至 Oracle 数据库的数据迁移任务，您可以通过结构迁移、全量迁移和增量同步，无缝迁移源端数据库中的存量业务数据和增量数据至 Oracle 数据库。数据传输支持将多个 ...
时序异常检测搭配 SAMPLE BY 语句可以实现以下功能：搭配 SAMPLE BY 0 子句，针对每条时间线上的数据逐点检测。使用示例，请参见 示例一、示例二 和 示例三。在 SAMPLE BY INTERVAL 语句中指定降采样粒度（INTERVAL），并嵌套降采样算子，...
SDO_GEOMETRY SDO_GEOMETRY 检查和修改 Oracle 实例的系统配置 您需要进行下述操作：在源端 Oracle 数据库开启归档模式 在源端 Oracle 数据库开启补偿日志（可选）设置 Oracle 数据库的系统参数 在源端 Oracle 数据库开启归档模式 SELECT ...
路径参数 参数名 类型 是否必填 描述 dataset_id string 是 数据集的UUID 请求参数 参数名 类型 是否必填 描述 description string 否 数据集描述，默认为null，最大支持2000个字符。rag_type string 否 RAG类型，当前仅支持GraphRAG（默认...
选择数据源 选择需要进行数据推送的 数据源类型，数据源名称，以及 数据源环境（您可根据本次数据推送的开发表还是生产表来选择数据源环境），确定需要进行数据推送的数据表所在环境。若您需要实操，请确认您准备工作阶段创建的sales表所在...
在调用部分接口配置或查询迁移或同步、订阅任务时，您需要配置或查询预留参数Reserve（数据类型为字符串String，传入格式为JSON）来完善或查看源或目标实例的配置信息（比如目标Kafka集群的数据存储格式、云企业网CEN的实例ID）。...
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。核心能力 ...
当您将包含多个文件和目录的Bucket挂载到本地时，可以通过优化挂载参数来显著提高使用 ls 命令列出文件的速度。前提条件 已 创建Bucket。已 安装ossfs。适用场景 Bucket目录下存在大量文件或文件夹。Bucket内不包含任何软链接文件，且不...
通过选择已注册的数据源端数据和目标端，实现全量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线全量数据同步一次性调度的任务。前提条件 已新建工作组，具体操作，请参见 新建工作组。已在工作组中...
说明 文中图片所示中的数据为测试用例数据，实际使用过程中，请以实际数据参数为准，包括线程ID、SQL语句等。前提条件 目标数据库引擎为：最近死锁分析：RDS MySQL 自建MySQL PolarDB MySQL版 PolarDB-X 2.0 全量死锁分析：RDS MySQL ...
场景三：定义目标字段 注意事项 在DataStudio界面单击运行 或高级运行 时，仅支持手动为离线同步任务配置的变量赋值常量，由于数据集成无法直接使用开发环境冒烟测试功能，建议您通过以下方式验证调度参数在调度场景下的替换情况。...
动作 动作 说明 请求热力线层 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如热力线层配置了API数据源为 https://api.test ，传到 请求热力线层 动作的数据为 { id:'1'}，则最终请求接口为 ...