数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 组件数据源配置。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤...
动作 动作 说明 请求飞线 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如飞线层配置了API数据源为 https://api.test ，传到 请求飞线 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 。导入...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
二、配置数据来源与去向 配置数据来源（Hive）本文档将Hive数据单表离线同步至MaxCompute，数据来源为Hive表，关键配置参数如下。配置项 配置要点 读取Hive方法 基于HDFS文件读取数据：Hive Reader插件通过访问HiveMetastore服务，解析出您...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
MaxCompute支持通过DataWorks的数据集成功能将MaxCompute中的数据以离线方式导出至其他数据源。当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时，您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
飞线层是3D平面中国地图的子组件，支持独立的样式和数据配置，包括飞线的速度、颜色、粗细以及起始点的经纬度等，能够以飞线动画的形式表现两个地理坐标点之间的过渡效果。本文介绍飞线层各配置项的含义。单击 子组件管理 下方的 飞线层，...
本教程以MySQL中的用户基本信息 ods_user_info_d 表和OSS中的网站访问日志数据 user_log.txt 文件为例，通过数据集成离线同步任务分别同步至StarRocks的 ods_user_info_d_starrocks、ods_raw_log_d_starrocks 表。旨在介绍如何通过...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
图表样式 轨迹线层是基础平面地图 4.0的子组件，支持独立的样式和数据配置，能够以一批轨迹点连线的形式表示人或物体移动的轨迹。样式面板 说明 样式面板中设置交互效果时，点击和悬浮显示方式相关配置仅在预览、发布或启用交互模式时可见...
本教程以MySQL中的用户基本信息 ods_user_info_d 表和OSS中的网站访问日志数据 user_log.txt 文件为例，通过数据集成离线同步任务分别同步至StarRocks的 ods_user_info_d_starrocks、ods_raw_log_d_starrocks 表。旨在介绍如何通过...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
通过创建ClickHouse数据源能够实现Dataphin读取ClickHouse的业务数据或向ClickHouse写入数据。本文为您介绍如何创建ClickHouse数据源。背景信息 如果您使用的是数据库ClickHouse，引入ClickHouse的业务数据至Dataphin中或将Dataphin数据...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
阿里云DataWorks数据集成推出Embedding向量化功能，支持将分散在OSS、MaxCompute、HDFS等异构来源中的数据抽取并转化为向量，写入Milvus、Elasticsearch、Opensearch等向量库，以及Hologres向量表等具备向量存储能力的目标端，能够大幅简化...
连接重试次数将默认应用于 离线集成任务 与 全域质量（需开通资产质量功能模块），离线集成任务中支持单独配置任务级别的重试次数 选择 默认资源组，该资源组用于运行与当前数据源相关任务，包括数据库SQL、离线整库迁移、数据预览等。...
通过创建IBM DB2数据源能够实现Dataphin读取IBM DB2的业务数据或向IBM DB2写入数据。本文为您介绍如何创建IBM DB2数据源。背景信息 IBM DB2是一套关系型数据库管理系统。如果您使用的是IBM DB2，在对接Dataphin进行数据开发时，您需要先...
图表样式 路网轨迹层是3D地球的子组件，支持独立的样式和数据配置，包括轨迹线的长宽、运动速度、颜色以及轨迹点经纬度等，适用于模拟地理位置两点或多点之间的运动行为轨迹。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
通过创建SAP HANA数据源能够实现Dataphin读取SAP HANA的业务数据或向SAP HANA写入数据。本文为您介绍如何创建SAP HANA数据源。背景信息 SAP HANA是一种多模型数据库，它将数据存储在内存中，而不是保存在磁盘上。面向列的内存数据库设计...
DataWorks的离线同步节点提供读取（Reader）和写入（Writer）插件，简化了从源数据库到目标数据库的数据迁移过程。您可以在可视化界面配置数据源与目标源，结合DataWorks的调度能力，实现全量或增量数据同步。本文将以MaxCompute作为源数据...
通过创建Amazon RDS for DB2数据源能够实现Dataphin读取Amazon RDS for DB2的业务数据或向Amazon RDS for DB2写入数据。本文为您介绍如何创建Amazon RDS for DB2数据源。权限说明 仅支持拥有 新建数据源 权限点的自定义全局角色和 超级管理...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
连接重试次数将默认应用于 离线集成任务 与 全域质量（需开通资产质量功能模块），离线集成任务中支持单独配置任务级别的重试次数 说明 重复参数 的取值规则：若某一参数同时存在于 JDBC URL、高级设置 的参数和 主机配置 方式的参数配置中...
连接重试次数将默认应用于 离线集成任务 与 全域质量（需开通资产质量功能模块），离线集成任务中支持单独配置任务级别的重试次数 选择 默认资源组，该资源组用于运行与当前数据源相关任务，包括数据库SQL、离线整库迁移、数据预览等。...
本文以MaxCompute单表离线同步写入ClickHouse场景为例，为您介绍ClickHouse离线同步在数据源配置、网络联通、同步任务配置方面的最佳实践。背景信息 云数据库ClickHouse是面向联机分析处理的列式数据库。数据集成支持从ClickHouse同步数据...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
参数 说明 飞线样式 单击 飞线样式 左侧的 图标，可控制该条件下的飞线的线类型，飞线粗细、飞线的颜色、飞线的长度、飞线的弧度和飞线边缘模糊的显隐。线头样式 单击 线头样式 左侧的 图标，可控制该条件下的飞线线头样式的显隐，包括线头...
连接重试次数将默认应用于 离线集成任务 与 全域质量（需开通资产质量功能模块），离线集成任务中支持单独配置任务级别的重试次数 说明 重复参数 的取值规则：若某一参数同时存在于 JDBC URL、高级设置 的参数和 主机配置 方式的参数配置中...
通过创建Amazon RDS for SQL Server数据源能够实现Dataphin读取Amazon RDS for SQL Server的业务数据或向Amazon RDS for SQL Server写入数据。本文为您介绍如何创建Amazon RDS for SQL Server数据源。权限说明 仅支持具备 新建数据源权限点...
DataWorks数据集成提供便捷高效的整库离线同步解决方案，旨在帮助您将源数据库中的全部或部分表，一次性或周期性地全量/增量迁移到目标数据存储中。该功能极大地简化了传统数据迁移中需要为每张表手动创建同步任务的繁琐流程，能够自动在...
通过创建Amazon RDS for PostgreSQL数据源能够实现Dataphin读取Amazon RDS for PostgreSQL的业务数据或向Amazon RDS for PostgreSQL写入数据。本文为您介绍如何创建Amazon RDS for PostgreSQL数据源。权限说明 仅支持具备 新建数据源权限点...
由于DataWorks的标准离线同步任务无法直接实现这一需求，我们可以通过创建赋值节点来获取每日的地域二级分区信息，并利用for-each节点的循环特性，将这些二级分区数据作为参数传递给离线同步脚本。离线同步脚本会根据获取的分区参数信息，...
通过创建IBM DB2数据源能够实现Dataphin读取IBM DB2的业务数据或向IBM DB2写入数据。本文为您介绍如何创建IBM DB2数据源。背景信息 IBM DB2是一套关系型数据库管理系统。如果您使用的是IBM DB2，在对接Dataphin进行数据开发时，您需要先...
通过创建SAP HANA数据源能够实现Dataphin读取SAP HANA的业务数据或向SAP HANA写入数据。本文为您介绍如何创建SAP HANA数据源。背景信息 SAP HANA是一种多模型数据库，它将数据存储在内存中，而不是保存在磁盘上。面向列的内存数据库设计...
通过创建Amazon RDS for DB2数据源能够实现Dataphin读取Amazon RDS for DB2的业务数据或向Amazon RDS for DB2写入数据。本文为您介绍如何创建Amazon RDS for DB2数据源。权限说明 仅支持拥有 新建数据源 权限点的自定义全局角色和 超级管理...