空间数据类型 Lindorm Ganos的SQL接口支持的空间数据类型如下表：数据类型 描述 使用示例 Geometry 表示通用的空间对象，是Point、LineString和Polygon的父类型。不建议直接将空间列定义为Geometry。创建时空数据表时指定空间列的数据类型...
使用 PSQL \d 命令可显示表定义，“类型”列根据表定义中的数据类型显示内部分配给每个列的数据类型：\d data_type_aliases Column|Type|Modifiers-+-+-dt_blob|bytea|dt_long_raw|bytea|dt_raw|bytea(4)|dt_bytea|bytea|dt_integer|...
配置单个数据源 单击目标数据源类型下的组件，即可在右侧 数据源 页签按需配置数据源的数据类型、过滤器、数据映射等信息，详情请参见 组件数据源配置。批量修改数据源 通常，如需统一多个组件的数据来源（例如，将所有使用静态数据的组件...
通过讲述数据集成数据同步的原理机制，理解数据同步的过程，进而对数据同步的执行效果有判断能力，判断数据同步效果具体包括：数据同步的数据量、目标端数据实际数量等。本文将为您列举一些常见数据质量方面的场景，方便您排查是否存在符合...
背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型说明如下：如果您需要在Dataphin中连接某数据源，则需要先在数据源管理中创建该数据源。...
当DATE在命令中显示为列的数据类型时，如果配置参数 polar_comp_redwood_date 设置为 true，则在表定义存储在数据库中时，它将转换为TIMESTAMP。因此，时间部分也将与日期一起存储在列中。这与Oracle的DATE数据类型是一致的。如果 polar_...
背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型说明如下：如果您需要在Dataphin中连接某数据源，则需要先在数据源管理中创建该数据源。...
数字翻牌器数据源配置示例 图 2.请求数据接口示例图 导入数据接口 按组件绘制格式，处理数据后，导入组件，重新绘制，不需要重新请求服务端的数据。例如数字翻牌器组件，导入数据接口，串行处理节点传值示例如下。[{"name":"",/可选字段...
支持高级数据结构，具体如下：数组和Map数据 JSON数据 GIS（Geographic Information System）数据 颜色数据 功能扩展能力强，提供了多种扩展机制：扩展数据连接器 自定义数据类型 自定义SQL函数 流水线：基于Pipeline处理模型数据在处理...
新建离线自定义源类型 新建实时自定义源类型 离线研发 数据库SQL任务新增支持Presto数据源。创建数据库SQL任务须指定Schema。HIVE_SQL任务中使用临时表（temporary table），在资产清单中可以生成跳过临时表的血缘关系；所有类型的SQL任务...
自定义数据源类型：在内置的数据源类型中，未有所需接入的数据源类型时，您可自定义离线或实时数据源类型，并将自定义的数据源对接到Dataphin，以满足不同的数据源接入需求。具体操作，请参见：新建离线自定义源类型。新建实时自定义源类型...
自定义数据源类型：在内置的数据源类型中，未有所需接入的数据源类型时，您可自定义离线或实时数据源类型，并将自定义的数据源对接到Dataphin，以满足不同的数据源接入需求。具体操作，请参见：新建离线自定义源类型。新建实时自定义源类型...
Dataphin支持自定义离线数据源，以满足不同业务场景数据同步的需求。前提条件 对于RDBMS数据库，已获取数据库驱动文件。对于其他类型数据库，获取数据源连接配置项的JSON代码和读/写插件。背景信息 RDBMS数据库即关系型数据库，如MySQL、...
Dataphin支持自定义离线数据源，以满足不同业务场景数据同步的需求。前提条件 对于RDBMS数据库，已获取数据库驱动文件。对于其他类型数据库，获取数据源连接配置项的JSON代码和读/写插件。背景信息 RDBMS数据库即关系型数据库，如MySQL、...
本文介绍DataV设置资产数据源的方法，以及 设置数据源 页面的内容，包括数据源、数据过滤器以及数据响应结果等。配置资产数据源 登录 DataV控制台。在 我的可视化 页面，单击您创建的可视化应用项目上方的 编辑 按钮。在画布编辑器页面，...
关闭则翻牌器数据跌涨都会显示。手势光标：开启后，预览看板时，鼠标悬停至翻牌器组件时将显示为手势光标。高级配置 可定义翻牌器与其他组件间的交互，以及数据传递关系。相关配置项介绍如下。配置项 描述 图示 交互事件 定义与其他组件间...
支持的同步类型 单表离线 支持数据来源：数据集成模块数据来源支持的所有数据源类型 配置指导：离线同步任务配置 整库离线 支持数据来源：MySQL 配置指导：数据集成侧同步任务配置 配置案例 MySQL整库离线同步至Hive
离线数据集创建完成后，可在离线数据集列表中进行相关管理操作。本文为您介绍数据集相关的管理操作。在Dataphin顶部菜单栏中，选择 标签 标签工作台。在左侧导航栏中，选择 数据准备 离线数据集。离线数据集 页面分别展示离线数据集列表，...
本文按照节点离线、在线和流式的分类，分别介绍各节点类型对应能处理的数据类型以及运行引擎。计算类节点 计算类节点分为离线类、在线和流式类节点主要用于处理各种不同的数据。节点分类 节点说明 离线节点 更多详细信息，请参见 离线类...
离线/实时 数据集创建完成后，可在离线/实时 数据集列表中进行相关管理操作。本文为您介绍数据集相关的管理操作。在Dataphin顶部菜单栏中，选择 标签 标签工作台。在左侧导航栏中，选择 数据准备 离线数据集 或 实时数据集。离线数据集、...
支持的同步类型 单表离线 支持数据来源：数据集成模块数据来源支持的所有数据源类型 配置指导：离线同步任务配置 单表实时 支持数据来源：Kafka 配置指导：数据集成侧同步任务配置 整库离线 支持数据来源：MySQL 配置指导：数据集成侧同步...
支持的同步类型 单表离线 支持数据来源：数据集成模块数据来源支持的所有数据源类型 配置指导：离线同步任务配置 单表实时 支持数据来源：DataHub、Hologres、Kafka、LogHub 配置指导：数据集成侧同步任务配置 整库离线 支持数据来源：...
支持的同步类型 单表离线 支持数据来源：数据集成模块数据来源支持的所有数据源类型 配置指导：离线同步任务配置 单表实时 支持数据来源：DataHub、Kafka、LogHub 配置指导：数据集成侧同步任务配置 整库离线 支持数据来源：Amazon ...
在审计数据库前，您必须在数据库审计系统中添加要审计的数据库。本文介绍如何在数据库审计系统中管理数据库。背景信息 关于数据库审计支持的数据库类型，请参见 支持的数据库类型。添加数据库 您可以参考以下步骤在数据库审计系统中添加要...
本文介绍在蓝图编辑器内，导入数据接口和请求数据接口的区别。接口区别示意图 接口区别详细介绍 请求数据接口：重新请求服务端数据，上游 数据处理 节点或 图层节点 抛出的数据将作为参数。例如数字翻牌器配置了API数据源为 ...
附录：修改任务类型 当数据库SQL计算任务所选数据源类型为AnalyticDB for PostgreSQL、StarRocks、Doris、SelectDB、GaussDB（DWS）时，支持修改为同离线计算引擎类型的SQL任务（ADB_PG_SQL、STARROCKS_SQL、DORIS_SQL、SELECTDB_SQL、...
在进行数据库审计前，您必须在数据库审计系统中添加要审计的数据库。本文介绍了在数据库审计系统中添加、编辑、删除数据库的具体操作。背景信息 关于数据库审计服务支持审计的数据库类型，请参见 支持的数据库类型。重要 数据库审计仅支持...
可选数据源类型详情请参见 Dataphin支持的数据源 中的 离线研发-数据库SQL 列。数据源 选择SQL任务的数据源。若无可选数据源，可以单击+新建数据源 进行创建。Catalog 数据源类型为 Presto 时，配置数据源后，还需要配置Catalog。Schema ...
常见问题 数据源报错：在组件数据面板添加过滤器后，若切换至其他类型的数据源，系统将在错误信息区域显示以下两条接口异常提示。重要 当数据源异常时，即使接口返回了数据内容，数据面板中的过滤器仍会保持禁用状态（置灰显示）。由于数据...
提供 last 接口，支持获取时间线最新周期的数据点。问题修复 修复特定条件下删除时间线的结果错误的问题。V2.2.3 2018年4月10日 新特性 增加运维监控报警；对接阿里云流计算引擎 StreamCompute；支持接入数据可视化工具 Grafana；支持在...
本文详细介绍DataWorks 的应用场景：如何构建离线与实时一体化的企业级智能云数仓，打破数据时效性壁垒，加速业务决策。构建离线实时一体化企业级智能云数仓 业务挑战 在数字化竞争日益激烈的今天，企业对数据时效性的要求越来越高，但传统...
离线数据集成节点赋予任务流进行数据传输的能力，帮助您实现数据源之间的数据同步。本文介绍配置离线数据集成节点的方法。应用场景 离线集成节点主要用于数据迁移、数据传输等场景。功能特性 不限制来源表和目标表数据库类型。支持字段映射...
创建MySQL数据源 创建Oracle数据源 创建Microsoft SQL Server数据源 创建OceanBase数据源 创建IBM DB2数据源 创建MaxCompute数据源 创建FTP数据源 创建TDengine数据源 创建Hive数据源 创建PostgreSQL数据源 创建达梦（DM）数据源 创建...
类型：创建离线同步任务 步骤中已选择的数据来源和去向的数据源类型，不支持修改，如需修改请重新创建离线同步任务。数据源：选择已绑定至工作空间的Hologres数据源，或者在下拉中选择 新增数据源。2、运行资源 选择同步任务所使用的 资源...
数据接口显示名包括 名称、显示名、描述 以及 数据类型。其中 数据类型 共有 对象、数组、任意值 和 无 四种。字段包括 字段名、中文名、说明 及 类型。其中 类型 共有 字符串、数值、对象、数组、布尔值 和 二进制 六种。同时，您可以单击...
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
创建MySQL数据源 创建Oracle数据源 创建Microsoft SQL Server数据源 创建OceanBase数据源 创建IBM DB2数据源 创建MaxCompute数据源 创建FTP数据源 创建TDengine数据源 创建PostgreSQL数据源 创建达梦（DM）数据源 创建Amazon Redshift数据...
可视化应用中查看并使用数据接口 在区块编辑器中配置完数据接口后，您可以在画布编辑器中使用区块时，查看到区块的所有数据接口信息，具体在可视化应用中配置并查看接口信息的步骤如下。在区块编辑器中，对配置的数据接口内容，进行预览和...
dataworks:ListContacts-dataworks:ListCrawlerTypes 查询数据地图支持的元数据采集器类型列表，其中包含元数据采集器类型，及给定类型支持的子类型和子类型之间的层级关系信息。dataworks:ListDataAssetTags-dataworks:ListDataAssets-...