本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
命令格式 select(返回参数1+返回参数2)as 别名，(返回参数2+返回参数3)as 别名 from 逻辑表名 where 字段c=${请求参数名1} and 字段b=${请求参数名2} or 字段c=${请求参数名3} 使用示例-在数据表A中查询当字段c=id_card，或字段b=num，且...
命令格式 select(返回参数1+返回参数2)as 别名，(返回参数2+返回参数3)as 别名 from 逻辑表名 where 字段c=${请求参数名1} and 字段b=${请求参数名2} or 字段c=${请求参数名3} 使用示例-在数据表A中查询当字段c=id_card，或字段b=num，且...
本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
元表是通过数据管理的跨存储类型表，开发过程中所用到的输入表、输出表、维表可以通过创建元表进行创建和管理。本文为您介绍如何创建及管理元表。功能优势 元表具有以下优势：安全可靠：通过元表可以有效避免直接编写原生Flink DDL语句导致...
元表是通过数据管理的跨存储类型表，开发过程中所用到的输入表、输出表、维表可以通过创建元表进行创建和管理。本文为您介绍如何创建及管理元表。功能优势 元表具有以下优势：安全可靠：通过元表可以有效避免直接编写原生Flink DDL语句导致...
本文为您介绍迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户时，COMMENT DDL 注释的支持转换范围。总览 COMMENT ON { AUDIT POLICY policy|COLUMN[schema.]{ table.|view.|materialized_view.} column|EDITION edition_name|...
重要 字段名称必须与数据表中的字段名称相同。field_type FieldType 是 字段类型。更多信息，请参见 数据类型映射。重要 多元索引的字段类型必须与数据表中字段类型相匹配。analyzer string 否 分词器类型。默认值为单字分词。当字段类型为...
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、物化视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持...
主表（数据输入1）中的字段和数据将全部展示，次表（数据输入2）中相同的字段对应的数据将在行上进行扩展，不同的字段与数据不会展示。字段列表：展示主表数据输入1的字段。清洗加工 去掉数据表中不需要的列和行，并新增需要的列和行。从...
SQL窗口界面介绍 表 1.SQL窗口界面介绍 序号 区域 说明 ① 可视化操作区域 可视化地管理数据库：表 可查看当前数据库中的所有表，包含表的字段、字段类型、索引。也可以右键单击目标表，快捷编辑表结构、管理表、导出数据、导入数据、批量...
说明 编辑表 暂不支持删除已有表字段。单击 提交表，完成对当前内部表的编辑。删除内部表 在左侧导航栏 已登录实例 界面查询目标内部表。查询目标内部表的步骤请参见 编辑内部表 的步骤1~3。鼠标右击目标内部表，选择 删除表。单击 确认。...
完成数据解析的处理配置后，您可根据处理节点的输出字段，完成Topic解析任务最终的输出配置。本文介绍配置目标节点的具体操作。前提条件 已配置源节点，具体操作，请参见 配置源节点。背景信息 数据解析功能说明，请参见 使用说明。数据...
如果主键或来源表未发生变更，您可以选择全表补数据模式或指定字段补数据模式：全表：适用于数据表的所有字段都需要补数据的场景。说明 不包括注册上挂字段。指定字段：适用于需要自定义补数据的字段的场景。选中补数据字段后，与所选字段...
如果主键或来源表未发生变更，您可以选择全表补数据模式或指定字段补数据模式：全表：适用于数据表的所有字段都需要补数据的场景。说明 不包括注册上挂字段。指定字段：适用于需要自定义补数据的字段的场景。选中补数据字段后，与所选字段...
编辑目标Topic结构 目前 自动建表 生成的DataHub Topic生命周期默认只有7天，并且可能存在字段类型转换，即若目标端数据库中没有与源端一致的数据类型时，同步任务在自动创建目标Topic时，将自动为源端字段匹配目标端可写入的字段类型。...
解析字段中所选数据库表字段，非固定可选。勾选使用该字段，被勾选的字段将入库构建索引，不同的字段类型在搜索过程中参与到召回、排序的链路中，在查询结果中可以展示。未勾选字段将不会构建索引。字段描述tips：请用中文尽量简短并准确...
详细信息 数据库中的表在创建的时候使用comment对字段做了注释，然后使用这个表在Quick BI创建数据集。如果维度、度量名称想展示为字段名，则将群空间设置为使用物理字段名称作为维度、度量名称。如果维度、度量名称想展示为 注释内容，则...
数据完整率 表分区所选字段值全部非空的count数与表分区总记录数的比率与一个固定值进行比较，符合规则则通过。比较方式包括：、=、=、=、=和!数据唯一性 表分区所选字段值去重后的count数与表分区总记录数的比率与一个固定值进行比较，...
本文为您介绍如何基于本教程完成 下单购买事实逻辑表（fct_order_buy_di）开发。步骤一：新建事实逻辑表 在Dataphin首页，单击顶部菜单栏的 开发。按照下图操作指引，进入 新建事实逻辑表 对话框。在 新建事实逻辑表 页面，配置相关参数。...
模型发布生产环境成功后，DataWorks智能数据建模支持自动生成数据质量监控规则，便于后续在生产环境中通过生成的数据质量规则来约束对应表的数据质量。本文为您介绍如何在表发布成功后自动生成数据质量规则。前提条件 已将表发布至生产环境...
在 逻辑运维视角 下，您只需要选择需要运维的字段或逻辑表实例节点，系统会按照当前物化拆分方式自动计算对应的物化节点，并按照数据一致性和正确性原则，为您提示需要连带操作的相关字段，无需关心物理实现方式，帮助您缩短操作路径，降低...
在 逻辑运维视角 下，您只需要选择需要运维的字段或逻辑表实例节点，系统会按照当前物化拆分方式自动计算对应的物化节点，并按照数据一致性和正确性原则，为您提示需要连带操作的相关字段，无需关心物理实现方式，帮助您缩短操作路径，降低...
目标表的字段列名为course_id"index":0/取来源表的第1列数据写入目标表的course_id列 },{"name":"course_name",/目标表的字段列名为course_name"index":1/取来源表的第2列数据写入目标表的course_name列 },{"name":"course_schedule",/...
LTS、云数据库HBase迁移集群、RDS实例的网络已连通（都在同一个VPC中可以跳过）。功能列表 RDS数据全增量一体同步到Lindorm宽表模型（兼容HBase访问）。RDS数据变换，请参见 配置说明。RDS多表同步。使用限制 RDS全量同步支持数据源MySQL。...
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
字段详情 表格接入后，会以数据库表的形式存储，数据库字段名称 和 字段类型 为生成数据库表的字段名和类型，而 字段名称 对应飞书多维表格中数据表的字段名称。您可以在此根据实际情况重命名字段名称、修改字段类型。当不需要使用某一个...
③ 字段详情 为您展示指定版本的表描述、字段的名称（主键字段用钥匙符号标识）、数据类型、字段是否可为空、默认值以及字段描述信息。说明 当数据源为IBM DB2时，不展示默认值信息；当数据源为AnalyticDB for MySQL 3.0、PolarDB-X（原...
④ 对象详情区 鼠标悬停在字段上，为您展示字段的 名称、对象类型、存储格式、字段所在逻辑表及逻辑视图的 所属板块/字段所在物理表及物理视图的 所属项目、所属表、表负责人、数据类型、描述、血缘来源 信息，同时您可以进行 查看血缘 和 ...
使用多元索引 Search 接口查不到数据 如何查看表的总行数 表格存储是否支持类似关系数据库的 in 和 between.and 查询 如何将多元索引 Search 接口查询数据的 limit 提高到 1000 如何批量删除数据 使用多元索引时出现 field:xx must enable ...
④ 对象详情区 鼠标悬停在字段上，为您展示字段的 名称、对象类型、存储格式、字段所在逻辑表及逻辑视图的 所属板块/字段所在物理表及物理视图的 所属项目、所属表、表负责人、数据类型、描述、血缘来源 信息，同时您可以进行 查看血缘 和 ...
DataWorks数据集成实时ETL支持JSON解析组件使用，可以在来源与去向组件间新增JSON解析组件，对来源侧的JSON数据解析成相应的表数据。前提条件 已完成数据集成的基本配置与网络资源配置。数据集成的同步类型为单表实时。创建并配置JSON解析...
例如，原始日志"content":"{"request_method":"GET","request_time":"200"}"解析成功，追加原始字段是在解析后日志的基础上再增加一个字段，字段名为 重命名的原始字段（如果不填则默认为原始字段名），字段值为原始日志 {"request_method...
同步Vertica数据源的数据至其他数据源的场景中，您需要先配置Vertica输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Vertica输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Vertica数据源。...
写入方式 使用离线表：使用一个已经存储在离线数据源中的特征表的表结构，作为离线特征视图的表结构 选择此种方式后，您还需根据界面选择参考使用的离线表所在的数据源及表名称，并配置视图字段属性。自定义表结构：自定义本次新建离线视图...
同步OceanBase数据源的数据至其他数据源的场景中，您需要先配置OceanBase输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置OceanBase输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建...