通过行级权限可以按行管控不同用户针对同一张表的数据查看范围，保证不同角色只能查看自己所需的数据，无需创建视图或拆分子表使用，降低维护成本的同时有效保障数据安全。本文为您介绍如何添加及管理行级权限。5分钟快速了解 前提条件 已...
管理数据表权限 区域 描述 ① 筛选及搜索区 支持按照数据表名称进行搜索，也支持快捷筛选 7天内到期 的数据表，或单击 筛选 按钮，按照所属板块/项目/数据源、表类型进行筛选。② 申请数据表权限 您可单击 申请表权限 按钮，申请该表的读、...
管理数据表权限 区域 描述 ① 筛选及搜索区 支持按照数据表名称进行搜索，也支持快捷筛选 7天内到期 的数据表，或单击 筛选 按钮，按照所属板块/项目/数据源、表类型进行筛选。② 申请数据表权限 您可单击 申请表权限 按钮，申请该表的读、...
Schema约束策略决定了数据写入时是否校验表是否存在、表结构是否一致、字段的数据类型是否一致。不同的数据写入方式，支持的Schema约束策略不同。本文介绍Lindorm时序引擎Schema约束的概念和使用。Lindorm时序模型的Schema Lindorm时序引擎...
数据读取 MaxCompute存储的数据主要在MaxCompute上进行分析查询，同时支持用户通过数据通道和JDBC进行批量数据读取，或通过外部表-湖仓一体读数据，并将数据写入OSS等湖存储。数据生命周期 MaxCompute表的 生命周期（Lifecycle），指表...
数据查询提供不同数据资源的物理表基础信息，包括物理表基本信息、表结构和物理表DDL语句。本文介绍如何查看物理表信息。前提条件 已新建云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角，...
具体操作，请参见 创建AnalyticDB for PostgreSQL数据源 表 选择AnalyticDB for PostgreSQL数据源中的数据表为数据同步的目标表。如果AnalyticDB for PostgreSQL数据源中还没有数据表，您也可以执行如下步骤，简单快速的生成目标表：单击 ...
连接条件 连接条件指定了两张数据表之间使用哪些字段进行连接，当数据表中某条数据（假定为a）的所有连接字段的值与另一张数据表某条数据（假定为b）的所有连接字段的值相同，则这a、b两条数据成功连接。多表连接算子支持指定多张数据表...
本文介绍如何为数据表进行编目。前提条件 已物理化“dws_ren_kh_demo_di（银行客户信息表）”，具体操作，请参见 物理化逻辑表。已创建数据目录，具体操作，请参见 编制目录。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，...
本文介绍读数据表算子的使用方法。用途 读数据表 算子用于从数据源中读取数据，作为下游节点输入数据的来源。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 选择计算资源 选择...
同步其他数据源的数据至ClickHouse数据源的场景中，完成源数据的信息配置后，需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源及...
DescribeTables-查询数据资产表的数据 获取数据资产表的信息（Items），包含表名称（Name）和风险等级（RiskLevelId）。DescribeDataObjectColumnDetailV2-查询数据对象列详情V2 获取数据资产表的列信息（Items），包含列名称（ColumnName...
本文为您介绍如何查看数据目录、数据库和数据表的存储概览。存储大小说明 分区列表中显示的存储大小：仅统计最新快照中该分区引用的有效数据文件。这些是当前可查询、未被清理的活跃文件。存储概览中显示的存储大小：未过期的历史快照数据 ...
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、物化视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持...
Dataphin分析平台提供手工表功能，可在平台上手动创建和维护所需的 生产态 的数据表。应用场景 记录并管理数据：可以通过手工表记录和管理数据。例如，业务人员在客户维表中手动更新客户状态，供下游任务使用。同时数据开发、运维人员可以...
Dataphin分析平台提供手工表功能，可在平台上手动创建和维护所需的 生产态 的数据表。应用场景 记录并管理数据：可以通过手工表记录和管理数据。例如，业务人员在客户维表中手动更新客户状态，供下游任务使用。同时数据开发、运维人员可以...
申请表资产前，了解表资产详情，有利于判断需申请的资产是否符合自己的期望。本文介绍如何查看公开的表资产详情。前提条件 已在运营模块中公开表资产。已在数据开发模块中创建公共节点和场景，并部署运行。已在数据标准模块中创建质量校验...
③ 资产列表区 为您展示筛选后的结果列表，包含数据表的名称、描述、数据板块/主题域、项目、最高涉密等级（需要开通数据安全模块）、资产标签、负责人等数据表详细信息，同时，您可以在 操作 列下对数据表执行 转交负责人、申请权限、修改...
③ 资产列表区 为您展示筛选后的结果列表，包含数据表的名称、描述、数据板块/主题域、项目、最高涉密等级（需要开通数据安全模块）、资产标签、负责人等数据表详细信息，同时，您可以在 操作 列下对数据表执行 转交负责人、申请权限、修改...
码表定义基于圈选的数据表通过大模型结合语义分析，识别核心字段，针对核心字段进行数据探查，从而智能抽取码表定义，您可对码表执行编辑、应用、弃用等操作。本文为您介绍如何配置智能抽取码表定义。前提条件 需购买数据标准功能和X-数据...
本文为您介绍数据湖构建中 Paimon 数据表的基本操作。表类型介绍 特性 采用湖格式Paimon表，支持实时与离线一体化存储，可通过计算引擎和开源API实现高效的表读写访问。适用场景 流式处理、实时更新及高性能OLAP查询等场景。数据管理 数据...
表对象：当数据表的规则模板选择 稳定性-表稳定性校验 和 稳定性-表波动性校验 或数据源的规则模板选择 稳定性-表结构异动监测 时，可配置全表粒度的监控规则，您可以根据数据表名、表负责人、质量负责人选择需要配置的数据表。单击 下一步...
在弹出的添加 数据对话框 中，选择需要添加的数据源类型，支持添加 RDS for PostgreSQL数据源、RDS for MySQL数据源、兼容MySQL数据库的数据源、实时数仓Hologres数据源、AnalyticDB for MySQL数据源。操作数据集 在数据集管理页面右上角...
表对象：当数据表的规则模板选择 稳定性-表稳定性校验 和 稳定性-表波动性校验 或数据源的规则模板选择 稳定性-表结构异动监测 时，可配置全表粒度的监控规则，您可以根据数据表名、表负责人、质量负责人选择需要配置的数据表。单击 下一步...
Dataphin数据表 支持多种表类型（如物理表、事实逻辑表、维度逻辑表、汇总逻辑表）的规则校验和整改。全域数据表 支持多种数据源类型（如MaxCompute、Hive、Mysql、Oracle、Microsoft SQL Server、PostgreSQL、SAP HANA、AnalyticDB for ...
Dataphin数据表 支持多种表类型（如物理表、事实逻辑表、维度逻辑表、汇总逻辑表）的规则校验和整改。全域数据表 支持多种数据源类型（如MaxCompute、Hive、Mysql、Oracle、Microsoft SQL Server、PostgreSQL、SAP HANA、AnalyticDB for ...
通过行级权限可以按行管控不同用户针对同一张表的数据查看范围，保证不同角色只能查看自己所需的数据，无需创建视图或拆分子表使用，降低维护成本的同时有效保障数据安全。本文为您介绍如何添加及管理行级权限。5分钟快速了解 前提条件 已...
数据查询提供通过SQL查询预览数据资源，为开发人员和数据应用人员提供全面直观的数据呈现。本文介绍如何查询物理表数据。前提条件 已新建云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角，...
数据湖库表 数据湖库表 ListDataLakeDatabase 获取数据湖的数据库列表 调用此API可以获取数据湖的数据库列表。GetDataLakeDatabase 获取数据湖的数据库信息 调用此API可以获取数据湖中的数据库信息。ListDataLakeCatalog 获取数据湖的数据...
数据湖构建的数据表是实现实时离线一体化的核心。本文深度解析了内部表与外部表的本质区别、选型要点及其全生命周期管理，为构建高性能、易维护的现代数据湖奠定基础。
同步其他数据源的数据至TDH Inceptor数据源的场景中，完成源数据源的信息配置后，需要配置TDH Inceptor输出组件写入数据的目标数据源。本文为您介绍如何配置TDH Inceptor输出组件。使用限制 TDH Inceptor输出组件支持写入文件格式为orc、...
本文将以 ods_user_info_d_starrocks 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
本文将以 ods_user_info_d_starrocks 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
本文将以 ods_user_info_d_emr 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。您可以参考...
同步其他数据源的数据至Hive数据源的场景中，完成源数据源的信息配置后，需要配置Hive输出组件写入数据的目标数据源。本文为您介绍如何配置Hive输出组件。使用限制 Hive输出组件支持写入文件格式为 orc、parquet、text、iceberg（iceberg...
本文将以 ods_user_info_d_spark 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
MaxCompute支持您将MaxCompute项目数据接入观远BI，帮助企业的业务人员和数据分析师开展以问题为导向的探索式分析工作以及制作数据卡片和数据看板。本文为您介绍如何通过MaxCompute JDBC驱动，连接观远BI和MaxCompute项目，并进行可视化...
本文将以 ods_user_info_d_spark 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
本文将以 ods_user_info_d_spark 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
本文将以 ods_user_info_d_spark 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...