根据选择的物理数据表，系统自动为您解析物理数据表所关联的行级权限信息，包括行级权限名称、描述说明、控制字段、数据源环境、关联表、关联字段。同时，您可以执行如下操作。开启 或 关闭 行级权限：控制行级权限的生效状态以及在查看...
搜索资产：支持快捷搜索其他数据表，选择需要查看的数据表，跳转至该数据表详情页。统计粒度：当表类型为汇总逻辑表且该表存在业务类型为维度的字段时展示，支持查看每个统计粒度信息，包括统计粒度名称、编码、描述、所属板块、主题域信息...
开发过程中所用到的输入表、输出表、维表可以通过创建元表方式来进行创建和管理，以支持您通过引用元表的方式来创建其他数据表。这种方式可以使您一次建表，可多次引用。您无需重复编写DDL语句，无需进行繁杂的输入、输出、维表映射，从而...
12 Items array object 数据表的列的识别结果列表。object 数据表的列的识别结果对象。CreationTime integer 数据资产表中列数据的创建时间毫秒数。1536751124000 TableName string 订正目标列所属的表名。it_table DataType string 数据...
④ 数据探查 若您开通了数据质量功能，可以为数据表配置数据探查任务，快速了解数据概况，提前评估数据的可用性和潜在风险，如果您需要开启自动探查，可以在 治理 元数据中心 探查及分析 中开启相应配置，详情请参见 新建数据探查任务。...
用户选中项目空间后，页面右侧会展示该项目空间/数据库范围内的数据表，可手动勾选或一键全选，默认选择该数据库范围内的所有数据表。项目空间/数据库范围、数据表均支持关键字搜索。数据表关键字搜索功能，需先选择项目空间，在指定项目...
开发过程中所用到的输入表、输出表、维表可以通过创建元表方式来进行创建和管理，以支持您通过引用元表的方式来创建其他数据表。这种方式可以使您一次建表，可多次引用。您无需重复编写DDL语句，无需进行繁杂的输入、输出、维表映射，从而...
选择全部等级后，若您申请时数据表中仅包含L1的字段，后续增加了L3的字段，则会自动赋权L3的字段，建议指定数据等级，以避免权限泄露。安全等级需开启数据安全模块。权限申请 可设置 开启 或 关闭。若权限申请关闭，权限申请单自动忽略该...
选择全部等级后，若您申请时数据表中仅包含L1的字段，后续增加了L3的字段，则会自动赋权L3的字段，建议指定数据等级，以避免权限泄露。安全等级需开启数据安全模块。权限申请 可设置 开启 或 关闭。若权限申请关闭，权限申请单自动忽略该...
用户画像分析任务流程完成后，在MaxCompute、EMR或StarRocks内将创建5张数据表。生成的数据表可在数据地图模块进行查看，可通过 血缘查看 来查生成表之间的关系。前提条件 开始本实验前，请先完成 同步数据 和 加工数据 的操作。数据源版本...
根据选择的物理数据表，系统自动为您解析物理数据表所关联的行级权限信息，包括行级权限名称、描述说明、控制字段、数据源环境、关联表、关联字段。同时，您可以执行如下操作。开启 或 关闭 行级权限：控制行级权限的生效状态以及在查看...
根据选择的物理数据表，系统自动为您解析物理数据表所关联的行级权限信息，包括行级权限名称、描述说明、控制字段、数据源环境、关联表、关联字段。同时，您可以执行如下操作。开启 或 关闭 行级权限：控制行级权限的生效状态以及在查看...
数据集可以是目标数据源中的数据表，也可以是本地文件。准备工作 已在使用ChatBI功能的对应地域创建 Serverless资源组。适用范围 数据源类型的数据集，仅支持选择Hologres、MaxCompute、StarRocks和MySQL类型的数据源。本地文件类型的数据...
添加为目录后您可快速查看相应目录下数据表，支持查看表结构并快速生成查询SQL。单击目录右上角的 按钮，进行添加目录。数据地图-元数据：数据地图中 采集到 的表元数据，每个数据源/计算资源即可添加成一个数据集。数据地图-数据专辑：...
数据写入 您可以通过多种模式将数据写入到MaxCompute，介绍如下：离线批量写入（数据通道）：通过多种方式将离线数据批量写入到MaxCompute表，对数据延迟不敏感（只要在调度周期执行完成即可满足需求）。离线数据流式写入（数据通道）：...
默认展示5000张数据表，建议您使用搜索功能查找表。目前仅MaxCompute、Hologres引擎支持 按引擎元数据查看 展示目标表，其余引擎（例如，EMR）只能 按表主题查看 展示。不同引擎的支持情况，具体请以实际界面为准。下图以MaxCompute引擎为...
使用限制 仅支持针对字段数不超过1500个的数据表进行自动采样，超过则自动忽略不采样。权限说明 超级管理员、运营管理员及具有 采样配置-管理 权限的自定义全局角色支持管理采样配置。操作步骤 在Dataphin首页的顶部菜单栏，选择 治理 ...
对于以上两种格式来说，ORC冷数据表相比于CSV冷数据表有更好的压缩率，所以归档为ORC冷数据后，所占的OSS容量会更少一些。此外，归档至OSS冷存后，数据转存至OSS，之前 PolarStore弹性内存池（EMP）存储的数据会同步删除，按照OSS存储的...
数据查询为用户提供对云计算资源中物理表基本情况的概览能力，帮助用户直观了解物理表基础信息、字段内容分布等情况，建立对数据表的宏观理解，为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。如果数据表格存储的是...
先清空表数据：先清空目标表数据，再将数据全量导入至目标表中相应的映射字段。追加：将待上传数据追加至目标表相应映射字段中。目标表 新建表 表名 自定义新建表表名。说明 MaxCompute引擎新建表过程，使用的是DataWorks计算资源里面配置...
数据查询为用户提供对云计算资源中物理表基本情况的概览能力，帮助用户直观了解物理表基础信息、字段内容分布等情况，建立对数据表的宏观理解，为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。如果数据表格存储的是...
云原生数据仓库 AnalyticDB MySQL 版 集群支持通过Spark SQL在线或离线读写C-Store表（即表引擎是XUANWU的表）数据。本文主要介绍通过Spark SQL在线或离线读写C-Store表数据的具体方法。前提条件 集群的产品系列为 企业版、基础版或湖仓版...
表 5.TOP 20数据表参数说明 参数 说明 表名称 由三个部分组成：数据库名 架构名 对象名 保留大小（MB）表总的占用空间，单位为MB。数据空间（MB）表中数据占用空间（单位为MB）和百分比。索引空间（MB）表的索引占用空间（单位为MB）和...
本文以同步MySQL数据源到MaxCompute目标端为例，介绍如何批量新增离线数据同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加离线数据同步任务...
最佳实践 数据库整库离线同步至MaxCompute 整库离线同步至MaxCompute OSS单表离线同步至MaxCompute EMR Hive单表离线同步至MaxCompute 数据库增量数据离线同步至MaxCompute RDS增量数据同步至MaxCompute Kafka单表离线同步至MaxCompute ...
使用静态脱敏方式，脱敏指定数据表或文件后，可将脱敏后数据另存到其他数据表或文件中，实现数据共享，且不会影响原始的数据。在DSC控制台，通过新增脱敏任务，设置脱敏数据、脱敏规则、脱敏后数据保存的目的地、执行任务周期等。动态脱敏 ...
查看离线数据大屏 您还可以在 运维大屏 离线同步 页面查看离线同步任务的运行状态分布、数据同步进度、同步数据量统计、同步任务执行详情（可基于来源端与目标端数据源，以及任务是否产生公网等条件过滤目标任务）等运行指标信息。...
X-数据安全针对圈选的数据表，基于大模型进行语义分析，识别核心字段，并智能推荐对应的分类分级，您可对推荐的识别结果执行应用、弃用等操作。本文为您介绍如何使用X-数据安全。前提条件 已配置并开启X-数据安全，详情请参见 智能助手。...
查看数据表详情。结构：表的字段名称、数据类型等信息，不同表的参数字段存在差异。DDL：表的数据定义语言，仅供参考。仅数据库表支持显示该字段。抽样数据：表的部分抽样数据，全量数据请在 SQL分析单元 中查看。使用变量 在项目编辑页面...
任务配置上下游节点依赖前，您需先确认当前节点的表血缘关系（例如，表数据间的血缘关系、表产出的分区数据），基于血缘关系配置节点的调度依赖。本文为您介绍如何确认表血缘，以及未基于表血缘配置节点依赖的影响。背景信息 确认表血缘，...
任务配置上下游节点依赖前，您需先确认当前节点的表血缘关系（例如，表数据间的血缘关系、表产出的分区数据），基于血缘关系配置节点的调度依赖。本文为您介绍如何确认表血缘，以及未基于表血缘配置节点依赖的影响。背景信息 确认表血缘，...
如果您有多个数据源、数据库、数据表，您可以在左侧手动添加限定条件来进行过滤，或者在右侧页面的搜索框中通过关键词搜索出对应的库表进行添加或删除的操作。入湖配置。OSS存储路径选择：选择入湖后数据存储在OSS的哪个路径下。选择元数据...
在您完成离线数据集的创建或行为关系的定义后，您可为所创建的离线数据集或行为关系创建对应的离线标签，以便后续的资产应用创建。如标签服务、画像服务的创建。功能概述 您可根据业务需求创建所需的离线标签，离线标签的加工方式不同创建...
在您完成离线数据集的创建或行为关系的定义后，您可为所创建的离线数据集或行为关系创建对应的离线标签，以便后续的资产应用创建。如标签服务、画像服务的创建。功能概述 您可根据业务需求创建所需的离线标签，离线标签的加工方式不同创建...
查看已上传数据表详情，包括但不限于数据地图、数据量、数据表大小及项目引用情况。刷新数据库/文件夹/表 选择需要查看的层级，单击右上角的 图标，完成刷新操作。改变数据库/文件夹显示模式 选择需要查看的层级，单击右上角的 图标或 图标...
准实时分析(湖上即席查询)：对于已经落盘在数据湖/数仓中的数据，通过 Hologres 交互式分析引擎，可以实现对海量离线数据的 秒级交互式查询（Ad-hoc Query）。业务分析师和运营人员无需等待 T+1，可以直接在 BI 工具中对最新的数据进行多维...
具体配置可参见 数据湖构建新建数据表。DLF 1.0 存储位置 单击存储位置后面的 更改 按钮，可在 OSS路径 弹窗中选择表存储位置。将元数据存储在对象存储服务中，以确保数据的安全性和可靠性，便于统一管理和维护。数据格式 支持将存储格式...
背景信息 使用一键同步MaxCompute数据至Hologres进行数据查询时，您需要先在Hologres中创建外部表，该外部表可视为MaxCompute源表（即需要同步的MaxCompute数据所在的表）与Hologres内部表的链接，通过该连接将MaxCompute源表数据同步至...
本文将以 ods_user_info_d_starrocks 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
本文将以 ods_user_info_d_starrocks 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...