② 资产详情 为您展示项目内的数据表 名称、创建人、存储类型、数据更新时间。您也可以单击 操作 列下的 图标,在权限管理模块,申请表权限,详情请参见 申请、续期和交还表权限。③ 资产信息 为您展示项目的 项目概况 和 基本信息。
常见问题 读取MaxCompute(ODPS)表数据时,添加一行注意事项 读取MaxCompute(ODPS)表数据时,如何同步分区字段?读取MaxCompute(ODPS)表数据时,如何同步多个分区数据?MaxCompute如何实现列筛选、重排序和补空等 MaxCompute列配置...
本文介绍Lindorm与关系型数据库、NoSQL数据库、大数据生态之间的数据导入导出能力。其中部分能力由LTS(Lindorm自研的数据通道服务)支持,部分能力由DataWorks或DTS支持。数据导入 源集群 目标集群 全量导入 增量导入 关系数据库 MySQL ...
编辑器代码提效 新建离线物理表 数据源 针对 MySQL、PolarDB-x、PolarDB、AnalyticDB for MySQL、AnalyticDB for PostgreSQL、TiDB、GoldenDB、StarRocks、PostgreSQL、GreenPlum、SQL Server、Vertica、SAP Hana、DB2、OceanBase、...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持根据数据表...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持根据数据表...
将基于对象存储的倾斜摄影项目(OSGB格式)导入到数据库中。语法 boolean ST_ImportOSGB(cstring table_name,cstring url,cstring options default '{}');参数 参数名称 描述 table_name osg表名及其瓦片表前缀。url 基于对象存储服务的...
将基于对象存储的倾斜摄影项目(OSGB格式)导入到数据库中。语法 boolean ST_ImportOSGB(cstring table_name,cstring url,cstring options default '{}');参数 参数名称 描述 table_name osg表名及其瓦片表前缀。url 基于对象存储服务的...
详细说明,请参见 配置逻辑表数据延迟。调度属性 用于定义维度逻辑表在生产环境的调度方式。您可以通过调度属性,配置维度逻辑表的调度类型、调度周期、调度逻辑与执行等等。详情说明,请参见:配置逻辑表调度属性。上游依赖 用于定义逻辑...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持根据数据表...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持根据数据表...
详细说明,请参见 配置逻辑表数据延迟。调度属性 用于定义维度逻辑表在生产环境的调度方式。您可以通过调度属性,配置维度逻辑表的调度类型、调度周期、调度逻辑与执行等等。详情说明,请参见:配置逻辑表调度属性。上游依赖 用于定义逻辑...
查看表原始数据来源及表数据最终流向。进行不同层级血缘的影响分析。2022.10.21 全部地域 所有DataWorks用户 查看表详情 DataWorks数据治理中心新增支持4种研发维检查项 DataWorks数据治理中心新增4种检查项:JOIN关联条件类型一致性。部分...
[table_name]_tile:瓦片表,存储该项目所有的瓦片数据。[table_name]_tileset:tileset.json 表,存储该项目对应的 tileset.json 信息。[table_name]表结构如下:字段 类型 说明 备注 project_id uuid 项目ID。自动生成。project_name ...
[table_name]_tile:瓦片表,存储该项目所有的瓦片数据。[table_name]_tileset:tileset.json 表,存储该项目对应的 tileset.json 信息。[table_name]表结构如下:字段 类型 说明 备注 project_id uuid 项目ID。自动生成。project_name ...
详细说明,请参见 配置逻辑表数据延迟。调度属性 用于定义事实逻辑表在生产环境的调度方式。您可以通过调度属性,配置事实逻辑表的调度类型、调度周期、调度逻辑与执行等等。详情说明,请参见:配置逻辑表调度属性。上游依赖 用于定义逻辑...
详细说明,请参见 配置逻辑表数据延迟。调度属性 用于定义事实逻辑表在生产环境的调度方式。您可以通过调度属性,配置事实逻辑表的调度类型、调度周期、调度逻辑与执行等等。详情说明,请参见:配置逻辑表调度属性。上游依赖 用于定义逻辑...
2021-10-28 全部地域 增强:查询结果缓存机制 MaxCompute集成观远数据(GuanData)BI工具(商业化)发布 MaxCompute集成GuanData无缝对接,支持GuanData对MaxCompute直连场景下BI分析的查询加速,和抽数据场景下对MaxCompute全表数据读取。...
创建MaxCompute计算源并绑定到Dataphin项目中后,规范建模可基于外部项目中的来源表创建逻辑表,MaxCompute SQL任务可用映射的内部项目的计算资源来执行,并支持读写外部项目中的表数据。查看湖仓一体的元数据信息及进行权限管控 支持查看...
创建MaxCompute计算源并绑定到Dataphin项目中后,规范建模可基于外部项目中的来源表创建逻辑表,MaxCompute SQL任务可用映射的内部项目的计算资源来执行,并支持读写外部项目中的表数据。查看湖仓一体的元数据信息及进行权限管控 支持查看...
本文为您介绍Dataphin中,业务板块、数据域、项目、维度、业务过程、维度逻辑表、事实逻辑表、原子指标等基本概念。数据板块 数据板块是逻辑空间的重要组成部分,是基于业务特征划分的命名空间。当数据的业务含义存在较大差异时,您可以...
更新说明 管理动态脱敏规则、项目安全策略、脱敏算法、密钥管理 2022年10月25日 数据表质量规则和质量规则模块升级 支持多种数据源表的质量监控,支持数据源连通性及表结构异动性监控。内置丰富的质量规则模板。资产报告升级,可从资源粒度...
最佳实践 新增DataWorks大数据安全治理实践新增指南,为您介绍数据安全治理的常见思路、DataWorks产品的安全能力,以及在DataWorks上基于“基础防护建设”、“数据安全防护措施”、“数据安全持续运营”三个阶段落地数据安全治理项目的最佳...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持根据数据表...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持根据数据表...
总表数:全局数据表总数,包括开发和生产两类项目中的逻辑表和物理表。项目数:全局项目总数,包括生产和开发两类项目。开发者数:Dataphin成员列表中成员数量的总和。数据回流表:以计算引擎源为数据来源,以物理数据源(业务)为目标的...
当数据的业务含义存在较大差异时,您可以创建不同的数据板块,让各成员独立管理不同的业务,后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域,是对某个主题分析后确定的主题边界。例如,商品域、交易域、会员域等。项目 ...
表数据如下:已准备好待创建Hologres外部表的目标MaxCompute项目。创建MaxCompute项目信息,请参见 创建MaxCompute项目。已安装MaxCompute客户端。更多安装MaxCompute客户端操作,请参见 安装并配置MaxCompute客户端。使用限制 Hologres...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持根据数据表...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持根据数据表...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持根据数据表...
当您成功创建 FL 项目或者受邀参与 FL 项目后,可以进入项目配置阶段。您可以根据业务需求对项目中的节点、数据和成员进行配置,只有成功配置项目后,才可以进入项目开发阶段。本文介绍在管理控制台中,配置 FL 项目的操作步骤。前提条件 ...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...
功能说明 在数据表详情的数据概况标签页,基于对元数据及存储数据的统计,为您提供了数据表更加详细的指标信息,比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小,分区文件数,分区最后更新时间等...
数据表是项目中的原始数据,可通过数据校验和数据授权后,被项目的控制台作为离线样本使用。当您新建表结构模板后,可基于新建的表结构模板新增数据表。本文介绍通过管理控制台新增数据表的方法。前置准备 在添加数据表前,需确保您已完成...
总表数:全局数据表总数,包括开发和生产两类项目中的逻辑表和物理表。项目数:全局项目总数,包括生产和开发两类项目。开发者数:Dataphin成员列表中成员数量的总和。数据回流表:以计算引擎源为数据来源,以物理数据源(业务)为目标的...
质量管理员 拥有创建数据表、数据源等资源的质量规则的权限,查看生成的数据质量报告。板块角色 板块架构师 拥有业务板块信息设置,包括基本信息更新、业务信息更新等权限。业务负责人 当前没有实质性的操作权限。负责业务板块数据的业务...
质量管理员 拥有创建数据表、数据源等资源的质量规则的权限,查看生成的数据质量报告。板块角色 板块架构师 拥有业务板块信息设置,包括基本信息更新、业务信息更新等权限。业务负责人 当前没有实质性的操作权限。负责业务板块数据的业务...
该方式的优缺点如下:优点:重新整理表数据,让表变成更紧凑,能减小之前由于Dead Tuple造成的表磁盘大小膨胀,可以减小磁盘上表的大小。缺点:重新整理表的Page储存时,需要ACCESS EXCLUSIVE锁模式。该模式是排他模式,意味着其他任何对该...
返回结果:ALIYUN$@aliyun.com:nation_orcnation_orc ALIYUN$@aliyun.com:partsupp_orcpartsupp_orc ALIYUN$@aliyun.com:supplier_orcsupplier_orc 在DataWorks临时查询页面,查询External Project中的表数据。命令示例:SELECT ps_partkey...