DataWorks支持一键导入表结构功能,帮助您使用DataStudio快速批量创建与目标MaxCompute表结构相同的Hologres外部表,后续您可使用Hologres外部表加速查询MaxCompute表的数据。本文为您介绍如何创建并使用一键MaxCompute表结构同步节点。...
为防止对数据表的误操作,Dataphin支持将您删除后的数据表短期存留在回收站。同时Dataphin支持恢复或清除回收站中的数据表。本文为您介绍如何在回收站中清除表和恢复表。介绍页面 在Dataphin首页,单击顶部菜单栏的 资产。在 资产 页面,...
通过导入标准格式的Excel文件或者Visual Paradigm格式文件方式,批量创建逻辑表以及逻辑表的质量规则;同时支持将导出的逻辑表文件快速导入,实现工作组间的逻辑表信息迁移。本文介绍如何通过Excel导入逻辑表。操作步骤 登录 数据资源平台...
通过导入标准格式的Excel文件或者Visual Paradigm格式文件方式,批量创建逻辑表以及逻辑表的质量规则;同时支持将导出的逻辑表文件快速导入,实现工作组间的逻辑表信息迁移。本文介绍如何通过Excel导入逻辑表。操作步骤 登录企业数据智能...
维表功能支持您使用可视化的方式创建MaxCompute生产表并导入本地数据,您还可以在表格中直接修改MaxCompute表中的数据。前提条件 已开通MaxCompute,详情请参见 开通MaxCompute和DataWorks。已在DataWorks工作空间绑定MaxCompute计算引擎,...
表组是一系列可发生关联的数据表的集合,分析型数据库MySQL版(AnalyticDB MySQL版)为管理相关联的数据表,引入表组的概念。说明 创建 AnalyticDB MySQL版 数据库时,系统自动创建维度表组。注意事项 表组名以字母开头,字母或数字结尾...
本文介绍 表格存储 的调用说明以及提供的宽表模型和时序模型相关API接口。如需了解 表格存储 各场景的应用案例,请参见 快速玩转Tablestore入门与实战。调用说明 表格存储 API只能通过 表格存储 提供的各语言SDK进行调用,不能直接使用HTTP...
UPDATA/INSERT/DELETE tmp_table_name 切换新旧表:RENAME TABLE table_name to old_tmp_table_table,tmp_table_name to table_name 在上面的内部处理中,会创建临时表、变更临时表结构、并将原始表的全量数据拷贝到临时表,最后会使用 ...
(可选)配置字段血缘:当需要查看资产中数据表的血缘关系时,在配置完节点的输入输出参数后,单击 手动设置血缘开关,在 血缘配置 对话框中,单击输出表待配置的目标字段后的 图标,下拉选择对应的输入表以及输入表的字段。说明 配置完...
在数据模型管理模块对逻辑表进行层次结构设计、逻辑表定义,引用标准元素定义,保证不同的逻辑表设计人员按照统一口径进行操作,除此以外还支持:逻辑表质量配置、DDL设置、逻辑表物理化、表关系配置等功能。逻辑表层级管理:支持对逻辑...
物理表名 开发环境中节点输入参数的物理表名,可自定义新建物理表名或者选择已物理化至资源库中的物理表名。当输入数据结构为星号(*)时,输入物理表名必须选择已经存在的物理表。当输入数据结构为具体的模型结构时,填写物理表名,系统会...
表一致性修复功能用于对比不同表之间的表结构,找出差异并在目标表执行差异脚本,以保障不同表之间的表结构一致性。应用场景 多套不同环境之间进行表结构对比,以保障不同环境之间的表结构一致性。例如,确保测试环境与生产环境的表结构...
(可选)配置字段血缘:当需要查看资产中数据表的血缘关系时,在配置完节点的输入输出参数后,单击 手动设置血缘开关,在 血缘配置 对话框中,单击输出表待配置的目标字段后的 图标,下拉选择对应的输入表以及输入表的字段。说明 配置完...
当单张普通表的数据量超过1亿或者1 TB时,建议使用分区表。本文介绍了使用 ALTER 语法将单张普通表转换为分区表的注意事项以及示例。前提条件 普通表中的主键或唯一键需要包含分区表中的分区键字段。注意事项 普通表转换为分区表的过程中,...
计算节点是处理数据代码的算法节点,在算法流程中主要用于某个特定场景,或针对某张表的逻辑处理。本文介绍计算节点的节点画布配置说明和场景画布的配置说明。背景信息 计算节点支持多种类型,但是配置的参数和方法类似,这里只介绍关键...
背景信息 ODC 的影子表同步功能支持根据源表的表结构自动在当前库中创建影子表(表名是在源表名上增加前缀或后缀的方式生成),适用于全链路压测等场景。本文档旨在介绍如何在 ODC 上新建和查看影子表同步。说明 ODC V4.0.0 及之后版本的...
写数据表组件将数据写入MaxCompute表。本文为您介绍写数据表的参数配置。前提条件 如果您需要写入分区表,则需要先创建待写入的分区表,再使用该组件写入数据,关于如何创建分区表,详情请参见 创建分区表。使用限制 支持的计算引擎为...
示例5:在public schema批量创建外部表,已有外表则跳过该外部表。IMPORT FOREIGN SCHEMA public_data LIMIT to(customer,customer_address)FROM server odps_server INTO PUBLIC options(if_table_exist 'ignore');MaxCompute三层模型。...
通过AUTO OPTIMIZE语句,将启动一个流式优化任务,自动地对外部数据湖的表进行优化。本文为您介绍AUTO OPTIMIZE语句的背景信息、前提条件、使用限制、注意事项、基本语法和参数配置。背景信息 功能详情 目前仅支持将Iceberg表的若干小文件...
计算节点是处理数据代码的算法节点,在算法流程中主要用于某个特定场景,或针对某张表的逻辑处理。本文介绍计算节点的节点画布配置说明和场景画布的配置说明。背景信息 计算节点支持多种类型,但是配置的参数和方法类似,这里只介绍关键...
选择工作空间>配置管理>数据接入管理>数据导入>表结构配置,已配置的数据表列表如下图所示。表结构配置列表支持查看、编辑、查看调度任务、移除,但通过API导入的表结构配置(创建者是API同步)不支持编辑、移除。查看表结构配置 单击 查看...
注意事项 建表策略管理:在DataWorks智能数据建模开启建表策略的工作空间(包含建模空间及其纳管的所有研发空间)下,使用数据开发(DataStudio)新建表或修改表时,如不符合所配置的建表策略,则创建的表执行提交、发布操作时会受阻。...
常见问题 Q:如果逻辑库下的逻辑表已经存在,不需要新建物理表,但是逻辑表不在逻辑库显示的表列表中,该如何查找?A:在 数据管理DMS 控制台首页顶部导航栏中,单击 图标,进入全局搜索页面,找到目标逻辑库,单击 操作 列下的 更多>重新...
离线样本中展示的是数据表信息,数据表分为可用和不可用两种状态,可用状态的数据表才能用于模型开发。您可以根据本文,查看离线样本中数据表的详细信息以及数据表是否可用。操作步骤 登录多方安全建模控制台,并选择需要进入的项目。说明 ...
表类型 支持选择 建模逻辑表、标签逻辑表、物理表、元表、镜像表、物理视图、逻辑视图。环境 选择数据表所在的环境,支持选择 生产环境、开发环境。数据板块 当表类型选择为 逻辑视图、建模逻辑表、标签逻辑表 时,需要选择逻辑表所在的...
命名规范 表命名规范 表命名规则:{层次}{源系统表名}{保留位/delta与否}。增量数据:{project_name}.s{源系统表名}delta。全量数据:{project_name}.s{源系统表名}。ODS ETL过程的临时表:{project_name}.tmp{临时表所在过程的输出表}{从0...
表类型 支持选择 建模逻辑表、标签逻辑表、物理表、元表、镜像表、物理视图、逻辑视图、物化视图。环境 选择数据表所在的环境,支持选择 生产环境、开发环境。数据板块 当表类型选择为 逻辑视图、建模逻辑表、标签逻辑表 时,需要选择逻辑...
概述 Dataphin维度逻辑表天表命名开关。详细信息 开启后,新建维度逻辑表的天表,名称会额外增加后缀 df(形式如"DIM_对象名_df")。如不开启,无 df 后缀。特别地,设置后,对新生成的表生效,已生成表无法更名。适用于 Dataphin
云原生数据仓库AnalyticDB MySQL版 3.0 提供了Cache表功能,用于临时存储查询结果,能够实现快速检索和数据管理。本文介绍Cache表的相关功能说明以及使用示例。前提条件 AnalyticDB for MySQL 集群为V3.2.0及以上版本。说明 如何查看集群...
删除表 DROP TABLE 清空表 TRUNCATE TABLE 表重命名 RENAME TABLE 或 ALTER TABLE RENAME 添加列 ALTER TABLE ADD COLUMN 修改列 ALTER TABLE MODIFY COLUMN 重要 仅支持修改列至更大的长度,不支持修改列的类型。创建索引 CREATE INDEX ...
在使用数据传输服务DTS(Data Transmission Service)进行数据同步或迁移时,若目标库为 云原生数据仓库AnalyticDB MySQL版 3.0、云原生数据仓库AnalyticDB PostgreSQL版 或表格存储(Tablestore)时,DTS将提供多表合并功能。该功能支持将...
数据查询提供不同数据资源的物理表基础信息,包括物理表基本信息、表结构和物理表DDL语句。本文介绍如何查看物理表信息。前提条件 已新建云计算资源,具体操作,请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角,...
数据查询提供不同数据资源的物理表基础信息,包括物理表基本信息、表结构和物理表DDL语句。本文介绍如何查看物理表信息。前提条件 已新建云计算资源,具体操作,请参见 新建云计算资源。操作步骤 登录企业数据智能平台。在页面左上角,单击...
UNNEST(simple4.sub_simple4_table)WHERE field_int8>=2 子表字段过滤:SELECT field_int32,field_int32+1 as output FROM simple4,UNNEST(simple4.sub_simple4_table)WHERE field_int8>=2 AND sub_id<=5 注意 如果WHERE语句中带有子表字段...
语法 ALTER TABLE.EXCHANGE PARTITION 命令用于将一个分区或子分区与单表进行交换,可以将一个与分区表的表结构相同的单表交换为分区表中的一个分区或子分区。语法如下:ALTER TABLE target_table EXCHANGE PARTITION target_partition ...
归档普通表 冷数据归档执行的是表归档操作,执行冷数据归档操作后的表称为归档表(只读),归档表的引擎为OSS引擎,归档表的数据文件存储在OSS上。执行冷数据归档操作后,原来本地表在PolarStore上占用的空间将被释放。语法 归档为 CSV ...
HoloStudio的PG管理模块,支持使用可视化方式创建、查看以及删除内部表。本文为您介绍在HoloStudio中基于PG管理的内部表操作。前提条件 阿里云账号注册,详情请参见 阿里云账号注册流程。实名认证,详情请参见 个人实名认证 和 企业实名...
HoloStudio的PG管理模块,支持使用可视化方式创建、查看以及删除内部表。本文为您介绍在HoloStudio中基于PG管理的内部表操作。前提条件 阿里云账号注册,详情请参见 阿里云账号注册流程。实名认证,详情请参见 个人实名认证 和 企业实名...
调用ListTable接口获取当前实例下已创建的所有表的表名。注意事项 如果一个表刚刚创建成功,该表名会出现在ListTableResponse中,但此时该表不一定能够进行读写。请求消息结构 message ListTableRequest { } 响应消息结构 message ...
Boolean 否 false 参数取值如下:false(默认值):如果是写ClickHouse分布式表,并且在参数url中只指定了一个节点,则不会尝试推测分布式表对应的本地表信息,而是依然会直接写入分布式表,再由分布式表写入对应的本地表。true:Flink将...