数据表自动生成

_相关内容

创建与管理数据模型

系统会根据数据模型 编码 自动生成 数据名,名用于生成DDL脚本。如果您需要修改生成规则,可以返回 数据模型 页面,选择 更多>信息生成规则设置,在 设置信息生成规则 面板更改设置。单击 字段 页签,单击 添加字段,如果您选择 ...

全量数据同步

在 创建表 对话窗中,系统会根据上一步配置的数据数据对象自动生成表名、备注以及字段。您需要将表名修改为“stg_base_yhkh_demo_di“,分区信息 为“非分区表”。配置完成,单击 确定,返回任务配置页面。stg_base_yhkh_demo_df 写入...

增量数据同步

在 创建表 对话窗中,系统会根据上一步配置的数据数据对象自动生成表名、备注以及字段。您需要将表名修改为“stg_base_yhkh_demo_di“,分区信息 为“非分区表”。配置完成,单击 确定,返回任务配置页面。stg_base_yhkh_demo_di 初始化...

管理问题数据

开启问题数据保留配置后,当该数据质量规则校验不通过时,系统会将异常数据保留至自动生成的 问题数据表 中。按表配置数据质量监控规则详情请参见:配置规则:按表(单表)。说明 目前仅部分规则,在规则校验不通过时支持保留问题数据,...

基本概念

基本概念 说明 Dataphin数据源 配置数据表生成Dataphin数据源。服务单元 对数据表进行统一的元数据配置。应用 消费数据服务(调用API或Dataphin数据源)的权限主体。分组 将数据服务和应用根据特定功能或场景进行分类管理。API服务 集中为...

MySQL分库分表同步至MaxCompute

自动生成逻辑表的功能,可以大大简化逻辑表的配置步骤,一般情况下,我们都可以使用自动生成逻辑表来扫描源端数据源,简化大部分配置操作。如果自动扫描的结果不符合预期,只需要对自动扫描的结果做简单修正即可。复杂的物理库表规则可以...

MySQL分库分表同步至MaxCompute

自动生成逻辑表的功能,可以大大简化逻辑表的配置步骤,一般情况下,我们都可以使用自动生成逻辑表来扫描源端数据源,简化大部分配置操作。如果自动扫描的结果不符合预期,只需要对自动扫描的结果做简单修正即可。复杂的物理库表规则可以...

核心能力

自动灵活的数据探查 物理预览和表数据自动探查。多种探查规则和算法,可快速实现级别、字段级别探查结果图表化展示。支持空间数据的地图可视化查看。强大的数据加工能力 离线、实时、在线多类型计算节点。不同类型计算节点在同一个任务...

Kafka增量数据同步至MaxCompute

如果待写入的MaxCompute未生成,您可以使用 一键生成目标结构 功能快速建,一键生成目标结构 会自动生成SQL,解读详情请参见下文的 附录:一键生成目标结构。分区信息 本实践示例的写入MaxCompute有一个分区列ds,在 ds=后...

Kafka增量数据同步至MaxCompute

如果待写入的MaxCompute未生成,您可以使用 一键生成目标结构 功能快速建,一键生成目标结构 会自动生成SQL,解读详情请参见下文的 附录:一键生成目标结构。分区信息 本实践示例的写入MaxCompute有一个分区列ds,在 ds=后...

将AI模型推理结果写回数据库

本文描述了如何通过PolarDB for AI在数据库中生成含有AI模型推理列的数据表PolarDB for AI Augmented Table(下文简称AAT)。经过人工智能增强的数据表可广泛应用于Data+AI的多个场景,以协助用户进行数据洞察,并根据实际情况调整其决策。...

产品简介

入湖基础操作,通过入湖任务的方式将分散在MySQL、Kafka和PolarDB等数据统一存储,入湖过程如果没有定义元数据信息,入湖任务会自动生成元数据的信息。数据权限管理,可以加强湖上数据权限控制,保障数据安全。可支持对元数据库、元数据...

数据建模

DDL设置:支持根据逻辑自动生成并保存不同云计算资源类型的DDL语句。物理化:支持将已存在的逻辑表物理化到数据库,并对物理化执行结果信息进行展示。质量规则配置:支持可视化与自定义SQL方式制定表级与字段级质量规则,并提供手工...

功能简介

DDL设置:支持根据逻辑自动生成并保存不同云计算资源类型的DDL语句。物理化:支持将已存在的逻辑表物理化到数据库,并对物理化执行结果信息进行展示。表关系配置:支持建立多个表之间的关联关系,并提供关联关系编辑功能。质量规则配置...

功能简介

DDL设置:支持根据逻辑自动生成并保存不同云计算资源类型的DDL语句。物理化:支持将已存在的逻辑表物理化到数据库,并对物理化执行结果信息进行展示。表关系配置:支持建立多个表之间的关联关系,并提供关联关系编辑功能。质量规则配置...

公开与隐藏数据表资产

背景信息 将数据建模中生成数据表进行编目及公开后,可在发现查看和申请使用。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产管理。在左侧菜单栏,选择 系统资产管理>数据表管理,进入...

公开与隐藏数据表资产

背景信息 将数据建模中生成数据表进行编目及公开后,可在发现查看和申请使用。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产管理。在左侧菜单栏,选择 系统资产管理>数据表管理,进入...

操作流程

数据上报API:通过数据表方式生成API可以方便后续调用,减少资源操作成本。数据更新API:通过调试或调用创建的数据更新API修改数据库中的表数据。空间服务API:通过将空间数据管理中的各类型空间数据发布成行业标准的空间服务API,以便后续...

数据服务概述

创建API 将数据表快速生成数据API 数据服务支持通过可视化配置的 向导模式,将各类数据源下的数据表生成数据API,您无需具备编码能力,即可快速配置一个API。详情请参见 通过向导模式生成API。为满足高阶用户的个性化查询需求,数据服务为...

从数据库批量生成代码

父包名,默认值:com.bizworks.example.domain.tunnel parent: com.bizworks.example.domain.tunnel strategy: generateAllCode: false # 配置需要生成的,如果未配置,则生成数据库下所有 includes:"demo_table"上述配置示例完善后...

新建数据探查任务

说明 当部分项目或板块下开启自动探查的数据表范围变更,并且删除数据表之前已经开启了数据探查配置,移除数据表后将自动关闭所有相关数据表自动探查,正在探查中和已生成的任务不受影响。后续说明 探查任务运行结束后,您可查看不同字段...

新建数据探查任务

说明 当部分项目或板块下开启自动探查的数据表范围变更,并且删除数据表之前已经开启了数据探查配置,移除数据表后将自动关闭所有相关数据表自动探查,正在探查中和已生成的任务不受影响。后续说明 探查任务运行结束后,您可查看不同字段...

快速体验

生成数据API 通过DataWorks的 数据服务 功能,将数据表快速生成API,并发布至网关统一管理,供第三方服务使用。数据展示:Quick BI 通过Quick BI搭建面向不同业务需求的可视化大屏,可视化展示数据结果,便于进行业务数据分析。操作演示...

查看并管理待生成实例

说明 恢复暂停的待生成实例,系统将判断当前是否已经到达该实例设定的定时运行时间,如果已到达,则系统自动生成数据实例执行补数据,暂停:对于实例待生成状态的待生成实例,您可以 进行恢复。说明 暂停后将不会生成可以运行的补数据...

查看并管理待提交实例

说明 恢复暂停的待提交实例,系统将判断当前是否已经到达该实例设定的定时运行时间,如果已到达,则系统自动生成数据实例执行补数据,暂停:对于实例待提交状态的待提交实例,您可以 进行恢复。说明 暂停后将不会生成可以运行的补数据...

订阅物理的质量告警

物理质量告警订阅会订阅物理最新的质量规则运行结果,包括当前物理数据开发画布上被引用自动生成的质量检查结果和质量评估计划检查的质量结果。通过预警订阅,您可以便捷地获取到物理质量的异常等状况,进而对模型进行管控。本文...

订阅物理的质量告警

物理质量告警订阅会订阅物理最新的质量规则运行结果,包括当前物理数据开发画布上被引用自动生成的质量检查结果和质量评估计划检查的质量结果。通过预警订阅,您可以便捷地获取到物理质量的异常等状况,进而对模型进行管控。本文...

提交节点时提示:输入输出和代码血缘分析不匹配

当节点代码中SELECT非周期性调度生产的表数据时,您需要删除通过SELECT自动生成的依赖的上游节点配置。非周期性调度生产数据的表包括:从本地上传到DataWorks的表 维表 非DataWorks调度产出的表 手动任务产出的表 对于周期性生成数据的表,...

逻辑数仓

展开数据源,双击数据源下的名,可自动生成查询的三段式SQL,如 SELECT*FROM dblink1.schem1.table1 LIMIT 20,单击 执行 查询或手动输入三段式SQL查询并执行查询。单击 虚拟库 页签。在此页面,您可选择添加虚拟库,还可进行如下...

验证数据压缩能力

运行成功后打开新的 SQL 窗口,执行如下命令,验证当前数据量,返回 20,000 时,则表示当前数据生成成功。select count(*)from orders;查看运行结果:返回租户工作台,查看已使用存储大小,数据越大越准确,以实际效果为准。压缩比...

数据上传

先清空表数据:先清空目标表数据,再全量将数据导入至目标表中相应的映射字段。追加:将待上传数据追加至目标表相应映射字段中。主键冲突策略:若上传数据导致目标表主键冲突,可采取如下处理策略。忽略:忽略上传的数据,目标表中的数据...

镜像和字段详情

③ 血缘 您展示数据表之间的血缘关系,表级血缘 来源包括集成同步任务、自定义血缘的计算任务及系统可自动解析血缘的SQL计算任务和逻辑表任务。任务提交时解析开发表血缘,发布时解析生产表血缘。详情请参见 表级血缘。说明 系统在任务提交...

数据膨胀诊断

AnalyticDB PostgreSQL版 提供的智能诊断数据膨胀功能,可以定期自动诊断数据库内的所有,并生成诊断信息。您可以通过诊断信息,查看的膨胀情况并获得相应的处理建议(如执行VACUUM或VACUUM FULL操作)。注意事项 智能诊断数据膨胀...

操作流程

场景画布中引用物理自动生成质量检查节点 如果配置了质量规则的数据模型在场景画布中被引用,且场景画布中开启了自动质量规则校验开关,场景中自动生成质量检查节点。当算法运行时,画布中引用的数据质量规则也会自动运行,以检查算法...

操作流程

场景画布中引用物理自动生成质量检查节点 如果配置了质量规则的数据模型在场景画布中被引用,且场景画布中开启了自动质量规则校验开关,场景中自动生成质量检查节点。当算法运行时,画布中引用的数据质量规则也会自动运行,以检查算法...

MaxCompute物理和字段详情

您可以使用生成的select语句,在即席查询中查询表数据生成的查询语句将根据选择的源类型自动添加对应的转义符,减少系统关键词误转义等问题产生。如果您不需要,可取消勾选并重新生成查询语句。查看DDL语句:单击查看当前数据表在租户...

Hologres物理和字段详情

您可以使用生成的select语句,在即席查询中查询表数据生成的查询语句将根据选择的源类型自动添加对应的转义符,减少系统关键词误转义等问题产生。如果您不需要,可取消勾选并重新生成查询语句。查看DDL语句:单击查看当前数据表在租户...

逻辑和字段资产详情

您可以使用生成的select语句,在即席查询中查询表数据生成的查询语句将根据选择的源类型自动添加对应的转义符,减少系统关键词误转义等问题产生。如果您不需要,可取消勾选并重新生成查询语句。查看DDL语句:单击查看当前数据表在租户...

MaxCompute物理视图和字段详情

您可以使用生成的select语句,在即席查询中查询表数据生成的查询语句将根据选择的源类型自动添加对应的转义符,减少系统关键词误转义等问题产生。如果您不需要,可取消勾选并重新生成查询语句。查看DDL语句:单击查看当前数据表在租户...

通过X2Doris导入数据

3.作业设置 在点击创建作业之后会弹出一个任务配置的界面,用户需要在这个界面配置任务迁移所需要的参数,具体示例如下:参数解释如下:参数 说明 App Name 自动生成数据迁移任务的名称。App Tag 自动生成数据迁移任务的Tag。Master ...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用