数据模型制作

_相关内容

操作流程

新建数据字典并物理化 通过新建并维护数据模型中使用的数据字典,制定并管理平台遵循的统一数据标准,为数据元、指标、维度引用数据字典提供数据基础,帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。具体操作,请参见 新建...

新建Elastic Service在线类型的公共节点

输入数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为...

新建Blink类型的公共节点

输入数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为...

新建Blink DataStream类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建维度

背景信息 维度和维度属性也是数据标准的一种类型,通常使用维度建模方式创建的数据模型会采用维度+指标的数据标准管理。在数据模型字段中关联维度属性字段标准,可用于质量检测。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 ...

新建Flink Vvr SQL类型的公共节点

输入数据格式 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为...

新建Flink SQL类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建Flink Vvp SQL类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

Schema约束

但是,时序数据模型本质上与关系型数据模型还是有所区别的。无论是在APM领域,还是IoT领域,或者是更偏传统的工业领域,时序数据所表现出的数据模型更像是一个半结构化数据——有其遵循结构化定义的一面、也有可灵活扩展的一面,而不是完全...

数据缓存概述

如果使用数据缓存,将数据和镜像解耦,在要更新模型时,只需重新制作数据缓存,重新挂载到应用即可。创建方式 您可以自行设置数据缓存的属性来创建数据缓存。一个数据缓存主要具有以下属性:存储路径 创建时,可以指定数据存储空间(Bucket...

数据缓存概述

如果使用数据缓存,将数据和镜像解耦,在要更新模型时,只需重新制作数据缓存,重新挂载到应用即可。创建方式 您可以自行设置数据缓存的属性来创建数据缓存。一个数据缓存主要具有以下属性:存储路径 创建时,可以指定数据存储空间(Bucket...

数据标准

全局设置 业务应用:对数据模型支撑的应用系统信息进行创建、管理。业务域:对数据模型来源于哪些系统信息进行创建、管理。数据域:提供对数据域的定义与管理,供逻辑表设计时进行使用。通用设置 数据建模基础信息:对逻辑表的属性进行配置...

功能简介

全局设置 业务应用:对数据模型支撑的应用系统信息进行创建、管理。业务域:对数据模型来源于哪些系统信息进行创建、管理。数据域:提供对数据域的定义与管理,供逻辑表设计时进行使用。通用设置 数据建模基础信息:对逻辑表的属性进行配置...

技术架构选型

数据模型设计之前,需要首先完成技术架构的选型。本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。整体架构图 完整的技术架构图如下图所示。其中,MaxCompute作为整个大数据开发过程中的离线计算...

计算与分析概述

分析工具选择 表格存储支持 宽表模型、时序模型 等多种数据模型。使用不同数据模型时支持的分析工具不同,请根据实际场景选择相应分析工具。分析工具 适用模型 操作 描述 MaxCompute 宽表模型 使用MaxCompute 通过MaxCompute客户端为 表格...

08批量物理化逻辑模型

本文介绍批量物理化数据模型中的多张逻辑表到指定的云计算资源下。完成从逻辑态模型的物化。前提条件 已配置MaxCompute云计算资源“data_odps_dev”。已配置RDS云计算资源“dataq_dws_rds_dev”。完成13个逻辑模型创建(保证每个模型已经...

新建数据字典

数据字典管理支持创建并维护数据模型中使用的数据字典,制定并管理平台遵循的统一数据标准,为数据元、指标、维度的值域设置中引用数据字典提供数据基础,帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。本文为您介绍如何...

常见问题

查看表数据模型,选择合适的数据模型。例如,uniq key模型在compaction没有做完的时候下推无法适用,容易导致查询慢。为什么8030、8040端口访问失败?因为EMR Starrocks在EMR-5.8.0及以下版本、EMR-3.42.0及以下版本中load_url的端口号为...

新建模型目录

在左侧导航栏,单击 图标,选择 数据模型设计。将鼠标悬停至 我的模型,选择 新建目录。在新建目录对话框,输入名称、标识、描述,操作完成后单击 确认。按照上述方法,根据实际需要创建多个目录。相关操作 当需要修改某个已创建目录的名称...

数据

前提条件 已将数据模型“dws_ren_kh_demo_di(银行客户信息)”,物理化到“dataq_odps_dev”云计算资源,具体操作,请参见 物理化逻辑表。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 ...

数仓分层

数仓分层是结合对业务场景、实际数据、使用系统的综合分析,对数据模型进行的整体架构设计及层级划分。用于将不同用途的数据,归类划分至不同的分层,便于您更好地组织、管理、维护数据。分层归属 DataWorks为您提供了 贴源层、公共层、...

同步节点

逻辑表 输入表的数据格式,由数据模型定义,在下拉列表中选择,表示该计算资源中提供数据的数据表的结构。当选择数据表时,。当选择星号(*)时,表示数据结构为任意结构,用于对未创建数据模型的表进行操作,此时物理表必须选择已经存在的...

新建逻辑表命名规则

逻辑表命名规则旨在于让创建的逻辑表遵循统一的命名规范标准,可基于模型命名属性,对模型命名规则进行配置,形成条理清晰,方便检索并易于理解的数据模型,让数据模型应用更方便。本文介绍如何创建逻辑表命名规则。前提条件 已完成模型...

模型

本文介绍Mesh模型在OGC SF标准模型的基础上新增的数据模型。INDEXSURFACE IndexSurface用于基于索引的方式来描述多面体信息,如以下多面体:可以分别使用顶点坐标串(p1,p2,p3,p4,p5)以及使用顶点描述的面(1,2,3),(2,4,3),(4,5,3)来进行...

模型

本文介绍Mesh模型在OGC SF标准模型的基础上新增的数据模型。INDEXSURFACE IndexSurface用于基于索引的方式来描述多面体信息,如以下多面体:可以分别使用顶点坐标串(p1,p2,p3,p4,p5)以及使用顶点描述的面(1,2,3),(2,4,3),(4,5,3)来进行...

什么是数据资源平台

依托数据资源平台,可设计高质量的标准化数据模型,减少重复开发工作,用户可全面了解数据质量、数据使用情况和系统运行情况,并从业务视角更直观地使用并探索数据,更高效地从数据中获取业务价值。目前数据资源平台提供以下功能:协同 ...

步骤三:配置节点运行配置

输入数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同,物理表名可以自定义。当选择星号(*)时,代表数据结构为...

Trino

基本概念 数据模型 数据模型即数据的组织形式。Trino使用Catalog、Schema和Table三层结构来管理数据。Catalog 一个Catalog可以包含多个Schema,物理上指向一个外部数据源,可以通过Connector访问该数据源。一次查询可以访问一个或多个...

新建数据

通过新建数据域,实现对数据域的定义与管理,便于从数据域维度对数据模型进行分类管理,方便逻辑表设计时使用。本文介绍如何新建数据域。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标...

应用场景

数据标准:管理数据标准和构建数据模型,将数据标准贯彻到数据质量分析、保障及检查的全过程中,将散乱的多源异构数据加工成标准、干净的数据资产,确保数据的完整性、一致性、准确性和可用性。数据建模:通过数据建模模块提供的各种数据...

新建同步节点并运行后上线

当选择星号(*)时,表示数据结构为任意结构,用于对未创建数据模型的表进行操作,此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表,在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...

新建Elastic Service在线类型的节点并运行

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意结构,用于对未创建数据...

步骤八:验证数据

本文为您介绍如何通过即席查询来验证本教程开发的数据模型是否符合预期。即派生指标是否能够统计到 最近1天西湖龙井品类订单总金额。操作步骤 在Dataphin首页,单击顶部菜单栏的 研发。按照下图操作指引,进入 新建即席查询 对话框。在 ...

超级X(智能应用)

X-数据工程根据自然语言,自动生成多种任务(集成任务、数据模型和代码任务),降低开发难度;X-分析是基于自然语言,依托结构化数据资产精准响应;X-运维助手是实时查询实例运行情况与告警信息异常解读;X-编码助手是语法校验/自动生成与...

超级X(智能应用)

X-数据工程根据自然语言,自动生成多种任务(集成任务、数据模型和代码任务),降低开发难度;X-分析是基于自然语言,依托结构化数据资产精准响应;X-运维助手是实时查询实例运行情况与告警信息异常解读;X-编码助手是语法校验/自动生成与...

时空轨迹

时空轨迹:移动对象数据库中记录对象连续位置变化信息的数据模型(详见轨迹存储模型 基本概念),移动对象数据库为时空轨迹数据提供基本操作、查询和分析功能支持。针对移动对象时空轨迹(以下简称轨迹)数据,Lindorm Ganos 提供以下核心...

Presto

基本概念 数据模型 数据模型即数据的组织形式。Presto使用Catalog、Schema和Table三层结构来管理数据。Catalog:一个Catalog可以包含多个Schema,物理上指向一个外部数据源,可以通过Connector访问该数据源。一次查询可以访问一个或多个...

06查看逻辑表与物理表一致性对比

在左侧导航栏,选择 数据模型设计。将鼠标悬停至 我的模型 上,单击 图标。在逻辑表列表页面,查看 一致性 列的值是否为“一致”,即已创建的逻辑表和其物理表是否一致。单击 一致性 列的值。说明 物理一致性:模型物理化表与模型最新发布...

就绪检测节点

数据结构 数据模型指代您已经在云资源中创建的物理表。保证与下游节点的 输入数据模型 相同。开发配置 开发计算资源 开发场景中需要检测的数据源所在的计算资源。表名 开发场景中需要检测的数据表。输入说明 开发场景中需要进行检测的数据...

执行引擎

批量内存分配:向量化执行引擎预测计算每个算子需求的内存空间,结合执行引擎Batch化数据模型进行批量内存分配,避免过于碎片化的内存分配。最小内存操作原则:减少不必要的内存申请/重置/释放操作,最大化地提升内存操作性能。
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用