数据建模之大数据模型

_相关内容

模型查看器

数据源面板 url:模型的URL链接。数据项配置 说明 数据源 组件的数据源中通过 代码编辑 或 可视化编辑 展示了组件所包含的数据字段。也可以修改 数据类型,灵活配置组件数据。数据映射 当您需要自定义图表字段配置时,可以在 数据映射 模块...

业务建模概述

BizWorks基于领域驱动设计方法论的模型设计平台,提供了对业务域、领域模型、数据模型的可视化建模能力,完成了业务建模过程的可视化、在线化。业务建模平台 的 概览 页包括以下内容:序号 名称 描述 ① 业务建模概述 统计业务建模对应的...

标准代码

标准代码是字段标准的取值范围,在标准代码中可设置某一字段标准可选择的数据的内容以及范围。例如性别字段标准的标准代码内容应该...后续步骤 创建完成后,您可在数据建模配置事实表与维度表字段时进行关联,关联方法请参见 发布模型至引擎。

查看逻辑表的引用场景

通过查看逻辑表引用场景能够快速对比逻辑模型和场景中计算节点引用的数据模型的一致性,以便及时更新公共节点被引用模型,保证逻辑模型和被引用模型的一致性。本文介绍如何查看逻辑表的引用场景信息。前提条件 逻辑表已经被场景中的公共...

敏感数据访问及导出情况

操作步骤 登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品 数据治理 数据保护伞,单击 立即体验,进入数据保护伞。说明 若阿里云主...

通用参考:切换资源组

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。修改数据集成资源组。离线同步任务 单个任务修改 在左侧导航栏,单击 数据开发,找到目标离线同步...

输入节点

当选择数据表时,需保证模型与下游节点的输入数据模型相同,适用于已创建数据模型的场景。当选择*(任意结构)时,代表数据结构为任意结构,适用于未创建数据模型的场景。说明 模型名称支持复制,将鼠标移动至已选择模型时,单击 图标,...

输入节点

当选择数据表时,需保证模型与下游节点的输入数据模型相同,适用于已创建数据模型的场景。当选择*(任意结构)时,代表数据结构为任意结构,适用于未创建数据模型的场景。说明 模型名称支持复制,将鼠标移动至已选择模型时,单击 图标,...

新建维度

背景信息 维度和维度属性也是数据标准的一种类型,通常使用维度建模方式创建的数据模型会采用维度+指标的数据标准管理。在数据模型字段中关联维度属性字段标准,可用于质量检测。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,...

新建维度

背景信息 维度和维度属性也是数据标准的一种类型,通常使用维度建模方式创建的数据模型会采用维度+指标的数据标准管理。在数据模型字段中关联维度属性字段标准,可用于质量检测。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 ...

查看数据开发操作记录

进入数据开发DataStudio 登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。查看操作历史 在数据开发DataStudio左侧边栏点击 图标进入 操作历史 页面,可通过操作类型、...

数据下载

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上角的 图标,选择 全部产品 数据集成 上传与下载。在 上传与下载 页面单击左侧导航栏的 下载...

数据脱敏能力概述

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品 数据治理 数据保护伞,单击 立即体验,进入数据保护伞。说明 若...

数据标准

根据数据元绑定的质量校验UDF,数据建模会据此自动添加对应云计算资源平台下的UDF规则,如自动添加MaxCompute的自定义SQL规则,默认期望值为0,则执行的规则SQL如下:select sum(id_card_check(idCard,"{\"type\":\"STRING\",\"size\":18}...

建模空间

背景信息 DataWorks智能数据建模在进行跨多个工作空间数据的统一建模情况下,为您提供了 数据模型设计空间 与 数据研发工作空间 的概念,通过建模空间功能实现模型跨工作空间应用。其中 数据模型设计空间 为模型设计师视角,主要用于统筹...

应用场景

数据建模:通过数据建模及代码自动化生成功能,以会员为中心,构建完整的会员数据模型,集成会员属性、统计指标等数据。主题服务:通过数仓即席查询功能,面向应用,自动输出会员主题的汇总数据模型,高效完成进一步的会员日报分析、会员...

导出逻辑表

通过导出逻辑表功能,一次批量导出多张数据模型,搭配导入功能,可以快速实现工作组间的数据模型迁移。本文介绍如何导出逻辑表。前提条件 已新建逻辑表,具体操作,请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑...

数据质量规则配置流程

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发 数据质量,在下拉框中选择对应工作空间后单击 进入数据质量。在左侧导航栏选择 规则管理 规则列表,进入数据质量监控规则列表页面。查看规则列表 功能 描述 过滤...

导出逻辑表

通过导出逻辑表功能,一次批量导出多张数据模型,搭配导入功能,可以快速实现工作组间的数据模型迁移。本文介绍如何导出逻辑表。前提条件 已新建逻辑表,具体操作,请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑...

敏感数据保护

手动打标包括页面手动指定、excel上传、数据标准打标、数据建模打标等。敏感数据保护 在识别出敏感数据之后,Dataphin支持对敏感数据进行脱敏保护。主要包括以下场景:敏感数据查询脱敏 当使用即席分析、代码任务、数据预览等功能,查看被...

敏感数据保护

手动打标包括页面手动指定、excel上传、数据标准打标、数据建模打标等。敏感数据保护 在识别出敏感数据之后,Dataphin支持对敏感数据进行脱敏保护。主要包括以下场景:敏感数据查询脱敏 当使用即席分析、代码任务、数据预览等功能,查看被...

添加数据

DataV数据集支持多种数据源的接入,如数据库、excel表格文件等,通过对数据的结构化存储和元数据的汇集整理,提供高效实用的数据建模能力,可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...

表管理

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在左侧导航栏单击 表管理。新建、查找及编辑目标表 新建表及导入表数据 在表管理页面,您可单击 及 ...

查看数据

在进行联邦建模前,应先确认联邦建模中可用的建模数据。联邦建模中的建模数据分为两种:原始样本和联邦表。原始样本:指的是联邦建模各参与方的原始数据,即各节点中授权到该建模项目中的数据,该数据作为建模样本供联邦建模使用。联邦表:...

新建PostgreSQL类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

开发概览

如何使用Lindorm AI引擎 类型 说明 参考文档 模型创建 导入预训练AI模型或对时序数据进行建模训练,用于后续对数据进行分析和处理或执行时序分析类任务。模型创建 模型管理 查看数据库中所有模型、查看模型详细信息、删除指定模型模型...

新建业务应用

通过新建业务应用,创建数据模型支撑的应用系统信息,将数据模型和所属应用属性进行关联,便于从应用系统维度对数据模型进行分类管理。本文介绍如何新建业务应用。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 协同。在...

通过云计算资源扫描创建逻辑表

已创建数据模型目录,具体操作,请参见 新建模型目录。背景信息 通过云计算资源扫描,快速完成STG层数据模型的创建。操作步骤 登录 数据资源平台控制台。在顶部菜单栏,单击 图标,选择目标工作组。在页面左上角选择 协同。在左侧导航栏,...

新建PostgreSQL类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

快速体验

了解一个项目从数据建模数据同步(数据传输)、数据开发、运维、数据治理到数据应用的全流程。了解DataWorks、MaxCompute、Hologres、E-MapReduce等各个云产品、组件之间的联动关系。了解如何规划DataWorks工作空间、MaxCompute项目、...

划分数据

通常,您需要阅读各源系统的设计文档、数据字典和数据模型,研究逆向导出的物理数据模型。进而,可以进行跨源的主题域合并,跨源梳理出整个企业的数据域。数据域是指面向业务分析,将业务过程或者维度进行抽象的集合。为保障整个体系的生命...

有数BI

使用网易有数BI进行数据可视化分析 使用创建的数据模型进行可视化分析,制作数据可视化报告。报告制作界面说明如下:区域 区域名 说明 ① 控件区 此区域显示各类图表控件、辅助控件,可选择您所需的控件拖动至画布区。② 画布区 您可以在...

Trino概述

基本概念 数据模型 数据模型即数据的组织形式。Trino使用Catalog、Schema和Table三层结构来管理数据。Catalog 一个Catalog可以包含多个Schema,物理上指向一个外部数据源,可以通过Connector访问该数据源。一次查询可以访问一个或多个...

划分数据

划分数据域 通常,您需要阅读各源系统的设计文档、数据字典和数据模型设计文档,研究逆向导出的物理数据模型。进而,可以进行跨源的主题域合并,跨源梳理出整个企业的数据域。数据域是指面向业务分析,将业务过程或者维度进行抽象的集合。...

系统配置

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品 数据治理 数据保护伞,单击 立即体验,进入数据保护伞。说明 若...

新建Elastic Job类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建AnalyticDB PostgreSQL类型的公共节点

输入数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为...

湖仓一体2.0使用指南

返回结果示例:+-+-+-+-+|col1|col2|col3|col4|+-+-+-+-+|1|hello|test|world|+-+-+-+-+创建并使用Hive+HDFS联邦 Hive是常见的开源大数据的数据仓库解决方案,元数据大多存储在HMS中,数据大多存储在HDFS上。MaxCompute支持创建此类型的...

新建AnalyticDB PostgreSQL类型的公共节点

输入数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为...

配置数据质量监控

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发 数据质量,在下拉框中选择对应工作空间后单击 进入数据质量。进入表规则配置页面。在数据质量左侧导航栏,单击 规则配置 按表配置,根据如下参数定位目标表。...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用