数据建模之大数据模型

_相关内容

产品简介

DLA Ganos是基于云原生数据湖分析(Data Lake Analytics,DLA)系统设计开发的,面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化(Serverless)数据湖分析服务与内置的Spark计算引擎,DLA Ganos打通了阿里云各个存储系统,如...

迁移MySQL数据

更多信息,请参见 数据类型映射关系 和 数据模型。源库对象 在 源库对象 框中单击待同步对象,然后单击 将其移动至 已选择对象 框。同步对象的选择粒度为库、表、列。重要 选择粒度为库级别,不支持后续新增表的数据同步。若您在使用DTS的...

产品概述

产品为客户提供资产建模数据采集、数据分析、设备监控和数据分析五产品能力:资产建模:定义设备资产标准模型,管理设备资产数据 提供设备资产全维度数据建模工具 快速构建实体资产数据模型 对设备资产进行全生命周期管理 为数据应用...

使用数据模型模板快速进行数仓建模

后续步骤 您可在载入目标数据模型模板至DataWorks数据建模模块后,在数据建模模块基于导入的模板进行修改或补充,使用数据建模的更多功能。具体操作,请参见:数据建模概述。相关参考 使用数据模型模板的更多详细参考,请参见 零售电商数据...

离线数仓构建流程概述

步骤五:规范建模 数据开发 基于 规范定义 明确好的统计指标口径和 规范建模 部分定义好的模型完成规范建模数据开发。包括维度逻辑表、事实逻辑表、原子指标、业务限定、派生指标。步骤一:开发维度逻辑表 步骤二:开发事实逻辑表 步骤三:...

离线数仓构建流程概述

步骤五:规范建模 数据开发 基于 规范定义 明确好的统计指标口径和 规范建模 部分定义好的模型完成规范建模数据开发。包括维度逻辑表、事实逻辑表、原子指标、业务限定、派生指标。步骤一:开发维度逻辑表 步骤二:开发事实逻辑表 步骤三:...

下载建模工具(DDM)

DDM是数据建模DATABLAU支持的线下客户端,您可以使用DDM客户端进行自定义数据标准、创建模型和管理模型库等操作。数据建模前,您需要先下载并安装DDM,为后续的建模操作准备好工具。本文为您介绍如何下载DDM建模工具。前提条件 开通数据...

按指标关联

关联项说明 关联项 说明 逻辑表 对应数据建模中创建的逻辑表。说明 需在数据建模中创建逻辑表,该逻辑表需被生产节点引用。指标 数据标准中已经创建的指标。数据标准 对应数据标准模块中的数据元、数据字典、命名标准、质量函数。数据源 ...

计费简介

DataWorks版本服务计费说明 DataWorks各版本详解 软件:数据建模 DataWorks智能数据建模支持维度建模,您可在此完成数仓规划设计、制定并沉淀企业数据标准、维度建模、定义数据指标,以此来构建数据仓库。同时,您也可使用DATABLAU进行E-R...

按单节点关联

逻辑表 对应数据建模中创建的逻辑表。说明 需在数据建模中创建逻辑表,该逻辑表需被生产节点引用。数据标准 对应数据标准模块中的数据元、数据字典、命名标准、质量函数。数据源 对应系统设置模块中添加的云计算资源。说明 数据源是拉取...

自定义模型最佳实践

数据来源:默认为 模型数据,您在此处选择准备清洗的数据集(版本),并管理现有的数据集。算子选择:阿里云百炼提供了预置算子,包括各种算子类型、算子描述及清洗效果预览。您可以根据预置算子配置清洗参数。点击 创建完成,清洗任务将...

技术架构选型

根据阿里巴巴OneData方法论最佳实践,在设计数据模型前,您需要完成技术架构的选型。本教程中使用阿里云大数据产品Dataphin配合MaxCompute,完成整体的数据建模和研发流程。完整的技术架构如下图所示。其中,Dataphin的数据集成及同步负责...

按逻辑表关联

说明 需在数据建模中创建逻辑表,该逻辑表需被生产场景的场景节点引用。物理表 对应数据建模模块通过逻辑表物理化产生的物理表;对应数据开发模块通过运行场景产生的物理表。说明 物理表展示的数据目前只支持展示作用,不参与实例化。数据...

按线上API关联

说明 需在数据建模中创建逻辑表,且该逻辑表需被生产场景的场景节点引用,同时关联了该逻辑表的场景节点需被场景引用。场景 对应数据开发上线状态的场景。说明 需在数据开发模块部署及运行生产场景成功。场景节点 对应生产场景包含的场景...

查看资产总览

前提条件 已在数据建模模块关联指标、维度或度量,具体操作,请参见 配置逻辑表关联字段标准。已在数据建模模块创建逻辑表,并物理化。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产分析。...

查看资产总览

前提条件 已在数据建模模块关联指标、维度或度量,具体操作,请参见 配置逻辑表关联字段标准。已在数据建模模块创建逻辑表,并物理化。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产...

零售电商数据建模

DataWorks智能数据建模产品内置了零售电子商务数据仓库行业模型模板,您可以一键导入模板,本文结合零售电子商务业务背景以及模型构建核心步骤来帮助您了解维度建模理论和智能数据建模产品。案例使用流程 零售电子商务公司背景简介 零售...

产品简介

产品演示 产品概述 析言GBI是基于阿里云通义语言模型数据分析领域专门增强的原生数据助理,通过自然语言交互实现NL2SQL、数据问答、分析、洞察等多维度的大模型智能分析应用,适用于业务变化较快、数据分析时效性强的一线业务场景。...

场景教程

MaxCompute Hologres EMR Spark 数据分析 大数据AI公共数据集分析 本教程通过DataWorks,联合云原生大数据计算服务MaxCompute,使用大数据AI公共数据集(淘宝、飞猪、阿里音乐、Github、TPC等公共数据),指导您如何快速进行大数据分析,...

概述

MaxCompute Hologres EMR Spark 数据分析 大数据AI公共数据集分析 本教程通过DataWorks,联合云原生大数据计算服务MaxCompute,使用大数据AI公共数据集(淘宝、飞猪、阿里音乐、Github、TPC等公共数据),指导您如何快速进行大数据分析,...

功能特性

数据分析概述 访问数据分析功能 管理数据集 仪表盘 Copilot Copilot是DMS基于阿里云大模型构建的数据智能助手。其结合了DMS熟练的数据管理、数据使用能力,可帮助开发、运维、产品、运营、分析师和数据库管理员,更高效、规范地使用和管理...

按线上场景关联

说明 需在数据建模中创建逻辑表,且该逻辑表需被公共节点引用,同时关联了该逻辑表的公共节点需被场景引用。数据标准 对应数据标准模块中的数据元、数据字典、命名标准、质量函数。数据源 对应系统设置模块中添加的云计算资源。说明 数据源...

数据标准概述

DataWorks数据建模支持在建模前规划制定数据标准,或在建模使用过程中根据业务情况沉淀企业业务的数据标准。通过规范约束标准代码、度量单位、字段标准、命名词典,来保障后续建模与应用过程中数据处理的一致性,从源头上保障数据的标准化...

按应用关联

说明 需在数据建模中创建逻辑表,且该逻辑表需被生产场景的场景节点引用。场景 对应数据开发生产状态的场景。说明 需在数据开发模块部署及运行生产场景成功。场景节点 对应生产场景包含的场景节点。说明 需在数据开发模块创建场景节点,且...

查看指标资产详情

前提条件 已在数据建模模块关联指标、维度或度量,具体操作,请参见 配置逻辑表关联字段标准。已在运营模块中编目和公开指标资产,具体操作,请参见 配置指标资产目录 和 公开与隐藏指标资产。背景信息 将数据标准模块中创建的指标进行编目...

查看指标资产详情

前提条件 已在数据建模模块关联指标、维度或度量,具体操作,请参见 配置逻辑表关联字段标准。已在运营模块中编目和公开指标资产,具体操作,请参见 配置指标资产目录 和 公开与隐藏指标资产。背景信息 将数据标准模块中创建的指标进行编目...

技术架构选型

本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中,DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...

Delta Lake概述

Delta数据湖方案如下:在大数据存储层上提供了数据管理层,该数据管理层等同于数据库中的元数据管理,其元数据随着数据一起存放并对用户可见(例如 图 1 所示)。Delta基于元数据管理引入了ACID,解决了因数据导入失败而产生脏数据和数据...

使用指南

简介 析言GBI是基于阿里云通义语言模型数据分析领域专门增强的原生数据助理,通过自然语言交互实现NL2SQL、数据问答、分析、洞察等多维度的大模型智能分析应用,适用于业务变化较快、数据分析时效性强的一线业务场景。操作指引 析言GBI...

敏感数据概况

操作步骤 登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品 数据治理 数据保护伞,单击 立即体验,进入数据保护伞。单击左侧导航栏的 ...

07批量导入逻辑表

通过数据模型导入功能,一次批量导入多张数据模型。前提条件 已完成数据模型目录规划。按照数据模型导入Excel模板完成模型录入。操作目的 通过数据模型导入功能,一次批量导入多张数据模型。导入模型如下:workspace-tables 说明 该Excel中...

新手指引

模型RAG对话系统 5分钟使用EAS一键部署LLM语言模型应用 5分钟使用EAS一键部署Stable Diffusion实现文生图能力 5分钟操作EAS一键部署通义千问模型 LLM语言模型数据处理-Wikipedia(web text数据)LLM语言模型数据处理-arXiv(论文...

维度建模

以上示意图引用自阿里巴巴数据技术及产品部《大数据之路:阿里巴巴大数据实践》。实验预期:本文操作结果 预期的分层划域,下图中从下到上数仓分层,从左到右划分数据域。这里您仅需了解一下概貌,后面会一步一步配置,蓝色字体为本实验中...

开发管控:管理者

开放平台扩展程序 扩展程序概述 测试应用扩展程序 流程管控展示 数据治理检查项 数据治理中心概述 配置治理项 数据建模数据建模系统管理 说明 标准模式工作空间的发布操作默认为同空间发布,若您存在跨空间、跨云发布场景,则可选择使用...

MaxCompute表数据

单击 查看模型,即可进入 智能数据建模 维度建模 页面,查看创建的模型表。您可以在表编辑页面,修改表信息、发布表、查看表的操作日志或进行表模型的数据开发。说明 仅DataWorks智能数据建模生成的表会显示模型信息。维度建模概述 表权限...

技术架构选型

本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中,DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...

查看数据风险(旧版)

操作步骤 登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品 数据治理 数据保护伞,单击 立即体验,进入数据保护伞。说明 若阿里云主...

使用限制

限制分类 限制项 最大值 系统设置 工作组数量 1000 云计算资源数量(所有工作组中)1000 数据同步 离线任务数量 1000 实时同步任务数量 500 数据建模 数据建模-模型数量 10000 数据标准-数据元数量 10000 数据标准-指标数量 10000 质量评估...

什么是图数据库GDB?

数据库与传统关系型数据库相比的优势 传统的关系型数据库和图数据库无论是在模型,存储以及查询优化上都存在极的差异。比如社交用户关系中的2度查询请求,传统关系型数据库处理起来至少是秒级别的,3度查询更差甚至无法支持。对比而言...

导入

DataWorks智能数据建模的导入工具,为您提供了数据模型数据标准等多种类型的对象模板,您可基于不同模板批量创建相应对象。该功能无需多次重复执行创建操作,即可快速生成多个对象,节省大量时间成本。本文为您介绍如何通过批量导入功能...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用