数据建模的发展背景 主要产品：DataWorks 课程时长：5分钟 当前主流的数据建模方法论 主要产品：DataWorks 课程时长：4分钟 数据建模的主要能力解读 主要产品：DataWorks 课程时长：22分钟 相关文档：数仓规划与业务分类 逆向建模：物理表...
课程视频列表 课程简介 课程内容：数据建模的发展背景。主要产品：DataWorks 课程时长：5分钟 课程内容：当前主流的数据建模方法论。主要产品：DataWorks 课程时长：4分钟 课程内容：数据建模的主要能力解读。主要产品：DataWorks 课程时长...
本文介绍多方安全建模的业务合作流程和产品使用流程。业务合作流程 在业务合作流程中，分为线下沟通流程和平台参与流程，具体业务合作流程参见以下流程图。产品使用流程 多方安全建模服务可以在保证多方原始数据不离开本地前提下，通过交换...
多方安全建模控制台作为多方安全建模的可视化操作平台，提供了一站式端到端的数据安全计算服务，服务包括安全计算环境安装、数据连接、数据探查、数据分析、模型研发、模型投产和模型监控，同时可根据您的业务需求配置安全策略。...
联邦建模的业务流程说明如下：部署联邦学习节点，并将样本数据加载到节点中，请参见 安装并部署节点。在 管理控制台 中进行以下操作：注册联邦学习的节点，请参见 创建节点。注册样本数据，请参见 数据表。创建 FL 项目，请参见 创建项目。...
查看模型概览 在DataWorks智能数据建模首页，您可以查看当前租户内创建的各类模型及派生指标数量、了解近三十天内模型发布情况，全局把控目标工作空间的建模动态。位置 描述 ① 该区域为您展示了DataWorks智能数据建模包含的数仓规划、数据...
Gateway API是Kubernetes中用于对服务网络流量进行建模的一系列资源，提供了一套表现力强、易扩展、面向角色的服务网络模型。本文介绍Gateway API组件信息、使用说明和变更记录。组件介绍 Gateway API是Kubernetes中用于对服务网络流量进行...
详细信息 代码提示和规范建模的列表是不会限制表的，提交和发布的时候才鉴权。对于较大规模的团队协作的数据开发来说这种模式是比较合适的方式，可以快速找到自己需要的表，在执行和发布的时候鉴权提示缺少权限，然后去申请权限。适用于 ...
根据联邦建模的不同开发阶段，将脚本分为 5 种类型：联邦表、预处理规则、预处理应用、模型训练、模型评估，具体请参见 脚本输入/输出配置说明。一个完整的联邦学习项目中包含多种类型的脚本，脚本与脚本之间，通过输入、输出/产出的数据...
问题描述 Dataphin规范建模的事实逻辑表关联维度的下游派生指标已下线，还是无法更换关联维度，报错“存在依赖，不可操作派生指标：xxx”。解决方案 如果需要更换事实逻辑表的关联维度，需要将所有相关的派生指标和业务限定都下线并删除。...
在进行联邦建模前，应先确认联邦建模中可用的建模数据。联邦建模中的建模数据分为两种：原始样本和联邦表。原始样本：指的是联邦建模各参与方的原始数据，即各节点中授权到该建模项目中的数据，该数据作为建模样本供联邦建模使用。联邦表：...
这些建模的时候没有考虑实时渲染的场景，通常体积巨大，无法在数字孪生这种实时渲染的场景下使用。如果要强行优化、轻量化此类模型，成本可能比重建模型还高，因此不建议在网上购买低价三维模型。为什么其他现成专业三维软件的三维模型不能...
使用限制 DataWorks工作空间中，不同角色使用智能数据建模的限制如下：浏览模型详情：访客、空间管理员、模型设计师、项目所有者 等所有DataWorks工作空间中的角色均可浏览数据模型的相关信息。编辑模型信息：仅 空间管理员、开发、运维、...
使用限制 DataWorks工作空间中，不同角色使用智能数据建模的限制如下：浏览模型详情：访客、空间管理员、模型设计师、项目所有者 等所有DataWorks工作空间中的角色均可浏览数据模型的相关信息。编辑模型信息：仅 空间管理员、开发、运维、...
本文以电商交易中台建设为例，为您介绍如何使用BizWorks从0到1完成设计建模的过程，包括创建限界上下文、服务建模、领域建模以及数据建模。步骤一：创建限界上下文 在目标项目中（例如：全渠道业务）创建商品上下文、交易上下文、库存上...
DataWorks智能数据建模的导入工具，为您提供了数据模型、数据标准等多种类型的对象模板，您可基于不同模板批量创建相应对象。该功能无需多次重复执行创建操作，即可快速生成多个对象，节省大量时间成本。本文为您介绍如何通过批量导入功能...
DataWorks智能数据建模的关系图，帮助您快速构建数据仓库模型架构图，直观展示数据仓库中维度、维度表、明细表、汇总表、应用表等各模型之间的关系。一个关系图承载一个数据仓库模型，一个账号支持创建多个关系图。本文为您介绍关系图的...
通过StarRocks异步物化视图进行数据建模，能够通过声明式的建模语言，简化流水线的管理，提升数据建模的效率与灵活性。本文为您介绍如何使用StarRocks的异步物化视图来进行数据建模。背景介绍 数据建模是通过合理的方法进行数据清洗、分层...
偏最小二乘回归提供一种多对多线性回归建模的方法，特别当两组变量的个数很多，且都存在多重相关性，而观测数据的数量（样本量）又较少时，用偏小二乘回归建立的模型具有传统的经典回归分析等方法所没有的优点。计算逻辑原理 偏最小二乘...
工程 工程又称为“建模工程”，是进行多方安全建模的研发场所，用户可基于虚拟宽表进行特征工程、模型研发和模型评估等操作。同时支持以可视化画布的形态编排建模流程，一个流程中可包含一个或多个组件，组件间以连线的方式表示数据的传递...
这一功能在数据清洗和特征工程阶段非常有用，能够有效地清理数据并准备适合后续分析和建模的数据集。配置组件 方式一：可视化方式 在Designer工作流页面添加 过滤与映射 组件，并在界面右侧配置相关参数：参数 描述 选择字段 选择要筛选的...
Gateway API是Kubernetes中用于对服务网络流量进行建模的一系列资源，提供了一套表现力强、易扩展、面向角色的服务网络模型。本文介绍Gateway API组件信息、使用说明和变更记录。组件介绍 Gateway API是Kubernetes中用于对服务网络流量进行...
AliyunTDSRModellingAccess 是阿里云管理的产品系统策略，您可以将 AliyunTDSRModellingAccess 授权给 RAM 身份（RAM 用户、RAM 用户组和 RAM 角色），本策略定义了 管理三维空间重建临云镜产品（TDSR）建模的权限。策略详情 类型：系统...
目录要求 与常规智能圈选输入数据的要求相同，目录结构如下：行为维表（behavior）数据为个性化触达时间建模的主要数据来源，运营记录维表（operation）数据为个性化触达时间建模的辅助数据来源。行为维表和 运营记录维表 的内容要求 行为...
在人工智能平台中，创建可视化建模的工作空间时，资源请选择基于MaxCompute的计算资源组，详情请参见 AI计算资源概述。Hologres加速计算源：Dataphin支持为已绑定MaxCompute计算源的项目添加Hologres加速计算源，加速业务数据的查询速度。...
而在DataWorks智能建模的维度模型设计中，为了提高下游的查询效率，降低获取数据的复杂性，减少关联表的数量，通常可将一些高频使用的字段作为冗余字段（例如，用户ID、常用的分析维度）。在已添加字段的 操作 列，单击 冗余字段，即可设置...
画布 页面中间为建模的画布，您可以在画布中加入多个组件，并用连线的方式定义组件间输入和输出的传递关系，完成模型训练流程的定制。参数设置 在画布中单击指定的组件，画布右侧将展示当前组件的 参数设置 模块，您可以在该模块中调整模型...
当产品的单位不是重量单位时，建议额外填写“单位产品重量”，用于建模的质量守恒检验。另外，数据统计时段要避免出现未来的时间段。单位：即核算产品的功能单位，碳排放的计算结果将会换算至每功能单位产品的碳足迹。数据统计时段：即生命...
维度是维度建模的基础。在维度建模中，将度量称为”事实“，将环境描述为”维度。维度表包含了事实表中指定属性的相关详细信息，常用的维度如日期维度、城市维度等。本文为您介绍如何创建维度表。功能介绍 结合业务的数据域的规划，提取出...
Zeppelin自带了TPCH和TPCDS的教程Note，您无需任何配置就可以在E-MapReduce（简称EMR）数据开发集群进行TPCH和TPCDS的性能测试。背景信息 EMR数据开发集群中的TPCH支持Hive、Spark、Flink和Presto四个引擎，TPCH详细信息，请参见 TPC-H。...
本文介绍Cassandra数据建模的概念、建模建议。Cassandra是一款分布式、去中心化、高可用的列存储（Wide Column Store）的No SQL数据库。分布式层面主要依靠一致性Hash算法把数据分布在整个集群中，单机主要实现了基于LSM-Tree的引擎。集群...
DataWorks数据建模的设计与实现解耦，在设计过程中，您无需考虑各个大数据引擎的实现方式，建模引擎会根据FML语言定义的Schema去驱动底层各个数据引擎的执行和操作，仅在实际物化（即把设计的逻辑表转换为底层引擎的物理表）阶段，建模引擎...
在机器学习平台中，创建可视化建模的工作空间时，资源请选择基于MaxCompute的计算资源组，详情请参见 AI计算资源概述。Hologres加速计算源：Dataphin支持为已绑定MaxCompute计算源的项目添加Hologres加速计算源，加速业务数据的查询速度。...
项目的建模过程主要由技术建模构成。本文介绍示例项目中技术建模的相关内容。背景信息 技术建模包括限界上下文划分、领域模型、数据模型、服务模型等内容，主要目的是能够基于DDD的建模方法论将业务模型转化成技术模型，从而能高效指导中台...
本文介绍Lindorm时序引擎数据建模的过程。创建时序数据库 Lindorm实例创建成功后，系统会默认创建default数据库，将数据默认写入该数据库，您无法删除default数据库。时序引擎也支持创建多个数据库，不同的数据库在存储层面进行物理隔离，...
维度建模：维度建模支持逆向建模，解决现有数仓的建模冷启动难题，支持可视化数仓维度建模，支持通过Excel文件导入模型和通过FML（一种类SQL的DSL）快速构建模型，支持与数据开发DataStudio无缝打通，自动生成ETL代码。数据指标：数据指标...
说明 所有规则项，在数据建模的创建逻辑表中生效的均为该规则项的code值或者标识值。例如：这里选择一级目录名称为ODS，则在创建逻辑表时，逻辑表名称中显示为该一级目录的标识值（ods）。开启校验 默认选中 开启校验，设计的命名规则才能...
在机器学习平台中，创建可视化建模的工作空间时，资源选择为基于MaxCompute的计算资源组，详情请参见 资源管理概述。如果您开启了机器学习，需要配置以下参数。PAI地域：选择和Dataphin实例所在地域。AccessKey ID、AccessKey Secret：配置...
在机器学习平台中，创建可视化建模的工作空间时，资源选择为基于MaxCompute的计算资源组，详情请参见 资源管理概述。如果您开启了机器学习，需要配置以下参数。PAI地域：选择和Dataphin实例所在地域。AccessKey ID、AccessKey Secret：配置...
因此，能耗宝平台提供计算方案和参数管理的功能，支持用户自定义并引用计算方案和参数，便于提高建模的效率、准确性和规范度。计算方案和参数管理 字典管理 平台支持用户配置词条并为词条匹配影响因子。用户在产品碳足迹建模中，若存在一些...