数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。5分钟快速了解 功能介绍 数仓规划包括逻辑...
变更管控 变更策略 变更策略是根据您已经创建好的变更规则，设置其生效范围和管控方式。支持在单个变更策略中配置多个规则并给每个规则指定不同的管控方式。变更规则 变更规则是基于对象的基础属性抽象出元数据，结合系统内置规则或自定义...
将已处理好的数据资产，安全、便捷地提供给数据消费者（例如：数仓开发人员，运营、销售、产品等业务人员），能够对有权限的数据进行数据分析，为业务决策提供数据支持，为业务开发创造新价值。前提条件 已购买资产运营和资产消费增值服务...
资产市场管理用于新建以及管理私有及公共资产市场的基本信息，包括市场管理员、市场类目、描述等，在工作台中开发好的标签都可以申请上架于资产市场。可以定义一个公共资产市场以及多个私有资产市场，项目中的标签仅可上架到关联的市场中，...
前提条件 在使用API前，您需要准备好身份账号及访问密钥（AccessKey），才能有效通过客户端工具（SDK、CLI等）访问API。细节请参见 创建AccessKey。OpenAPI采用RPC签名风格，支持使用一个程序调用另外一个程序的函数或方法，如同调用本地...
身份管理 在阿里云公共云环境下，...不同项目角色的权限等级不一样，可以按照实际情况进行项目角色授予，能更好保护项目内数据的安全。同时项目角色支持客户自定义，可以按照企业的管理制度和实际情况自定义角色进行项目内的用户管理。
资产市场管理用于新建以及管理私有及公共资产市场的基本信息，包括市场管理员、市场类目、描述等，在工作台中开发好的标签 以及群组 都可以申请上架于资产市场。可以定义一个公共资产市场以及多个私有资产市场，项目中的标签 及群组 仅可...
为企业数据研发团队以及开发工程师提供一站式标签开发以及服务平台，适合多种场景（如风控、营销），提供离线、实时、服务标签的开发、管理、探索以及服务能力，赋能上层各端业务应用，为企业沉淀标签资产，使标签开发高效、好找、好用、好...
划分示例 例如，A公司电商营销业务板块可以划分为如下表所示的主题域。主题域中的每一部分，都是根据实际业务过程进行归纳、抽象得出的。主题域 业务过程举例 会员和店铺域 注册、登录、装修、开店、关店 商品域 发布、上架、下架、重发 ...
身份管理 在独立部署环境下，Dataphin...不同项目角色的权限等级不一样，可以按照实际情况进行项目角色授予，能更好保护项目内数据的安全。同时项目角色支持客户自定义，可以按照企业的管理制度和实际情况自定义角色进行项目内的用户管理。
in 运算符用于把某个值与一系列指定列表的值进行比较。LIKE 表示忽略前后缀，进行字符匹配，即模糊匹配（%keyword%）。Start With 表示忽略后缀，进行字符匹配，即左匹配（keyword%）。End With 表示忽略前缀，进行字符匹配，即右匹配（%...
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据；同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源，为数据的研发提供计算资源。准备数据源 ...
in 运算符用于把某个值与一系列指定列表的值进行比较。LIKE 表示忽略前后缀，进行字符匹配，即模糊匹配（%keyword%）。Start With 表示忽略后缀，进行字符匹配，即左匹配（keyword%）。End With 表示忽略前缀，进行字符匹配，即右匹配（%...
为企业数据研发团队以及开发工程师提供一站式标签开发以及服务平台，适合多种场景（如风控、营销），提供离线、实时、服务标签的开发、管理、探索以及服务能力，赋能上层各端业务应用，为企业沉淀标签资产，使标签开发高效、好找、好用、好...
实体指具有可区别性且独立存在的某种事物，比如人、地名、公司、设备、商品等。本文将指导您如何创建实体。实体管理概览 实体管理页面主要由功能区和实体列表组成。您可以在实体管理页面对创建的实体进行相关的管理操作。区域 说明 ① 功能...
通过元数据，组织可以有效地监控和分析其数据资产，以实现更好的决策支持和业务洞察。元数据分类 元数据根据用途分为技术元数据（Technical Metadata）、业务元数据（Business Metadata）和管理元数据（Management Metadata）。技术元数据...
校验成功后，单击 确认并开始数据建设，即可开始数据建设。后续步骤 完成设置Dataphin实例的计算引擎后，您就可以准备后续数据研发过程中用于读取和写入数据的数据源、用于提供计算资源的计算源。具体操作，请参见 准备数据源和计算源。
实体指具有可区别性且独立存在的某种事物，比如人、地名、公司、设备、商品等。本文将指导您如何创建实体。实体管理概览 实体管理页面主要由功能区和实体列表组成。您可以在实体管理页面对创建的实体进行相关的管理操作。区域 说明 ① 功能...
变更策略是根据您已经创建好的变更规则，设置其生效范围和管控方式。支持在单个变更策略中配置多个规则并给每个规则指定不同的管控方式。本文为您介绍如何创建变更策略。背景信息 变更策略、生效时间、管理权限详细说明如下：变更策略：...
变更策略是根据您已经创建好的变更规则，设置其生效范围和管控方式。支持在单个变更策略中配置多个规则并给每个规则指定不同的管控方式。本文为您介绍如何创建变更策略。背景信息 变更策略、生效时间、管理权限详细说明如下：变更策略：...
2024年04月02日 尊敬的Dataphin用户：Dataphin独享模式（半托管版）在购买Dataphin软件的基础上，还需要购买软件部署所依赖的底层资源，云平台将基于已购资源在指定VPC中进行自动化部署，具备更好的安全性和可拓展性。您可以自行控制版本...
数值类型：支持数值类型的运算符比较，包括=、!示例说明 业务日期以2022-12-06为例，使用或运算配置上图条件判断：第一条判断：2022-12-06 在普通日历中不属于星期中的周六或周天，即第一个条件判断为假。第二条判断：2022-12-06 在公共...
确定指标 本教程中，用户是A公司电商营销部门的营销数据分析师。数据需求为最近一天厨具类目的商品在各省的销售总额、该类目销售额前10的商品名称、各省用户购买力分布（人均消费额）等，用于营销分析。基于规范定义，确认业务过程为确认收...
单表时间字段比较 用于对同一表的两列的时间差进行比较。两表时间字段比较 用于对不同表的两列的时间差进行比较。有效性 字段格式校验 用于识别表达式或者正则表达式对单字段的格式进行校验。字段长度校验 用于对单字段的长度进行校验。...
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域，是对某个主题分析后确定的主题边界。例如，商品域、交易域、会员域等。项目 ...
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域，是对某个主题分析后确定的主题边界。例如，商品域、交易域、会员域等。项目 ...
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源，系统以此来支持相关数据的建设工作。需要选择计算引擎类型（目前仅开放MaxCompute计算类型），配置计算引擎所在的集群，例如Endpoint等信息。系统以此来支持该计算...
柱状图 柱状图适用于比较各组数据之间的差别，并且可以显示一段时间内的数据变化情况。样例图 数据要素 X轴 Y轴（求和）拆分 说明 单击 图标，支持根据数据要素进行升序、降序、不排序。X轴和Y轴同时配置了排序时，以X轴排序为准。单击 ...
调用异常影响趋势展示该时间段内调用异常API数与影响APP数的趋势，例如调用异常API数少但影响APP数比较多的情况下，说明这些API影响范围较大，需要您尽快修复调用异常的API。管理运维监控API：对API的数据做统计，并且支持对异常API进行...
监控规则的内容和标准内容无关，但是在创建数据标准时添加了规则配置，则针对该标准映射到的所有资产对象，均可快捷引用标准已经配置好的监控规则，实现快速批量配置的目的。这种配置方式下，质量监控规则的 规则配置 和 校验配置 均为自行...
数值类型：支持数值类型的运算符比较，包括=、!示例说明 业务日期以2022-12-06为例，使用或运算配置上图条件判断：第一条判断：2022-12-06 在普通日历中不属于星期中的周六或周天，即第一个条件判断为假。第二条判断：2022-12-06 在公共...
柱状图 柱状图适用于比较各组数据之间的差别，并且可以显示一段时间内的数据变化情况。样例图 数据要素 X轴 Y轴（求和）拆分 说明 单击 图标，支持根据数据要素进行升序、降序、不排序。X轴和Y轴同时配置了排序时，以X轴排序为准。单击 ...
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
单表时间字段比较 用于对同一表的两列的时间差进行比较。两表时间字段比较 用于对不同表的两列的时间差进行比较。有效性 字段格式校验 用于识别表达式或者正则表达式对单字段的格式进行校验。字段长度校验 用于对单字段的长度进行校验。...
监控规则的内容和标准内容无关，但是在创建数据标准时添加了规则配置，则针对该标准映射到的所有资产对象，均可快捷引用标准已经配置好的监控规则，实现快速批量配置的目的。这种配置方式下，质量监控规则的 规则配置 和 校验配置 均为自行...
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源，系统以此来支持相关数据的建设工作。需要选择计算引擎类型（目前仅开放MaxCompute计算类型），配置计算引擎所在的集群，例如Endpoint等信息。系统以此来支持该计算...
以数据开发建设为例，数据开发建设为菜单组；研发为一级菜单；数据集成、数据研发等为二级菜单。系统菜单默认顺序 智能工作台 超级X：X-数据工程、X-分析、X-数据标准、X-数据安全、智能应用管理、企业知识库。数据开发建设 研发：数据集成...
X-数据标准：AI驱动自动提取数据标准与码表定义、智能识别标准与字段的映射关系，助力低成本快速开启数据标准建设以提升数据规范化程度，实现精准治理省时省力。X-数据安全：结合数据资产语义与样例数据，智能推荐分类分级；依据特征名称...
例如，电商公司的商品维度可能有近百个维度属性，为下游的数据统计、分析、探查提供了良好的基础。尽可能多的给出包含一些富有意义的文字性描述。属性不应该是编码，而应该是真正的文字。在阿里巴巴维度建模中，通常是编码和文字同时存在，...
背景信息 某公司的订单系统使用MySQL作为存储数据库，其中的oms_order为存储订单的表。现在要开始设计一个营销活动，在活动期间需要实时地统计每个产品类型的销售数量，用于快速地支持活动方案调整。以下为数据流向的示意图：订单系统MySQL...