您可以根据您的发布需求，选择对应待发布对象类型进行管理或发布。标签实体 待发布对象 标签实体待发布对象页面主要由搜索与筛选区、数据架构对象列表、批量操作组成。各区域及操作说明如下。区域 描述 ① 搜索与筛选区 搜索及筛选区支持...
功能概述 您可根据业务需求创建所需的离线标签，离线标签的加工方式不同创建过程不同。描述说明如下：创建方式 描述 创建指标映射标签 将离线标签输出指标直接定义成为标签。创建行为偏好标签 通过可视化方式配置偏好规则，将行为数据加工...
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域，是对某个主题分析后确定的主题边界。例如，商品域、交易域、会员域等。项目 ...
为解决如上需求，通常在生产环境中通过双链路及以上实现实时任务的主备容灾处理。相对的，链路数量的增加将会导致维护成本和难度的提高。如在变更任务时，需手动进行变更，非常容易导致变更不一致情况。在该场景下，您可在Dataphin中创建...
校验成功后，单击 确认并开始数据建设，即可开始数据建设。后续步骤 完成设置Dataphin实例的计算引擎后，您就可以准备后续数据研发过程中用于读取和写入数据的数据源、用于提供计算资源的计算源。具体操作，请参见 准备数据源和计算源。
添加逻辑表字段：在 添加逻辑表字段 对话框，您可根据您的业务需求添加需要保障的逻辑表字段。告警配置 基线告警 历史预计产出时间：系统将根据已选保障对象最近7天运行成功的记录进行推算。说明 小时任务支持不计算，数据不足时可能有误差...
为解决如上需求，通常在生产环境中通过双链路及以上实现实时任务的主备容灾处理。相对的，链路数量的增加将会导致维护成本和难度的提高。如在变更任务时，需手动进行变更，非常容易导致变更不一致情况。在该场景下，您可在Dataphin中创建...
表 根据实际场景需求，选择需要的进行集成的数据表。重要 表schema发生变更需要重新配置管道任务。文件编码 根据实际数据情况，选择编码格式。支持 UTF-8 和 GBK。加载策略 覆盖数据：即以当前来源表为准，覆盖目标表中的历史数据。覆盖...
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源，系统以此来支持相关数据的建设工作。需要选择计算引擎类型（目前仅开放MaxCompute计算类型），配置计算引擎所在的集群，例如Endpoint等信息。系统以此来支持该计算...
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
添加逻辑表字段：在 添加逻辑表字段 对话框，您可根据您的业务需求添加需要保障的逻辑表字段。告警配置 基线告警 历史预计产出时间：系统将根据已选保障对象最近7天运行成功的记录进行推算。说明 小时任务支持不计算，数据不足时可能有误差...
Dataphin支持自定义实时数据源类型，您可以基于自定义的实时数据源类型，创建实时数据源实例、实时数据源类型的元表以及访问自定义实时数据源的Flink SQL任务，以满足实际数据需求开发。本文为您介绍如何自定义实时数据源类型。使用限制 ...
您可以根据您的发布需求，选择对应待发布对象类型进行管理或发布。说明 通常情况下，数据质量依赖对象较多且复杂，建议您先发布其他类型对象后，最后在进行发布数据质量对象，否则可能导致发布失败。规则模板 待发布对象 规则模板待发布...
Dataphin支持自定义实时数据源类型，您可以基于自定义的实时数据源类型，创建实时数据源实例、实时数据源类型的元表以及访问自定义实时数据源的Flink SQL任务，以满足实际数据需求开发。本文为您介绍如何自定义实时数据源类型。使用限制 ...
您可以根据您的发布需求，选择对应待发布对象类型进行管理或发布。说明 通常情况下，数据质量依赖对象较多且复杂，建议您先发布其他类型对象后，最后在进行发布数据质量对象，否则可能导致发布失败。规则模板 待发布对象 规则模板待发布...
统计标签：按照业务需求根据实体行为或基础属性统计再计算后生成，如最近7天购买金额标签等。预测标签：根据算法模型对实体特征或行为进行预测，如预测用户常驻省份标签等。组合标签：通过设置特定规则对标签进行组合加工后生成，如消费者...
系统会自动根据您配置的资源需求，以Native K8s的模式运行作业，TM的规格和个数将会根据Slot的规格和作业并发度，由系统自动决定。更多关于配置细粒度资源的内容，请参见 配置作业部署信息。在Dataphin中自定义Blink SQL任务资源。具体操作...
系统会自动根据您配置的资源需求，以Native K8s的模式运行作业，TM的规格和个数将会根据Slot的规格和作业并发度，由系统自动决定。更多关于配置细粒度资源的内容，请参见 配置作业部署信息。在Dataphin中自定义Blink SQL任务资源。具体操作...
选择算法：根据需求场景选择算法，对敏感数据的查看进行脱敏，可选遮盖脱敏或哈希脱敏算法，对数据进行加密存储和传输，后续使用还需要原始值，选择对称加密或非对称加密算法。不同的安全算法说明请参见 安全算法说明。注册密钥：对于需要...
统计标签：按照业务需求根据实体行为或基础属性统计的计算后生成，如最近7天购买金额标签等。预测标签：根据算法模型对实体特征或行为进行预测，如预测用户常驻省份标签等。组合标签：通过设置特定规则对标签进行组合加工后生成，如消费者...
选择算法：根据需求场景选择算法，对敏感数据的查看进行脱敏，可选遮盖脱敏或哈希脱敏算法，对数据进行加密存储和传输，后续使用还需要原始值，选择对称加密或非对称加密算法。不同的安全算法说明请参见 安全算法说明。注册密钥：对于需要...
背景信息 为了迎合灵活多变的市场需求并适应时代发展，Dataphin推出半托管模式，支持通过界面一键下单的方式购买Dataphin产品和所依赖的底层资源，并自动完成部署，具备更高的安全性和可拓展性。不同版本可叠加购买的增值功能模块有所区别...
应用层：面向业务需求，定义生成可应用于不同场景的个性化、多样化的数据指标。通用层：通常用来储存通用的汇总数据。如某个主题域下某个维度的汇总数据。任务参数配置 Flink任务默认参数配置 开启实时引擎后，您可在文本框输入Flink相关...
背景信息 在创建RAM用户前，请您了解阿里云账号和RAM用户及其在Dataphin中的用户角色及其权限，并结合实际需求进行选择。账号 对应到Dataphin中的用户角色及其权限说明 阿里云账号 即阿里云用户的主账号，默认会成为Dataphin的超级管理员...
数据服务（OneService）是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。前提条件 已购买 数据服务 增值服务，开通Dataphin ...
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
根据业务需求，您图示②处选择报告日期的区间，查看该区间周期内 存储优化量 和 治理率 的数据趋势。例如下图中展示了2023-01-25至2023-01-28时间区间内 存储优化量 和 治理率 的数据趋势，鼠标悬浮的位置展示2023-01-27当天的 治理率 为0....
根据业务需求，您图示②处选择报告日期的区间，查看该区间周期内 存储优化量 和 治理率 的数据趋势。例如下图中展示了2023-01-25至2023-01-28时间区间内 存储优化量 和 治理率 的数据趋势，鼠标悬浮的位置展示2023-01-27当天的 治理率 为0....
前提说明 当部署完成后，才可以顺利进入Dataphin。...依次单击 用户->SuperOps的 用户登录名称。在SuperOps的信息页面，依次单击 认证管理->修改登录设置，在 修改登录设置 弹框中，将控制台访问设置为 开启 状态。...单击 确定，完成修改登录...
说明 公共商机管理现已更名为需求管理，除了原有的普通需求、定向需求和抢单需求外，还新增了长时间停留用户需求。获取需求 长时间停留用户需求 当潜在客户浏览商品详情页或点击联系服务商时，系统会自动弹出一个信息收集表单。客户填写的...
首次需求流程 对于业务方首次提出的需求，重点工作在于评估完成该需求的技术、数据、合规的可行性后，以细化需求的方式完成产品需求文档，并组织需求评审会议多方共同敲定需求最终实现方案。首次需求流程包括以下步骤：提出需求 外部沟通：...
背景信息 HIVE_SQL计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据的场景。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面。按照下图操作指引，进入 新建HIVE_SQL任务 对话框。编写并运行代码...
入口 由项目左侧导航栏“需求”进入“需求管理”页面，支持三种视图方式：列表、树状列表和看板（若导航栏中无“需求”，可在“设置>服务”中启用）。需求管理流程 功能使用说明 1.需求录入 录入需求是比较简单的操作，点击图中的“新建...
背景信息 SQL离线计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据的场景。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。在数据 开发 页面，按照下图操作指引进入 新建HOLOGRES_SQL任务 对话框。新建编写并运行代码...
背景信息 SQL离线计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据的场景。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。在数据 开发 页面，按照下图操作指引进入 新建HOLOGRES_SQL任务 对话框。新建编写并运行代码...
上述需求字段和需求描述模板设置完成之后，创建需求后单个需求的详情页面展示如下：设置需求的优先级 云效上提供了四个级别的优先级：紧急、高、中和低，分别对应：紧急需求（临时紧急插入的需求）、核心需求、优化需求（正常情况下规划和...
重要 设置安全模式后，项目数据有更高的安全性，但是会导致系统使用流畅程度下降，建议您根据业务需求进行设置。严格权限模式的默认配置 在Dataphin页面，单击顶部菜单栏的 管理中心。在 管理中心 页面，按照下图指引设置相应的严格模式的 ...
申请信息填写完后，勾选 我已阅读并同意《Dataphin智能数据建设与治理试用服务协议》，单击 免费试用，体验Dataphin功能。相关文档 试用开通成功后，您可按照 Dataphin新手引导 一步步体验Dataphin的研发流程，也可按照 导入模型 来导入...