通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。前提条件 已购买 资产安全 增值服务并且当前租户已开通 资产安全 模块。应用场景 基于Dataphin实现数据安全保护的一些...
现在要开始设计一个营销活动，在活动期间需要实时地统计每个产品类型的销售数量，用于快速地支持活动方案调整。以下为数据流向的示意图：订单系统MySQL的数据通过Ververica Flink任务进行实时计算，实时汇总各产品类型的销售数量并写入另...
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。前提条件 已购买 资产安全 增值服务，详情请参见 开通Dataphin。应用场景 基于Dataphin实现数据安全保护的一些典型的...
更多角色说明 自定义项目角色是Dataphin基于产品的功能，对数仓规划、数据集成、数据开发、项目资产权限、发布运维等多个模块的权限管理。更多详情，请参见 项目权限说明。管道任务目录权限列表 权限点 项目管理员 项目开发者 项目运维 ...
参数 描述 管道名称 输入 产品表集成。调度类型 调度类型 选择 周期性节点。描述 默认 不填。可以填写对离线单条管道的简单描述。选择目录 默认目录为 离线管道。单击 确定。步骤二：开发离线管道脚本 在离线单条管道开发页面，选中 MySQL...
参数 描述 管道名称 输入 产品表集成。调度类型 调度类型 选择 周期性节点。描述 默认 不填。可以填写对离线单条管道的简单描述。选择目录 默认目录为 离线管道。单击 确定。步骤二：开发离线管道脚本 在离线单条管道开发页面，选中 MySQL...
创建生成产品类型的函数 CREATE FUNCTION getSkuId()RETURNS VARCHAR(20)BEGIN DECLARE sku_id VARCHAR(20);SET sku_id=CASE FLOOR(RAND()*3)WHEN 0 THEN '绿茶' WHEN 1 THEN '红茶' WHEN 2 THEN '花茶' ELSE '数据生成错误' END;RETURN ...
创建生成产品类型的函数 CREATE FUNCTION getSkuId()RETURNS VARCHAR(20)BEGIN DECLARE sku_id VARCHAR(20);SET sku_id=CASE FLOOR(RAND()*3)WHEN 0 THEN '绿茶' WHEN 1 THEN '红茶' WHEN 2 THEN '花茶' ELSE '数据生成错误' END;RETURN ...
dataphin.lydaas.local 为购买Dataphin时所配置的产品访问域名，需要将 192.168.0.1 dataphin.lydaas.local 新增到hosts文件中。在Linux系统和Mac系统绑定Host 在系统中找到文件名为hosts的文件。Mac系统输入命令：sudo vi/private/etc/...
汇总数据层以分析的主题对象作为建模驱动，基于上层的应用和产品的指标需求构建公共粒度的汇总表。汇总数据层的一个表通常会对应一个统计粒度（维度或维度组合）及该粒度下若干派生指标。汇总表设计原则 聚集是指针对原始明细粒度的数据...
安全是需要设计和规划的，应在构建基于云或本地数据中心的同时，建设安全系统和相关控制措施，建立配套安全管理流程和机制，建立安全意识管理体系等。并将技术控制措施、管理流程、人员组织配套的融入云基础设施的构建、业务开发，应用上线...
背景信息 为了迎合灵活多变的市场需求并适应时代发展，Dataphin推出半托管模式，支持通过界面一键下单的方式购买Dataphin产品和所依赖的底层资源，并自动完成部署，具备更高的安全性和可拓展性。不同版本可叠加购买的增值功能模块有所区别...
进入推送管理页面 在Dataphin产品首页，单击顶部菜单栏 资产。按照下图指引，进入 推送管理 页面。在 推送管理 页面，查看 我的 和 全部 推送项。您可以通过在搜索框中输入推送名称的关键字进行快速筛选，或通过单击 图标，选择 全部、上线...
进入推送管理页面 在Dataphin产品首页，单击顶部菜单栏 资产。按照下图指引，进入 推送管理 页面。在 推送管理 页面，查看 我的 和 全部 推送项。您可以通过在搜索框中输入推送名称的关键字进行快速筛选，或通过单击 图标，选择 全部、上线...
更多角色说明 自定义项目角色是Dataphin基于产品的功能，对数仓规划、数据集成、数据开发、项目资产权限、发布运维等多个模块的权限管理。数据板块权限列表 超级管理员和系统管理员默认有数据板块模块所有功能的操作权限，板块架构师具备所...
产品粒度下的购买人数累加在业务上就没有意义，A品牌手机的购买者100，B品牌手机的购买者50，这个150可能被放大了，因为有人可能同时买了两种产品，相加就将这个人多算了一次。配置完成后，单击 保存并提交，提交原子指标。后续步骤 如果...
产品粒度下的购买人数累加在业务上就没有意义，A品牌手机的购买者100，B品牌手机的购买者50，这个150可能被放大了，因为有人可能同时买了两种产品，相加就将这个人多算了一次。配置完成后，单击 保存并提交，提交原子指标。后续步骤 如果...
更多角色说明 自定义项目角色是Dataphin基于产品的功能，对数仓规划、数据集成、数据开发、项目资产权限、发布运维等多个模块的权限管理。数据板块权限列表 超级管理员和系统管理员默认有数据板块模块所有功能的操作权限，板块架构师具备所...
任务中心集成Dataphin产品的全部流程性事务的管理。本文为您介绍如何查看并处理任务。权限说明 仅支持查看审批人是当前账号下的待处理任务。任务中心入口 在Dataphin页面，按照下图操作指引，进入 任务中心。处理任务 待处理任务列表为您...
任务中心集成Dataphin产品的全部流程性事务的管理。本文为您介绍如何查看并处理任务。使用限制 已开通智能研发版和基础研发版方可使用批量审批任务功能。权限说明 仅支持查看审批人是当前账号下的待处理任务。任务中心入口 在Dataphin页面...
更多DataHub信息，请参见 产品概述。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页，单击顶部菜单栏 管理中心。按照下图操作指引，进入 新建数据源 对话框。在 新建...
Cloudera Data Platform 7.x CDP是Cloudera与Hortonworks合并之后集合了Cloudera的旗舰产品CDH和Hortonworks旗舰产品HDP之精华。华为 FusionInsight 8.x Hadoop 华为推出的基于Apache开源社区软件进行功能增强的企业级大数据存储、查询和...
使用限制 当前仅支持基于最新架构部署的客户使用Session集群功能，详情请联系产品运维团队。目前一个租户仅支持创建一个Session集群。Session集群管理入口 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 Session集群...
进入治理项管理页面 在Dataphin产品首页，单击顶部菜单栏的 资产。按照下图指引，进入 治理项管理 页面。治理项管理 页面，查看 我的 和 全部 治理项。您可以通过在搜索框中输入治理项名称的关键字进行快速筛选，或通过单击 图标，选择类型...
进入治理项管理页面 在Dataphin产品首页，单击顶部菜单栏的 资产。按照下图指引，进入 治理项管理 页面。治理项管理 页面，查看 我的 和 全部 治理项。您可以通过在搜索框中输入治理项名称的关键字进行快速筛选，或通过单击 图标，选择类型...
前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 附录：数据源白名单配置。权限说明 Dataphin仅支持 超级...
为保证项目数据安全，推荐您创建RAM用户并交由其他用户使用，实现对参与Dataphin项目的人员权限进行严格把控。本文为您介绍如何创建RAM用户。背景信息 在创建RAM用户前，请您了解阿里云账号和RAM用户及其在Dataphin中的用户角色及其权限，...
如果主账号购买Dataphin实例已到期但欠费未超过14天，管理控制台会提示已欠费，14天过渡期内无法继续访问产品页面，但仍会为您保留所有数据，您可以通过续费恢复产品服务，详情请参见 续费。如果您在14天内未完成续费，则系统将释放您的...
如果主账号购买Dataphin实例已到期但欠费未超过14天，管理控制台会提示已欠费，14天过渡期内无法继续访问产品页面，但仍会为您保留所有数据，您可以通过续费恢复产品服务，详情请参见 续费。如果您在14天内未完成续费，则系统将释放您的...
更多DataHub信息，请参见 DataHub的产品概述。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与配置请参见 添加、配置及管理Dataphin成员。板块架构师配置请...
背景信息 Hologres即阿里云交互式分析Hologres，是阿里巴巴自主研发的一款交互式分析产品。如果您使用的是Hologres，在对接Dataphin进行数据开发时，您需要先完成Hologres数据源的创建。更多Hologres信息，请参见 什么是实时数仓。使用限制...
若您在使用智能数据建设与治理Dataphin的过程中有任何疑问，您可通过答疑支持联系我们，为您答疑解惑。操作步骤 在Dataphin页面，按照以下操作指引或单击蓝色小机器人选择 答疑支持，进入答疑支持页面后，输入您需解答的问题。依次单击 ...
如果您是首次使用智能数据建设与治理Dataphin，您可以参考快速入门文档，了解如何购买实例并接入服务端。Dataphin全托管 Dataphin全托管快速入门 Dataphin半托管 Dataphin半托管快速入门
若您在使用智能数据建设与治理Dataphin的过程中有任何疑问，您可通过答疑支持联系我们，为您答疑解惑。使用说明 需保证网络连通、Dataphin已升级至3.14.1及以上版本且已经对接工单系统（如需对接可联系运维部署团队）方可使用工单功能。...
价值：数据建设统一：数据标准规范定义。数据研发提效：自动化代码生成。战略决策高效：数据分析准确，数据需求响应及时。推荐搭配组合：Dataphin+MaxCompute MaxCompute详情请参见 什么是MaxCompute。输出主题式数据服务，提高数据化运营...
使用Dataphin进行离线数仓建设的基本流程如下：主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置...
使用Dataphin进行离线数仓建设的基本流程如下：主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置...
建立和维护可收敛的词根库，能够为资产统一管理提供依据，让数据流通且通畅无歧义。本文为您介绍如何创建词根。前提条件 已被指定为超级管理员或数据标准管理员用户角色，如何添加角色，请参见 添加Dataphin成员。权限说明 仅超级管理员、...
建立和维护可收敛的词根库，能够为资产统一管理提供依据，让数据流通且通畅无歧义。本文为您介绍如何创建词根。前提条件 已被指定为超级管理员或数据标准管理员用户角色，如何添加角色，请参见 添加Dataphin成员。权限说明 仅超级管理员、...
维度层简介 建立一致数据分析维表，可以降低数据计算口径和算法不统一风险。以维度作为建模驱动，基于每个维度的业务含义，通过定义维度及维度主键，添加维度属性、关联维度等定义计算逻辑和雪花模型，完成属性定义的过程并建立一致的数据...