业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功。在数仓建设项目启动前，您需要请相关的业务人员介绍具体的业务，以便明确各个团队的分析员、运营人员的需求，沉淀出相关文档。您可以通过调查表、...
校验成功后，单击 确认并开始数据建设，即可开始数据建设。后续步骤 完成设置Dataphin实例的计算引擎后，您就可以准备后续数据研发过程中用于读取和写入数据的数据源、用于提供计算资源的计算源。具体操作，请参见 准备数据源和计算源。
Dataphin在成都地域正式开服公告-2025年8月13日 为满足不同地域用户对数据建设、数据治理等需求，Dataphin共享模式（全托管版）在2025年8月13日新增开通西南1（成都）地域，您可以在控制台上按需求开通服务。Dataphin权限管控策略变更公告-...
业务租户：统称为 开发租户，进行数据中台建设的租户，即进行数据开发和治理的核心使用租户。一个Dataphin实例可以创建多个开发租户，由元仓租户在租户设置页面创建并分配可用资源（数据处理单元数、质量规则数等）。元仓共享模型数据说明 ...
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域，是对某个主题分析后确定的主题边界。例如，商品域、交易域、会员域等。项目 ...
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域，是对某个主题分析后确定的主题边界。例如，商品域、交易域、会员域等。项目 ...
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源，系统以此来支持相关数据的建设工作。需要选择计算引擎类型（目前仅开放MaxCompute计算类型），配置计算引擎所在的集群，例如Endpoint等信息。系统以此来支持该计算...
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源，系统以此来支持相关数据的建设工作。需要选择计算引擎类型（目前仅开放MaxCompute计算类型），配置计算引擎所在的集群，例如Endpoint等信息。系统以此来支持该计算...
以数据开发建设为例，数据开发建设为菜单组；研发为一级菜单；数据集成、数据研发等为二级菜单。系统菜单默认顺序 智能工作台 超级X：X-数据工程、X-分析、X-数据标准、X-数据安全、智能应用管理、企业知识库。数据开发建设 研发：数据集成...
X-数据标准：AI驱动自动提取数据标准与码表定义、智能识别标准与字段的映射关系，助力低成本快速开启数据标准建设以提升数据规范化程度，实现精准治理省时省力。X-数据安全：结合数据资产语义与样例数据，智能推荐分类分级；依据特征名称...
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
在阿里云官网，鼠标悬停至 产品 后，再将鼠标悬停至左侧导航栏的 大数据计算 上，单击 数据开发和服务 列下的 智能数据建设与治理Dataphin。在Dataphin产品详情页，单击 管理控制台/立即开通（半托管版），进入Dataphin管理控制台页面。...
本文为您介绍如何基于阿里巴巴OneData方法论最佳实践，使用Dataphin助力企业数据中台的建设与管理，快速构建标准、规范的数据仓库。数仓构建流程 下图为使用Dataphin构建数据仓库的基本流程。基本概念 在正式学习本教程之前，您需要了解...
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：MaxCompute开通与配置 主流程 描述 操作指导 开通MaxCompute 购买...
申请信息填写完后，勾选 我已阅读并同意《Dataphin智能数据建设与治理试用服务协议》，单击 免费试用，体验Dataphin功能。相关文档 试用开通成功后，您可按照 Dataphin新手引导 一步步体验Dataphin的研发流程，也可按照 导入模型 来导入...
产品粒度下的购买人数累加在业务上就没有意义，A品牌手机的购买者100，B品牌手机的购买者50，这个150可能被放大了，因为有人可能同时买了两种产品，相加就将这个人多算了一次。配置完成后，单击 保存并提交，提交原子指标。后续步骤 如果...
5分钟快速了解（实时研发）计算任务页面概述 计算任务页面主要由计算任务目录、工具栏、编辑器、配置及管理、控制台组成。您可以在计算任务页面对计算任务进行创建、管理以及配置操作。区域 描述 ① 计算任务目录 创建的计算任务将在任务...
产品粒度下的购买人数累加在业务上就没有意义，A品牌手机的购买者100，B品牌手机的购买者50，这个150可能被放大了，因为有人可能同时买了两种产品，相加就将这个人多算了一次。配置完成后，单击 保存并提交，提交原子指标。后续步骤 如果...
X-数据标准：AI驱动自动提取数据标准与码表定义、智能识别标准与字段的映射关系，助力低成本快速开启数据标准建设以提升数据规范化程度，实现精准治理省时省力。X-数据安全：结合数据资产语义与样例数据，智能推荐分类分级；依据特征名称...
流程概述 跨平台迁移工具支持将Ververica Flink平台的实时任务迁移到Dataphin。其中根据所迁移的Dataphin项目类型不同，迁移流程不同。详情如下：Basic模式项目 迁移的Dataphin项目类型为Basic模式时，您需要在Dataphin实例中为所需迁移的...
数据开发包括编码研发和规范建模。编码研发用于构建计算任务，例如创建SQL代码任务、...⑤ 数据开发欢迎页 为您展示了在Dataphin中进行数据开发的基本使用路径以及研发相关的工具。您可以在各 路径点 或 工具块 中单击 新建图标创建对应对象。
本文将为您介绍API服务、分组、服务单元和应用等基本概念。...网络配置 应用能够成功调用AP的基础网络配置，包括域名配置和VPC白名单配置。说明 如果您是公共云用户，则需要配置VPC白名单。调用示例 应用调用AP的调用说明。
在公共云SaaS下，Dataphin支持了沙箱...安全沙箱提供以下能力：限制网络请求：禁止用户任务请求敏感服务，如Dataphin内部服务等。限制文件读取：禁止用户任务读写敏感文件，如/etc/hosts等文件等。限制系统命令：禁止如创建用户等敏感命令。
本文将为您介绍API服务、分组、服务单元和应用等基本概念。...网络配置 应用能够成功调用AP的基础网络配置，包括域名配置和VPC白名单配置。说明 如果您是公共云用户，则需要配置VPC白名单。调用示例 应用调用AP的调用说明。
VPC网络连接：VPC网络是一种虚拟化的私有网络环境，您可以在阿里云VPC私有网络环境中创建虚拟网络、子网、路由表等网络设备，并且可以通过VPN或专线等方式将VPC连接到阿里云的VPC中，构建私有网络环境。适用于对网络安全有较高要求的场景，...
行业场景 面向零售店铺的模型构建与管理 功能场景 数据引入：自定义RDBMS数据库及同步数据 DataX同步数据 使用Python读文件 规范建模：规范定义最佳实践 数据源云网络方案：网络方案概述 公网直连方案 VPN网关ECS反向代理方案 数据开发：...
VPC网络连接：VPC网络是一种虚拟化的私有网络环境，您可以在阿里云VPC私有网络环境中创建虚拟网络、子网、路由表等网络设备，并且可以通过VPN或专线等方式将VPC连接到阿里云的VPC中，构建私有网络环境。适用于对网络安全有较高要求的场景，...
内置的镜像源已添加到网络白名单，无需进行网络白名单设置。单击 连通性测试，测试填写URL地址与Dataphin的连通性。测试成功后，单击 确定，完成镜像源添加。后续步骤 完成镜像源添加后，您可以在Python三方包的Python Module页面进行...
也有可能是Dataphin集群与客户第三方审批系统地址之间的网络不通，此时需解决相关的网络问题。2、对接第三⽅审批系统接⼝相关⽂档 相关文档：自定义审批系统对接接口、审批系统对接第三方审批支持的元数据 在第三方审批系统处理异常场景中...
元数据采集工作流说明 若采集的 数据源网络环境与Dataphin集群所在网络环境不通，需要依赖注册调度集群功能，并将采集数据写入到Dataphin部署依赖的对象存储系统（如OSS）作中转，再将数据写入Dataphin系统，此时会产生额外的存储费用。...
例如，计算设置中网络连接方式为公网，则此处仅支持选择阿里云VPC网络。连接Endpoint 当 集群所属地域 选择为 其他 时，默认与 管理中心 计算设置 Endpoint 的地址相同，您 需要自行修改。当 集群所属地域 选择为 北京、上海、深圳 或 杭州...
在连通业务数据库与Dataphin间的网络时，您需要将不同网络环境下Dataphin的出网IP地址添加至业务数据库的白名单中。本文为您介绍不同网络环境下Dataphin的出网IP地址。VPC网络下Dataphin的出网IP地址 地域（推荐）通用IP地址 华东2（上海）...
若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。下表为阿里云数据库IP白名单设置的操作指引，您可根据阿里云的产品名称查看对应操作...
客户安全责任 客户应维护基础设置的安全，如物理、硬件、虚拟化、网络、操作系统的安全，当系统内核出现重大安全漏洞时客户需要及时升级系统内核修复漏洞，Datpahin发布新版本修复安全漏洞时，需及时升级Dataphin的安全版本。客户基于...
网络架构 数据库公网直连Dataphin的网络架构如下：操作步骤 步骤一：添加数据源 沙箱 白名单 登录 Dataphin管理控制台。在Dataphin管理控制台，选择工作区地域并单击 进入Dataphin。在Dataphin首页，单击顶部菜单栏 规划。按照以下操作指引...
超级管理员创建了服务项目后，可以添加成员协助开发，您可以将 管理中心 成员管理 的...后续步骤 完成服务项目成员添加并设置成员后，您就可以配置应用访问数据服务的网络，以实现应用与数据服务之间的网络互通。具体操作，请参见 配置网络。
如果网络连通性正常，但仍然无法发送消息，日志中会出现*is invalid,please check it 的提示，这表明消息被nightwatch异常拦截，建议您将Dataphin升级至V5.1.2.04或以上版本。2、版本升级后，所有离线任务监控记录为空。建议您先联系...
使用限制 当网络配置为内置网关、阿里云API网关（开启专享实例+SLS模式）时，支持查看 应用调用情况 信息。应用调用的访问趋势分析若选择5分汇总，那么系统会每5分钟进行一次统计，因此会有5分钟的延迟。查看应用调用情况 在Dataphin首页的...