背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
在您开始创建用于研发数据的项目空间前，需要先设置Dataphin实例的计算引擎。...重要 该版本在公共云已停售，请谨慎选择。计算设置入口 在Dataphin首页，单击顶部菜单栏中的 管理中心->系统设置。默认进入 计算设置 页面。
在您开始创建用于研发数据的项目空间前，需要先设置Dataphin实例的计算引擎。...重要 该版本在公共云已停售，请谨慎选择。计算设置入口 在Dataphin首页，单击顶部菜单栏中的 管理中心->系统设置。默认进入 计算设置 页面。
但数据体系复杂、数据不统一，数据分析速度和数据准确一致性难保障，战略决策与数据化运营受阻。解决方案：数据融合：通过数据引入功能，将业务系统数据集成、融合一体，统一基础数据。数据建模：通过规范建模功能，结合业务发展需求，自顶...
重要 因数据同步功能不再支持，本 数据同步功能文档已不再维护，仅用于历史用户参考。功能介绍 数据同步支持通过界面配置及编写代码的方式构建同步任务，以满足不同业务场景的数据同步：界面配置的方式构建同步任务的流程。新建管理同步...
重要 文件资源存储至Dataphin系统，因此仅支持选择 无归属引擎。选择目录 默认为 资源管理。单击 提交，完成资源的提交。在 提交备注 对话框，填写备注信息。单击 确定并提交。步骤二：创建Shell任务 在 数据处理 页签，单击左侧导航栏 ...
调度配置：调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。更多信息，请参见 离线管道调度配置。通道配置：通过离线集成管道通道配置，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道...
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据；同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源，为数据的研发提供计算资源。准备数据源 ...
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据；同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源，为数据的研发提供计算资源。准备数据源 ...
数据板块 数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。当数据的业务含义存在较大差异时，您可以创建不同的数据板块，独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至...
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
模块 子模块 描述 数仓规划 创建数据板块 数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。在使用规范建模前，您需要完成数据板块的创建。如何创建，请参见 创建数据板块。创建计算源 计算源用于绑定计算引擎项目和...
增量导出发布包适用于需要将项目阶段性的结果导出。例如需要导出特定时间段内的变更或指定业务板块/项目下对象时，可使用增量导出的方式。本文为您介绍在来源环境中如何增量导出发布包文件。前提条件 需在跨租户发布设置中配置发布凭证、...
增量导出发布包适用于需要将项目阶段性的结果导出。例如需要导出特定时间段内的变更或指定业务板块/项目下对象时，可使用增量导出的方式。本文为您介绍在来源环境中如何增量导出发布包文件。前提条件 需在跨租户发布设置中配置发布凭证、...
重要 完成product表集成后，您还需参考本文集成customer表、orders表至项目。步骤一：创建管道开发脚本 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，选择 dataphin_tutorial 项目并进入 创建管道开发脚本 对话框。在 创建...
重要 完成product表集成后，您还需参考本文集成customer表、orders表至项目。步骤一：创建管道开发脚本 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，选择 dataphin_tutorial 项目并进入 创建管道开发脚本 对话框。在 创建...
版本生效日期：2024年03月26日 本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的智能数据建设与治理（简称“Dataphin”）的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于...
在开发网站的时候，您可以使用FTP客户端将网站程序或者网页通过FTP协议上传到Web服务器。如果您使用的是FTP，在对接Dataphin进行数据开发或将Dataphin的数据写入至FTP的场景中，您需要先完成FTP数据源的创建。更多FTP信息，请参见 FTP官网...
在开发网站的时候，您可以使用FTP客户端将网站程序或者网页通过FTP协议上传到Web服务器。如果您使用的是FTP，在对接Dataphin进行数据开发或将Dataphin的数据写入至FTP的场景中，您需要先完成FTP数据源的创建。权限说明 仅支持拥有 新建数据...
协议版本生效日期：2022年11月22日 本协议是 Dataphin智能数据建设与治理（简称“Dataphin”）与您就 Dataphin 提供的免费试用服务的相关事项所订立的有效合约。1.免费试用内容说明 1.1 免费试用次数：每个 UID 仅可开通 1 次免费试用。1.2...
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
能够使用标准的SQL语法进行业务的建设，并且能够给用户提供多模型数据分析、实时数据处理、存储与计算模块解耦、异构服务器混合部署等先进技术能力。更多详情，请参见 ArgoDB官网。操作步骤 请参见 数仓规划入口，进入数仓 规划 页面。在数...
重要 因为关闭使用 select*语法的权限，可能会造成已经使用了 select*和 SELECT*语法的生产任务运行失败，因此需确保生产任务中没有 select*和 SELECT*语法。您可以在全局代码搜索入口中，输入 select*和 SELECT*查询。更多信息，请参见 ...
重要 因为关闭使用 select*语法的权限，可能会造成已经使用了 select*和 SELECT*语法的生产任务运行失败，因此需确保生产任务中没有 select*和 SELECT*语法。您可以在全局代码搜索入口中，输入 select*和 SELECT*查询。更多信息，请参见 ...
重要 非RDBMS类型数据源不支持测试连接。如果连接测试失败，您可以根据网络连通常见问题进行排查。详细内容，请参见 网络连通解决方案。测试成功后，单击 确定，完成自定义数据源的创建。后续步骤 完成数据源的创建后，您可将数据源的数据...
重要 运行参数的checkpoint配置和State配置以在Dataphin中配置的 checkpoint配置 和 State配置 配置为准。具体详情，请参见：实时模式Checkpoint配置。实时模式State配置。若您项目中所有计算任务均需配置同一的任务参数，您可在新建项目时...
重要 资源配置的CPU、内存总量不能大于Session集群资源组的CPU、内存可用量。Session集群所需的CPU用量=Task Managers数量 x TaskManager CPU Cores+JobManager CPU Cores Session集群所需的内存用量=Task Managers数量 x TaskManager ...
通过创建Presto数据源能够实现在Dataphin中使用Presto数据源进行离线研发。本文为您介绍如何创建Presto数据源。...重要 如果连接测试失败，您可以根据网络连通常见问题进行排查。详细内容，请参见 网络连通解决方案。测试成功后，单击 确定。
重要 数据源编码配置成功后不支持修改。数据源描述 对数据源的简单描述。不得超过128个字符。数据源配置 选择需要配置的数据源：如果数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果数据源不区分生产数据源和开发数据源，...
重要 目前仅支持 MySQL、Hologres、MaxCompute 数据源。数据源编码配置成功后不支持修改。数据源描述 对数据源的简单描述。不超过128字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发...
重要 目前仅支持 MySQL、Hologres、MaxCompute 数据源。数据源编码配置成功后不支持修改。数据源描述 对数据源的简单描述，128个字符以内。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发...
重要 目前仅支持 MySQL、Hologres、MaxCompute 数据源。数据源编码配置成功后不支持修改。数据源描述 对数据源的简单描述。不得超过128个字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+...
重要 资源配置的CPU、内存总量不能大于Session集群资源组的CPU、内存可用量。Session集群所需的CPU用量=Task Managers数量 x TaskManager CPU Cores+JobManager CPU Cores Session集群所需的内存用量=Task Managers数量 x TaskManager ...
重要 目前仅支持 MySQL、Hologres、MaxCompute 数据源。数据源编码配置成功后不支持修改。数据源描述 对数据源的简单描述。不得超过128个字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+...
重要 目前仅支持 MySQL、Hologres、MaxCompute 数据源。数据源编码配置成功后不支持修改。数据源描述 对数据源的简单描述。不得超过128个字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+...
重要 目前仅支持 MySQL、Hologres、MaxCompute 数据源。数据源编码配置成功后不支持修改。数据源描述 对OpenGauss数据源的描述。不超过128字符。数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和...
重要 如果您想继续使用系统推荐的资源配置，则单击页面右上方的 重置为系统初始。同时您也可以保存资源配置记录，单击 资源信息记录 后的 保存当前配置为新纪录。在 保存资源记录 对话框中，输入 资源记录名称 后，单击 确定。对已有的资源...