前提条件 在使用API前，您需要准备好身份账号及访问密钥（AccessKey），才能有效通过客户端工具（SDK、CLI等）访问API。细节请参见 创建AccessKey。OpenAPI采用RPC签名风格，支持使用一个程序调用另外一个程序的函数或方法，如同调用本地...
本文 汇总了Dataphin的服务等级协议。Dataphin共享模式（全托管版）Dataphin服务等级协议（SLA）Dataphin智能数据建设与治理试用服务协议 Dataphin独享模式（半托管版）Dataphin智能数据建设与治理服务等级协议（半托管）
以数据开发建设为例，数据开发建设为菜单组；研发为一级菜单；数据集成、数据研发等为二级菜单。系统菜单默认顺序 智能工作台 超级X：X-数据工程、X-分析、X-数据标准、X-数据安全、智能应用管理、企业知识库。数据开发建设 研发：数据集成...
在使用Dataphin产品前，您需要准备好阿里云账号。本文为您介绍如何创建阿里云账号并完成账号相关准备工作。步骤一：注册阿里云账号 打开 阿里云官网。在阿里云官网右上角，单击 立即注册。在 注册账号 页面，按照操作提示完成账号注册。...
Dataphin是一站式智能数据建设与治理平台。本文系统阐述其核心概念、应用场景与使用限制，助您全面了解产品，为构建规范化数据体系奠定坚实基础。
如果您是首次使用智能数据建设与治理Dataphin，您可以参考快速入门文档，了解如何购买实例并接入服务端。Dataphin共享模式（全托管版）Dataphin共享模式（全托管）快速入门 Dataphin独享模式（半托管版）Dataphin独享模式（半托管）快速...
用户在Dataphin配置的敏感信息会采用AES256、DES、RSA等算法加密存储，敏感数据包括数据源、计算源的连接信息和用户授权的采样数据；敏感数据在Dataphin产品上脱敏显示，用户不会通过Dataphin获取到敏感数据。密钥根据不同的部署云环境进行...
Dataphin支持对数据表、数据源的权限进行查看、搜索、审计与下载，及时发现不合理的授权用户并处理，确保权限体系健康，防止权限泄露。Dataphin支持对数据表、数据源的权限变更操作进行查看、搜索、审计与下载，以此来判断授权、回收、交还...
本篇Dataphin官方指南，通过清晰的分步讲解，带您从零开始配置离线计算模板，并掌握版本控制与引用管理，从而显著提升数据开发效率。
在公共云SaaS下，Dataphin支持了沙箱执行以隔离数据访问。任务调度引擎在启动任务时，会将任务运行在内置的安全沙箱内，保障任务和服务的安全性。安全沙箱提供以下能力：限制网络请求：禁止用户任务请求敏感服务，如Dataphin内部服务等。...
设置IP白名单后，用户仅能从配置的IP地址登录，默认关闭，开启后立即生效。白名单在身份认证环节对用户生效，在不同租户登录都会进行拦截。当前仅公共云独立部署环境支持配置IP白名单，需联系Dataphin运维团队开启。
用户在Dataphin配置的敏感信息会采用AES256、DES、RSA等算法加密存储，敏感数据包括数据源、计算源的连接信息和用户授权的采样数据；敏感数据在Dataphin产品上脱敏显示，用户不会通过Dataphin获取到敏感数据。密钥根据不同的部署云环境进行...
Dataphin产品提供了操作的审计日志输出，根据不同的部署模式提供不同的审计日志导出方式。阿里云公共云独立部署模式下，容器服务集成对接了阿里云日志服务（LogService），可通过LogService自动采集和可视化过滤、检索。...
Dataphin支持对数据表、数据源的权限进行查看、搜索、审计与下载，及时发现不合理的授权用户并处理，确保权限体系健康，防止权限泄露。Dataphin支持对数据表、数据源的权限变更操作进行查看、搜索、审计与下载，以此来判断授权、回收、交还...
本文为您介绍Dataphin支持的函数操作。功能 是否支持 函数操作 是 MAX_PT 是 支持使用Dataphin项目名称进行检索数据。例如，Dataphin的项目英文名称为biz_cdm，该项目下有分区表biz_order、分区键为ds。则您可以执行以下语句查询数据。...
Dataphin产品提供了操作的审计日志输出，根据不同的部署模式提供不同的审计日志导出方式。公共云Saas：可通过操作审计（ActionTrail）获取Dataphin的审计日志。操作审计（ActionTrail）帮助您监控并记录阿里云账号的活动，包括通过阿里云...
本文为您介绍Dataphin支持的函数操作。功能 是否支持 函数操作 是 MAX_PT 是 支持使用Dataphin项目名称进行检索数据。例如，Dataphin的项目英文名称为biz_cdm，该项目下有分区表biz_order、分区键为ds。则您可以执行以下语句查询数据。...
浏览器与服务器端访问统一使用SSL加密，即使用HTTPS协议访问。Dataphin内部服务接口权限控制：内部RPC接口调用采用密钥和白名单方式进行控制，数据内容是二进制传输。公共云SaaS下的数据服务支持HTTPS协议访问。支持配置使用公有云的阿里云...
高危操作 影响 恢复方案 未经确认，直接跳过数据库备份操作。可能会造成数据丢失或数据异常。不可恢复。在未进行手动升级操作的情况下，随意强制终止升级过程。可能会导致Dataphin平台不可用。联系Dataphin运维团队进行恢复。
本文将为您介绍API服务、分组、服务单元和应用等基本概念。基本概念 说明 服务单元 对数据表进行统一的元数据配置。应用 消费数据服务（调用API）的权限主体。分组 将数据服务和应用根据特定功能或场景进行分类管理。API服务 集中为您展示...
本文为您介绍逻辑表DDL操作语句。操作 语法 说明 SHOW PARTITIONS show partitions LD_name.table_name 列举逻辑表的所有分区。LD_name：板块名称。table_name：逻辑表名称。
在数据权限管控严格的研发流程下，开发者通常会在开发项目内完成任务开发、基础属性和调度属性配置、补数据测试后，提交任务至发布中心，发布成功的任务才能在生产环境生效并调度运行，以实现开发和生产运维的数据隔离，保证资产质量。...
本文将为您介绍API服务、分组、服务单元和应用等基本概念。基本概念 说明 服务单元 对数据表进行统一的元数据配置。应用 消费数据服务（调用API）的权限主体。分组 将数据服务和应用根据特定功能或场景进行分类管理。API服务 集中为您展示...
本文为您介绍逻辑表DDL操作语句。操作 语法 说明 SHOW PARTITIONS show partitions LD_name.table_name 列举逻辑表的所有分区。LD_name：板块名称。table_name：逻辑表名称。
离线数据集是通过指标映射创建离线标签的前提条件。可以选择表映射、SQL加工以及表单加工的方式对离线数据集进行定义。并通过预定义加工的方式，以便后续的离线标签创建。功能概述 您可根据业务需求创建所需的离线数据集。...
映射关系是指资产对象和数据标准之间的映射关系，仅针对已确认映射关系的资产对象进行落标监控评估。映射关系说明 映射关系分为 有效映射 和 无效映射。有效映射关系是基于配置的落标映射规则、手动添加或在研发过程中指定关联生成的数据...
本文为您介绍标准清单的操作权限列表。符号说明 Y 表示该角色有此功能权限；N 表示该角色无此功能权限。标准清单权限列表 权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 普通成员 查看标准详情 Y Y Y Y Y Y
本文为您介绍资产目录的操作权限列表。符号说明 Y 表示该角色有此功能权限；N 表示该角色无此功能权限。资产目录权限列表 权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 普通成员 搜索资产 Y Y Y Y Y Y 查看资产详情 Y...
本文为您介绍逻辑表DML操作语句。操作 语法 说明 INSERT OVERWRITE insert overwrite table table_name[partition(pt_spec)](col_name,col_name.)select_statement from from_statement;插入或覆写数据。仅维度逻辑表、汇总逻辑表、事实...
查看所选业务日期中，所选租户的任务实例统计。查看状态分布和近7日实例数 状态分布：选择业务日期（默认为T-1）和租户来查询对应租户在所选业务日期中的任务实例状态分布。状态分布将通过饼图展示，若不选择业务日期和租户，则统计最近...
映射关系是指资产对象和数据标准之间的映射关系，仅针对已确认映射关系的资产对象进行落标监控评估。映射关系说明 映射关系分为 有效映射 和 无效映射。有效映射关系是基于配置的落标映射规则、手动添加或在研发过程中指定关联生成的数据...
相关参考 关于Dataphin的基本概念，请参见 核心概念。
在您完成 系统初始化 后，您可为Dataphin添加对应计算源。已添加的计算源可用于绑定Dataphin项目，为Dataphin项目提供处理任务的计算源。功能概述 您可根据业务需求添加相应计算源，各计算源描述及创建说明如下：计算设置 计算源 ...
本文为您介绍Dataphin计算引擎为Hadoop时，系统支持的多维分析语句。语句 描述 是否支持 Grouping_ID 标示结果属于哪一个分组集合。是
Dataphin计算引擎AnalyticDB for PostgreSQL中预内置了诸多系统函数，可满足大部分业务场景的数据处理需求。本文为您介绍AnalyticDB for PostgreSQL提供的系统函数类型及函数使用相关说明。函数类型 AnalyticDB for PostgreSQL预置的函数...
在您完成离线数据集的创建或行为关系的定义后，您可为所创建的离线数据集或行为关系创建对应的离线标签，以便后续的资产应用创建。如标签服务、画像服务的创建。功能概述 您可根据业务需求创建所需的离线标签，离线标签的加工方式不同创建...
校验记录用于记录质量规则校验Dataphin数据表、全域数据表、指标、数据源和实时元表的结果并支持查看每一条质量规则的校验结果。权限说明 超级管理员、质量管理员可查看所有校验记录。项目成员可查看自己所加入的项目的校验记录。...
本文 汇总了Dataphin的常见问题。Dataphin常见问题 错误码 数据开发 数据源测试连接报VPC_GRANT_ACCESS_API_ERROR错误的解决方案
本文为您介绍标准清单的操作权限列表。符号说明 Y 表示该角色有此功能权限；N 表示该角色无此功能权限。标准清单权限列表 权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 普通成员 查看标准详情 Y Y Y Y Y Y
本文为您介绍资产全景的操作权限列表。符号说明 Y 表示该角色有此功能权限；N 表示该角色无此功能权限。使用说明 非 超级管理员角色需要获得超级管理员授权后才能查看。资产全景权限列表 权限点 超级管理员 系统管理员 数据源管理员 安全...