本文为您介绍如何查看函数的资产详情。函数详情 请参见 搜索数据，进入目标函数的详情页面。编号 描述 ① 概要信息 为您展示函数名称、描述。收藏：单击即可收藏。...③ 资产信息 为您展示函数的 基础信息、使用信息 和 变更信息。
本教程中使用阿里云大数据产品Dataphin配合MaxCompute，完成整体的数据建模和研发流程。完整的技术架构如下图所示。其中，Dataphin的数据集成及同步负责完成源业务系统数据引入。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
本文为您介绍如何查看标准的资产详情。标准详情 请参见 搜索数据，进入标准详情页面。编号 描述 ① 概要信息 为您展示标准的英文名称以及描述信息。收藏：单击即可收藏。...③ 资产信息 为您展示标准的 基础信息、使用信息 和 变更信息。
本文为您介绍如何查看标准的资产详情。标准详情 请参见 搜索数据，进入标准详情页面。编号 描述 ① 概要信息 为您展示标准的英文名称以及描述信息。收藏：单击即可收藏。...③ 资产信息 为您展示标准的 基础信息、使用信息 和 变更信息。
如果您已购买了数据服务模块，即可使用API权限。本文为您介绍如何申请和交还API权限。前提条件 已购买数据服务模块，详情请参见 开通Dataphin。申请API权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图指引，进入 API权限申请 ...
针对各种业务需求，Dataphin提供相关实践教程，您可根据不同场景查看最佳实践教程进行参考。Dataphin 面向零售店铺的模型构建与管理 自定义RDBMS数据库及同步数据 DataX同步数据 使用Python读文件 Java UDF最佳实践 规范定义最佳实践
表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表，Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作，请参见 内置Extractor访问OSS。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 ...
前提条件 当您使用Dataphin自建账号体系时，可配置登录安全设置。权限说明 超级管理员和系统管理员支持修改登录安全设置。操作步骤 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图指引，进入 登录安全设置 页面。参数 描述 会话超时...
Dataphin治理功能助您完成数据使用消耗的分析，全局把控计算与存储成本，提升使用效率。前提条件 已购买资源治理增值服务，详情请参见 开通Dataphin。使用说明 资源治理的统计不包括计算引擎为Hologres的项目，也不支持对这些项目的治理。...
说明 select_statement 仅支持查询使用物理表或者物理视图，不支持逻辑表和逻辑视图。查询参数化视图 支持场景包括即席查询、SQL任务、逻辑对象计算逻辑、集成来源表和目标表中过滤参数化视图。不支持查询带有表值参数的参数化视图（无法...
重要 因为关闭使用 select*语法的权限，可能会造成已经使用了 select*和 SELECT*语法的生产任务运行失败，因此需确保生产任务中没有 select*和 SELECT*语法。您可以在全局代码搜索入口中，输入 select*和 SELECT*查询。更多信息，请参见 ...
价值：数据建设统一：数据标准规范定义。数据研发提效：自动化代码生成。战略决策高效：数据分析准确，数据需求响应及时。推荐搭配组合：Dataphin+MaxCompute MaxCompute详情请参见 什么是MaxCompute。输出主题式数据服务，提高数据化运营...
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
参数 说明 步骤名称 根据当前组件的使用场景，填写组件名称。速度上限 选择数据传输的速度上限：如果您选择 基于数据量限制，则需选择 1M/s、2M/s、5M/s、10M/s。如果您选择 基于数据条数限制，则需填写限制的条数，例如30条/s。单击确定，...
如果您需要使用他人的服务单元生成API，则需要申请服务单元的使用权限。前提条件 已购买数据服务模块，详情请参见 开通Dataphin。申请服务单元权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 服务单元权限申请 ...
表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表，Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作，请参见 创建OSS外部表。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 不支持...
重要 因为关闭使用 select*语法的权限，可能会造成已经使用了 select*和 SELECT*语法的生产任务运行失败，因此需确保生产任务中没有 select*和 SELECT*语法。您可以在全局代码搜索入口中，输入 select*和 SELECT*查询。更多信息，请参见 ...
在使用Dataphin前，超级管理员需要通过管理中心添加Dataphin成员及设置Dataphin实例的计算引擎。同时您也可以配置计算和存储资源的规则，优化逻辑表任务、SQL查询任务及设置查询引擎，以提高数据构建效率。使用限制 仅支持超级管理员在管理...
本文为您介绍如何查看数据源的资产详情。数据源详情 请参见 搜索数据，进入目标数据源的详情页面。编号 描述 ① 概要信息 为您展示数据源的名称、描述。...③ 资产信息 为您展示数据源的 基础信息、使用信息 和 变更信息。
使用限制 仅开发模式为Dev-Prod的项目支持发布功能。功能介绍 发布中心由 待发布对象 和 发布记录 组成：在 待发布对象 页面，记录了 集成同步、规范建模 和 数据处理 模块提交的数据对象。您可以单击数据对象操作列下的 图标，发布数据...
Spark SQL配置使用Livy Spark SQL配置使用Livy时，支持以下任务参数。参数名称 描述 livy.session.driverMemory 驱动程序进程使用的内存量。livy.session.driverCores 用于驱动程序进程的核心数。livy.session.executorMemory 每个执行程序...
使用限制 仅开发模式为Dev-Prod的项目支持发布功能。功能介绍 发布中心由 待发布对象 和 发布记录 组成：在 待发布对象 页面，记录了 集成同步、规范建模 和 数据处理 模块提交的数据对象。您可以单击数据对象操作列下的 图标，发布数据...
本文为您介绍如何查看数据源的资产详情。数据源详情 请参见 搜索数据，进入目标数据源的详情页面。编号 描述 ① 概要信息 为您展示数据源的名称、描述。...③ 资产信息 为您展示数据源的 基础信息、使用信息 和 变更信息。
使用限制 若在消息渠道中未开启邮件、钉钉群消息等相应的联系方式，则消息无法发送。消息渠道配置请参见 配置渠道设置。通知设置说明 流程控制：用于审批流程相关（如数据标准审批、发布审批、数据下载审批等）的通知。权限管理：用于权限...
参数 描述 审批用户 选择该租户下正常使用的用户。最长授权 支持 30天、90天、180天、长期 或自定义时间。单击 确定，完成归属我的功能权限的配置。转交功能权限 按照下图指引，进入 功能权限配置 对话框。在 功能权限归属转交 对话框，...
参数 描述 审批用户 选择该租户下正常使用的用户。最长授权 支持 30天、90天、180天、长期 或自定义时间。单击 确定，完成归属我的功能权限的配置。转交功能权限 按照下图指引，进入 功能权限配置 对话框。在 功能权限归属转交 对话框，...
Dataphin治理功能助您完成数据使用消耗的分析，全局把控计算与存储成本，提升使用效率。前提条件 已购买资源治理增值服务并且当前租户已开通 资源治理 模块。使用说明 资源治理的统计不包括计算引擎为Hologres的项目，也不支持对这些项目的...
如果需要使用服务单元创建API，则您选择 使用权限。权限账号 系统默认选择个人账号。有效期 账号的有效期支持选择 30天、90天、180天、长期 或 自定义。申请原因 填写申请应用的原因，不超过128字符。单击 提交。您可以在任务中心查看已...
Dataphin标签平台设置为使用标签模块功能的前提条件，包含时间字段设置及提供标签在线服务的服务数据源设置，其中时间字段设置包含标签表时间分区字段设置以及实时事件时间戳字段设置。标签表时间分区字段设置包含一、二、三级分区字段设置...
参数 说明 步骤名称 根据当前组件的使用场景，填写组件名称。速度上限 选择数据传输的速度上限：如果您选择 基于数据量限制，则需选择 1M/s、2M/s、5M/s、10M/s。如果您选择 基于数据条数限制，则需填写限制的条数，例如30条/s。单击 确认...
State是Flink实时任务维持和管理数据状态的机制。通过合理的配置Flink的State数据过期时间可以提高资源利用率、内存管理、数据一致性和...若未填写，将默认使用作业引擎版本的默认值为State数据过期时间。单击 确定，完成实时模式State配置。
使用说明 消息发送渠道可在全局（实例级）进行设置，也可以在每个租户级别进行设置，您可以根据您所在的组织的要求进行不同的配置。消息渠道关闭后，相关消息将无法发送到对应的渠道，请按需选择开启的消息渠道。权限说明 元仓租户超级管理...
资源统计 当前售卖资源的使用情况及购买的售卖规格说明，便于您可以根据业务情况及时做出业务决策，详情请参见 查看资源使用情况。到期时间 可查看软件的到期时间。升级 如果您购买的Dataphin实例规格无法满足您当前的业务需求，可以通过...
State是Flink实时任务维持和管理数据状态的机制。通过合理的配置Flink的State数据过期时间可以提高资源利用率、内存管理、数据一致性和...若未填写，将默认使用作业引擎版本的默认值为State数据过期时间。单击 确定，完成实时模式State配置。
资源统计 当前售卖资源的使用情况及购买的售卖规格说明，便于您可以根据业务情况及时做出业务决策，详情请参见 查看资源使用情况。到期时间 可查看软件的到期时间。升级 如果您购买的Dataphin实例规格无法满足您当前的业务需求，可以通过...
使用限制 支持超级管理员和系统管理员编辑消息模板。查看消息模板 在Dataphin界面，单击页面右上角的 图标进入 告警中心 页面。在 告警中心 页面，单击左侧导航栏中 消息模板。在 消息模板 页面，单击 离线计算、实时计算、基线监控、数据...
请您及时备份数据或续费，避免影响正常使用。停机策略 Dataphin实例到期后，会自动停机。您将无法正常登录Dataphin实例，无法创建调度任务实例。如果您在实例到期后的336小时（14天）内完成续费，可以继续使用Dataphin实例且数据不会丢失。...
参数 描述 步骤名称 根据当前组件的使用场景，填写组件名称。输入字段 根据上游的输入，为您展示输入字段。输出字段 为您展示输出字段，您可以手动添加输出字段：单击 新建字段。根据页面提示，配置参数 名称、表达式 和选择 数据类型。...
为了安全地访问Dataphin，您需要在使用Dataphin前进行登录认证，即提供其身份证明。Dataphin登录认证方式支持SAML、OAuth2.0协议的SSO（单点登录）及阿里云访问控制。您可以通过Dataphin支持的协议将企业已有的认证系统集成至Dataphin，以...
角色管理 对于添加到Dataphin的用户，管理员可以使用全局角色和项目角色管理成员的权限。全局角色 全局角色用于管理Dataphin全局功能的操作权限或者某个子模块的最高权限，例如计算设置、添加成员、管理安全制度等。当前支持的全局角色有：...