重要 为了保证Dataphin项目空间与Blink项目正常连接,建议填写Blink项目管理员的AccessKey。为了保证元数据正常采集,请尽量不修改Blink项目的AccessKey。单击 测试连接,测试连接的计算源。单击 提交,完成Blink计算源的创建。后续步骤 ...
管理标签待发布对象 标签待发布对象页面主要由搜索与筛选区、标签对象列表、批量操作组成。各区域说明及支持的操作如下。区域 描述 ① 搜索与筛选区 搜索及筛选区支持根据发布对象所在项目、最精提交时间、对象类型、变更类型、环境变更、...
整体概述 Dataphin的数据资产功能,基于数据资产管理的规范及方法论,帮助您对数据资产进行盘点评估:支持自动化提取分析元数据,可视化构建数据资产大图,便于管理者发现与了解数据资产价值。支持对数据生产中的计算、存储、安全、应用等...
重要 为了保证Dataphin项目空间与Blink项目正常连接,建议填写Blink项目管理员的AccessKey。为了保证元数据正常采集,请尽量不修改Blink项目的AccessKey。单击 测试连接,测试连接的计算源。单击 提交,完成Blink计算源的创建。后续步骤 ...
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效(离线T+1)且该逻辑表设置了 事件时间 字段,才可配置是否开启数据...
若您14天内未完成续费,系统将会清空所有任务并释放资源,详情请参见 到期提醒与停机策略。说明 续费时不支持修改当前配置。手动续费 使用主账号登录 阿里云官网。在阿里云官网,鼠标悬停至 产品分类 后,再将鼠标悬停至左侧导航栏的 大...
区域 描述 ①筛选与搜索区 您可根据推送记录对象名称的关键字进行搜索,也可根据推送接收人、推送时间、推送状态、告警原因、推送渠道(您可通过 配置渠道设置 管控是否开启该消息渠道)进行筛选。②列表区 为您展示推送记录的对象名称、...
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效(离线T+1)且该逻辑表设置了 事件时间 字段,才可配置是否开启数据...
为了节省调度资源,在确保不存在资源与状态冲突的前提下,您可以设置基于离线代码模板创建的模板任务是否共享运行调度资源。本文为您介绍如何开启全局共享资源开关。背景信息 为了避免不同任务运行之间产生资源或状态的冲突(如修改全局...
更多信息,请参见 变量分类与赋值。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不支持转换空间名称变量为其他类型。本地变量:最长支持258位字符或...
更多信息,请参见 变量分类与赋值。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不支持转换空间名称变量为其他类型。本地变量:最长支持258位字符或...
更多信息,请参见 变量分类与赋值。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不支持转换空间名称变量为其他类型。本地变量:最长支持258位字符或...
更多信息,请参见 变量分类与赋值。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不支持转换空间名称变量为其他类型。本地变量:最长支持258位字符或...
步骤四:执行安装命令 在目标集群导入下载的描述文件并解压后执行安装命令,完成应用的安装与授权。安装命令如下:重要 执行安装命令前,请联系Dataphin部署运维团队获取自定义资源组引用的镜像文件,并在目标集群的指定机器中导入镜像。每...
选择Dataphin系统已配置的数据源,且数据源需同时具备以下两个条件:数据源的类型与输出组件的类型一致。执行 属性配置 的账号具有该数据源的同步写权限,如果没有权限,则需要申请数据源权限,详情请参见 申请、续期和交还数据源权限。...
选择Dataphin系统已配置的数据源,且数据源需同时具备以下两个条件:数据源的类型与输出组件的类型一致。执行 属性配置 的账号具有该数据源的同步写权限,如果没有权限,则需要申请数据源权限,详情请参见 申请、续期和交还数据源权限。...
补数据操作与补数据实例关系如下:单次立即运行补数据任务:将立即生成补数据实例并调度运行。单次定时运行补数据任务:将产生待生成实例,到达定时运行时间时将生成补数据实例并调度运行。周期性定时运行补数据任务:将在定时运行时间的 ...
本文为您介绍逻辑表任务属性与调度的相关内容。逻辑表任务配置入口 在Dataphin首页,单击顶部菜单栏的 研发。按照下图操作指引,进入逻辑表任务配置页面。配置逻辑表任务 在逻辑表任务配置页面,支持配置逻辑表任务的基本信息与调度相关...
补数据操作与补数据实例关系如下:单次立即运行补数据任务:将立即生成补数据实例并调度运行。单次定时运行补数据任务:将产生待生成实例,到达定时运行时间时将生成补数据实例并调度运行。周期性定时运行补数据任务:将在定时运行时间的 ...
逻辑表提交字段类型校验 开启后,逻辑表提交时,系统将校验字段计算逻辑的返回类型与字段类型是否兼容匹配,不匹配时系统将阻塞提交,防止类型隐式转换,造成数据错误。单击 确定,完成编辑锁设置。如需恢复系统初始配置,您可一键 恢复...
在连通业务数据库与Dataphin间的网络时,您需要将不同网络环境下Dataphin的出网IP地址添加至业务数据库的白名单中。本文为您介绍不同网络环境下Dataphin的出网IP地址。VPC网络下Dataphin的出网IP地址 地域(推荐)通用IP地址 地域IP地址 ...
更多信息,请参见 变量分类与赋值。若需要批量修改参数类型,可以单击 修改参数类型 进行批量修改。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不...
管理标签待发布对象 标签待发布对象页面主要由搜索与筛选区、标签对象列表、批量操作组成。各区域说明及支持的操作如下。通用说明 如果您有明确的需要发布的对象,您可以单击 批量搜索,在 批量搜索 对话框中通过批量输入对象支持的搜索项...
更多信息,请参见 变量分类与赋值。若需要批量修改参数类型,可以单击 修改参数类型 进行批量修改。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不...
统计粒度 统计粒度的时效与汇总逻辑表的时效保持一致,不支持修改。您需要为统计粒度的主键字段选择来源表的字段进行映射。所属主题域与汇总表 主题域 选择上挂指标所属主题域。汇总表 汇总逻辑表默认为添加上挂指标的汇总表,不支持修改。...
在专题分组列表页面您可以统一管理已创建的专题分组,包括新建与编辑专题分组、快捷跳转查看专题分组下的专题详情、删除空的专题分组等,提高专题管理效率。本文为您介绍如何新建及管理专题分组。权限说明 超级管理员和运营管理员支持新建...
在专题分组列表页面您可以统一管理已创建的专题分组,包括新建与编辑专题分组、快捷跳转查看专题分组下的专题详情、删除空的专题分组等,提高专题管理效率。本文为您介绍如何新建及管理专题分组。权限说明 超级管理员和运营管理员支持新建...
行为关系 本场景中 会员下单商品 行为关系,描述的是行为主体 会员 通过 下单行为 与行为对象 商品 建立的关系。具体包含的属性如下(部分示例):参数 实体-实体ID 属性 行为主体 会员-会员ID 会员姓名、手机号。行为-下单时间(行为时间...
表示该角色与此功能权限无关。更多角色说明 自定义项目角色是Dataphin基于产品的功能,对数仓规划、数据集成、数据开发、项目资产权限、发布运维等多个模块的权限管理。管道任务目录权限列表 权限点 项目管理员 项目开发者 项目运维 项目...
说明 是否允许数据结果下载、是否开启下载审批、审批模版 配置项,仅适用于 分析平台专用计算源 和 数据库SQL,在其他项目中运行的结果依照该项目的下载与审批规则。参数 描述 分析平台专用计算源 计算源 用于分析平台的任务计算。若您为...
统计粒度 统计粒度的时效与汇总逻辑表的时效保持一致,不支持修改。您需要为统计粒度的主键字段选择来源表的字段进行映射。所属主题域与汇总表 主题域 选择上挂指标所属主题域。汇总表 汇总逻辑表默认为添加上挂指标的汇总表,不支持修改。...
本文为您介绍逻辑表任务属性与调度的相关内容。逻辑表任务配置入口 在Dataphin首页,单击顶部菜单栏的 研发。按照下图操作指引,进入逻辑表任务配置页面。配置逻辑表任务 在逻辑表任务配置页面,支持配置逻辑表任务的基本信息与调度相关...
实体选择/实体ID选择 选择应用下的实体与实体ID字段。标签选择 选择所需查询的标签。若无可选标签,请参见 离线标签概述。调用代码 请求路径 API请求工具进行调用查询时的请求路径。如下图所示:调用代码 API请求工具进行调用查询时的调用...
表示该角色与此功能权限无关。更多角色说明 自定义项目角色是Dataphin基于产品的功能,对数仓规划、数据集成、数据开发、项目资产权限、发布运维等多个模块的权限管理。更多详情,请参见 项目权限说明。管道任务目录权限列表 权限点 项目...
选择Dataphin系统已配置的数据源,且数据源需同时具备以下两个条件:数据源的类型与输出组件的类型一致。执行 属性配置 的账号具有该数据源的同步写权限,如果没有权限,则需要申请数据源权限,详情请参见 申请数据源权限。同时您也可以...
单击 编辑,您可对 超时配置 与 重跑配置 进行配置。超时配置 若任务运行超时,即单次运行总时长超过设置阈值仍未完成时,运行任务将会自动终止并置为失败。支持对以下3类任务设置运行时长阈值:任务类型 说明 一次性运行 包括即席查询、...
版本对比:使用该版本与其他版本进行对比,可查看其信息与对比版本的信息与差异,差异部分将以高亮形式展示。如下图所示:删除:删除版本状态为 编辑中 的版本。查看实例:查看版本状态为 已提交 所生成的实例。撤回:撤回版本状态为 已...
可通过资源组配置实现调度资源的统一分配与管理。本文将为您介绍如何新建自定义资源组。使用限制 最多可创建 100个 资源组(包括默认资源组)。说明 资源组数量不区分资源组状态。权限说明 拥有 管理资源设置 的自定义角色和 超级管理员、...
若您需在Dataphin中创建基于阿里云产品的数据源,创建数据源前,需确保Dataphin的IP已添加至数据库白名单(或安全组)中,使数据源与Dataphin网络互通。下表为阿里云数据库IP白名单设置的操作指引,您可根据阿里云的产品名称查看对应操作...
重要*whl包的版本与Python版本需要兼容,且可用环境为Linux(manylinux/none),CPU架构为x86_64位。推荐在可以连接公网的 Linux系统(例如,CentOS)环境机器(x86_64位)上通过 pip wheel[module_name]命令来获取所有的*.whl。自定义安装包...