绑定后,在不同工作空间模式下,DataWorks模块对应操作的数据源如下表所示:DataWorks模块 标准模式 简单模式 数据开发 操作开发环境数据源(实例,项目、数据库)操作生产环境数据源(实例,项目、数据库)运维中心 开发环境运维中心:...
(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见 为工作空间添加空间成员。说明 如果您使用的是主账号,则可忽略该添加操作。...
DataWorks将不同类型引擎任务封装为不同节点,通过创建节点来生成数据开发任务。同时,数据开发(DataStudio)支持使用资源、函数以及不同的逻辑处理节点开发复杂任务。本文将为您介绍数据开发任务的通用开发流程。前提条件 已绑定所需数据...
DataWorks的SSH节点可通过指定SSH数据源的方式,在DataWorks远程访问该数据源连接的主机,并触发脚本在远程主机执行。本文为您带来SSH节点的主要开发流程。节点介绍 SSH节点是通过DataWorks远程访问SSH数据源连接的主机,例如您可通过此...
本产品(大数据开发治理平台 DataWorks/2024-05-18)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能...
统计信息:当前项目关联的产品和设备数量,已开发的Web应用、移动应用和业务逻辑数量。项目开发:应用和业务逻辑 在 Web应用、移动应用 或 业务逻辑 页签,单击 新建,可添加开发对应项目。具体内容,请参见:Web可视化开发。移动可视化...
说明 上述说明在DataWorks上的具体体现为,管理员角色和开发角色的成员,有DataWorks上大部分功能权限,有DataWorks开发环境(MaxCompute引擎开发项目)所有权限,但默认没有生产环境(MaxCompute生产项目)的操作权限。如果子账号需要在...
注册CDH或CDP集群至DataWorks 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发,您需执行如下操作:需将进行协同开发的RAM用户添加为当前工作空间的成员,并授予其开发角色。将工作空间成员添加至 CDP或CDH 集群环境中。工作...
或 新建工作流.,根据实际需要选择开发的节点类型或工作流。开发调度任务。不同类型的任务配置不同,配置详情请参照文档 节点 或 工作流。管 理目录标签 项目目录支持您使用标记对目录进行分类,以区分不同类型的目录,并根据标记快速过滤...
(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见 为工作空间添加空间成员。已购买Serverless资源组并完成资源组配置,包括绑定...
分支节点是DataStudio中提供的逻辑控制系列节点中的一类。分支节点可以定义分支逻辑和不同逻辑条件下的下游分支走向。节点介绍 分支节点可根据Python比较运算符对获取到的上游节点输出参数进行判断,生成多条分支节点,以实现上游节点的...
本文为您介绍新版数据开发的基本开发流程。前提条件 已创建DataWorks工作空间并开通新版数据开发。本指南适用于新版数据开发,如需使用,请确保您的工作空间已开通新版数据开发。开通方式如下:创建工作空间 时,选择 使用新版数据开发...
DataWorks的 业务流程 开发结构满足根据业务视角来组织数据开发任务的需求,也提供了 周期业务流程 和 手动业务流程 两种,以满足需要周期性调度和无需周期性调度手动触发运行的场景。本文为您介绍如何创建、设计、提交和查看业务流程,...
在工作流看板,单击上面工具栏 新建节点,根据需要开发的任务类型选择对应的 节点类型,将其拖拽至画布中。设置节点名称并保存。克隆方式创建节点 通过克隆功能,快速克隆现有节点以创建新的节点。克隆内容包括节点的 调度配置 信息(调度...
此外,为满足不同业务场景的需求,智能搭建支持导入用户自定义的前端组件,以便在此基础上进行二次开发,以满足更加多样的业务场景。该功能适用于有自己的前端开发资源的客户。下面介绍如何在智能搭建平台中添加自定义的前端组件。前提条件...
本文为您介绍使用ADB Spark SQL节点进行任务开发的主要流程。背景信息 AnalyticDB for MySQL Serverless Spark 是AnalyticDB for MySQL团队基于Apache Spark打造的服务化的大数据分析与计算服务,AnalyticDB MySQL版Spark支持在AnalyticDB...
您可通过MaxCompute的SQL语句及DataWorks提供的可视化方式,创建与管理MaxCompute表。相比SQL方式,可视化方式操作更加便捷。本文为您介绍如何使用可视化方式创建及管理MaxCompute表。注意事项 表操作原则 创建与操作MaxCompute表,遵循...
进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限。添加成员并授权,详情请参见 为工作空间添加空间成员。对应空间已绑定Serverless资源组。详情请参见:使用Serverless资源组。...
(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见 为工作空间添加空间成员。如果您使用的是主账号,则可忽略该添加操作。已在...
(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见 为工作空间添加空间成员。如果您使用的是主账号,则可忽略该添加操作。已在...
创建MaxCompute数据源 开发前准备:绑定计算资源或集群 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发,需将进行协同开发的RAM用户添加为当前工作空间的成员,并授予其开发角色。工作空间添加成员 权限控制 DataWorks为您...
DataWorks扩展程序是一种插件,结合OpenAPI及OpenEvent,您可以通过扩展程序对DataWorks中的用户操作行为进行自定义逻辑处理并实现拦截阻断等行为管控。例如,您可以开发一个任务变更管控扩展程序,实现自定义任务发布流程管控。...
前提条件(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见 为工作空间添加空间成员。说明 如果您使用的是主账号,则忽略该添加...
空间级别-开发角色:可以做任务开发的工作,如DataStudio任务开发、数据服务开发、DQC配置等。空间级别-运维角色:负责配置资源与任务部署,如配置数据源、发布任务。空间级别-部署角色:仅负责发布任务。空间级别-模型设计师角色:仅能...
注册EMR集群至DataWorks 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发,您需执行如下操作:需将进行协同开发的RAM用户添加为当前工作空间的成员,并授予其开发角色。将工作空间成员添加至EMR集群环境中。空间级模块权限...
DataWorks提供了全链路的数据开发治理能力,为您提供了统一的数据开发治理流程,同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...
(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见 为工作空间添加空间成员。如果您使用的是主账号,则可忽略该添加操作。使用...
Kylin 是 mPaaS H5 容器的无线前端解决方案,具有高效的运行时、一致的开发体验、丰富的研发支撑、完善的 UI 组件等诸多优点,解决移动 Hybrid 开发中遇到的前端打包、浏览器兼容性、Mock 接口等问题。Kylin 仅提供基于 Vue 2.0 的视图层...
在 宿主应用 页面可以查询应用、新增应用、一键同步 mPaaS 后台应用查看应用基本信息、对应用进行开发配置、查看应用开发配置详情、删除应用。查询应用 在 宿主应用 页面的输入框中输入应用名称,单击(),将符合搜索条件的应用展示在应用...
启用治理检查项 当启用治理插件的情况下,默认会启用所有当前已经接入数据开发的治理项。您可以通过以下方式开启或关闭某具体治理项。单击Data Studio页面左侧导航栏中的 图标,进入治理检查项目录。您可在 规则库 中根据 数据治理项列表 ...
产品名词解释 名词 描述 IoT Studio 物联网应用开发(IoT Studio)是阿里云物联网平台的一部分,提供了Web可视化开发、移动可视化开发、业务逻辑开发与物联网数据分析等一系列便捷的物联网开发工具。Web可视化开发 IoT Studio提供的开发...
在 应用开发 页面的 开发工具 模块,单击 组件开发。在 组件开发 公开组件包 页面,定位到目标组件包,单击操作栏的 编辑。单击 编辑组件包 页面右上角的 添加组件。在右侧的 添加组件 弹框中,勾选待添加的个人组件,单击 添加。说明 仅...
本文介绍如何发布组件包到市场,实现个人开发组件的共享和使用。前提条件 已完成组件包的编辑。详细内容请参见 编辑组件包。发布 登录 物联网应用开发控制台,在页面左上角选择对应实例后,在左侧导航栏单击 应用开发。在 应用开发 页面的 ...
数据开发模式全面升级,包括工作空间 解决方案 业务流程三级结构,抛弃陈旧的目录组织方式。背景信息 DataWorks对数据开发模式进行全面升级,按照业务种类组织相关的不同类型的节点,让您能够更好地以业务为单元、连接多个业务流程进行开发...
(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见 为工作空间添加空间成员。已购买Serverless资源组并完成资源组配置,包括绑定...
本文将为您介绍数据开发DataStudio中支持的扩展点事件,以及使用扩展点触发扩展程序的操作过程。前提条件 已开启消息订阅操作,详情请参见 开启消息订阅。已完成扩展程序的开发部署操作,详情请参见 开发部署扩展程序:函数计算方式。背景...
开启新版数据开发的工作空间 不支持 升级为标准模式工作空间,未开启则支持升级。可选择创建简单模式或者标准模式工作空间。空间管理员 根据实际开通DataWorks的人员身份分为以下场景:主账号开通DataWorks,默认空间管理员为主账号。子...
Spark是一个通用的大数据分析引擎,以其高性能、易用性和广泛的适用性而著称。它支持复杂的内存计算,非常适合构建大规模且低延迟的数据分析应用。DataWorks平台提供Serverless Spark Batch节点,使您能够在 DataWorks上基于 EMR ...
物联网应用开发(IoT Studio)支持将个人开发组件添加到组件包,发布到公开市场供其他开发者使用。本文介绍如何将个人组件以组件包的形式,发布到公开的组件市场。新建组件包 登录 物联网应用开发控制台,在页面左上角选择对应实例后,在...
当您的团队需要在DataWorks中进行协同开发时,面临着项目隔离、权限分配和计算资源管理的挑战。工作空间正是解决这些问题的核心单元,它通过提供一个独立的环境,让您能够清晰地组织开发任务、分配成员角色并绑定所需的计算引擎,从而确保...