说明：Linux 操作系统版本较多，本文仅适用于 CentOS 和 Ubuntu 版本。配置 Java 8 环境 mPaaS 框架只支持 JDK 8 及以上版本。下载并安装 JDK 8。配置 JAVA_HOME 环境变量，并将 JAVA_HOME 下的 bin 路径添加到 PATH 环境变量中。正确配置...
若您当前使用的是简单模式工作空间，但希望将开发与生产环境隔离，可将简单模式工作空间升级为标准模式工作空间。本文为您介绍如何升级工作空间模式。操作须知 升级工作空间模式前，您需先了解以下内容：了解简单模式与标准模式工作空间的...
逻辑开发核心概念 事件 事件是应用开发中常见的一种通知机制，可在用户执行特定操作或者系统状态发生变化时通知应用。开发者通过创建和定义一系列事件处理器，响应和处理特定事件，从而实现事件驱动的业务逻辑。表达式 表达式是一种用于...
周期任务是指在调度系统按照调度配置周期性自动调度的任务。您可以在 运维中心 周期任务 列表查看指定工作空间下的周期任务，并对任务进行运维操作，包括自动调度和手动运行周期任务、查看任务运行详情、暂停任务、下线任务等。本文为您...
组件操作文档管理 组件开发工作台提供了可预览且会自动保存的Markdown编辑器，用于编辑组件操作文档，包括概述（必须编辑）、样式配置、数据源配置和动作配置等。针对需要市场化的组件，还提供了组件案例编辑功能，便于组件市场化。一键...
您可在开发记录页签中找到目标版本，单击 操作 栏中的 还原 按钮，即可将该周期工作流信息还原至目标版本。说明 还原时，系统会基于目标版本进行恢复，并生成一条新的版本记录。附录：工作流引用 场景一：引用工作流 在工作流中，您可以...
在数据开发DataStudio界面中，您可在 操作历史 界面通过操作类型、操作人、操作时间进行筛选，查看人员在当前工作空间中的操作记录。使用说明 仅支持查看DataStudio中以下几类操作记录：任务责任人变更操作、任务调度属性变更操作、任务及...
创建Hologres数据源 开发前准备：绑定计算资源或集群 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发，您需执行如下操作：需将进行协同开发的RAM用户添加为当前工作空间的成员，并授予其开发角色。将工作空间成员添加至...
SubmitFile 提交文件至调度系统开发环境 提交文件至调度系统的开发环境，生成对应的任务。DeployFile 部署文件 发布文件至生产环境。文件夹 文件夹 CreateFolder 创建文件夹 调用CreateFolder创建文件夹。DeleteFolder 删除数据开发页面的...
Data Studio是阿里巴巴基于15年大数据经验打造的智能湖仓一体数据开发平台，兼容阿里云多项计算服务，提供智能化ETL、数据目录管理及跨引擎工作流编排的产品能力。通过个人开发环境实例支持Python开发、Notebook分析与Git集成，Data Studio...
您可在 开发记录 页签中找到目标版本，单击 操作 栏中的 还原 按钮，即可将该触发式工作流信息还原至目标版本。说明 还原时，系统会基于目标版本进行恢复，并生成一条新的版本记录。后续步骤 触发式工作流发布后，可以在运维中心进行运维：...
节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...
提交文件至调度系统的开发环境，生成对应的任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...
Data Studio是阿里巴巴基于15年大数据经验打造的智能湖仓一体数据开发平台，兼容阿里云多项计算服务，提供智能化ETL、数据目录管理及跨引擎工作流编排的产品能力。通过个人开发环境实例支持Python开发、Notebook分析与Git集成，Data Studio...
在数据开发过程中，可以创建SQL组件节点，利用这些预定义组件快速搭建数据处理流程，从而显著提升开发效率。1010 COMPONENT_SQL MaxCompute Script 可以将多条SQL语句整合成一个脚本进行整体编译和执行，这非常适合处理复杂的查询场景，如...
本文为您介绍在数据开发（Data Studio）的组件管理界面，如何创建组件，并进行组件的分享、升级、查看组件引用记录等管理操作。组件介绍 在MaxCompute实际业务实践中，存在大量类似的SQL代码过程，过程中输入表和输出表的结构一致或结构...
自定义镜像：定义：一个包含特定操作系统、运行时环境和第三方库的打包环境。关系：按需绑定。如图左侧所示，当 个人开发环境(Studio)或特定类型的 数据开发 节点（如PyODPS）需要标准环境之外的依赖（如特定版本的Python库）时，可以按需...
Data Studio个人开发环境是账号级云端开发实例，集成OSS/NAS存储、Git代码管理及Python/Notebook生态，支持本地脚本执行、在线调试与任务提交，通过灵活的自定义镜像和外部服务扩展能力，为数据处理、模型训练及协作开发提供高效、可定制的...
域名已在非阿里云备案系统中备案，开发应用绑定域名时，是否支持在阿里云备案系统中再次备案？不支持在阿里云备案系统中再次备案。移动应用发布必须绑定域名，但是域名备案比较麻烦，可以直接下载APK到本地使用吗？IoT Studio开发的移动...
注册CDH或CDP集群至DataWorks 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发，您需执行如下操作：需将进行协同开发的RAM用户添加为当前工作空间的成员，并授予其开发角色。将工作空间成员添加至 CDP或CDH 集群环境中。工作...
提交文件至调度系统的开发环境，生成对应的任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限...
DataWorks提供了全链路的数据开发治理能力，为您提供了统一的数据开发治理流程，支持您基于自己的业务需求，在关键的流程节点上进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景信息 DataWorks的工作空间分为...
本文将为您介绍数据开发DataStudio中支持的扩展点事件，以及使用扩展点触发扩展程序的操作过程。前提条件 已开启消息订阅操作，详情请参见 开启消息订阅。已完成扩展程序的开发部署操作，详情请参见 开发部署扩展程序：函数计算方式。背景...
附录：任务执行环境说明 标准模式工作空间下，一个计算资源实例存在开发环境和生产环境两套配置，不同环境可以指定不同的数据库或实例，系统将通过运行环境自动映射访问不同的计算资源，从而实现开发测试与生产调度的隔离。例如，执行离线...
后续操作 新版数据开发：配置完ClickHouse计算资源后，您可在数据开发中通过 离线同步节点 进行数据同步操作、通过 ClickHouse SQL节点 进行数据开发操作。旧版数据开发：配置完ClickHouse计算资源后，您可在数据开发中通过 数据集成 离线...
DataWorks提供了全链路的数据开发治理能力，为您提供了统一的数据开发治理流程，同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...
作为工作空间的管理者，在使用数据开发（DataStudio）时，您可以针对用户的开发行为实施有效的管控措施，进行开发流程、数据安全、审计等相关操作，本文将帮助您快速掌握DataStudio的相关功能，实现对数据开发过程的有效管控。背景信息 ...
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，切换至目标地域后，单击左侧...
注册EMR集群至DataWorks 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发，您需执行如下操作：需将进行协同开发的RAM用户添加为当前工作空间的成员，并授予其开发角色。将工作空间成员添加至EMR集群环境中。空间级模块权限...
说明 macOS与Linux操作系统下，打包前请确保代码文件具有 可读 与 可执行 权限。函数计算侧 步骤一：部署扩展程序 登录 函数计算控制台2.0，在左侧导航栏单击任务，切换至任务页面。单击 创建函数 创建函数计算服务及所需函数，进而部署...
下线任务即将该任务从开发环境删除，并将删除操作发布至生产调度系统，下线后任务将无法再调度。本文以标准模式工作空间为例，为您介绍周期调度任务的下线流程、恢复流程、任务下线后对于已生成实例及正在运行实例平台侧的处理方案。使用...
配置完成后单击 发布，系统会将模型发布至对应的 开发 或 生产 环境，并物化至所选引擎。支持在 发布 对话框查看当前发布进度及相关日志 支持重复执行发布操作将模型发布至不同的环境中。可选：发布完成后，您可单击表详情页顶部菜单栏的 ...
创建完成后，可在DataWorks的各功能模块使用该计算资源连接AnalyticDB for PostgreSQL实例，进行相应的数据同步、数据开发等操作。前提条件 已 创建AnalyticDB for PostgreSQL实例。说明 建议购买AnalyticDB for PostgreSQL实例时，地域 与...
操作步骤 进入数据开发。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据开发与运维 数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。查找目标节点并进入节点编辑页面。在 数据开发 或 手动业务流程 功能模块的...
在进行数据发布前，可通过检查项对数据开发功能相关的约束进行检查，当检查出不符合约束规范的内容时，系统会生成影响开发流程正常执行的问题事件，您可基于该事件处理暴露的问题，以保障数据开发流程可以正常执行。本文为您介绍如何查看并...
创建完成后，可在DataWorks的各功能模块使用该计算资源连接Hologres实例，进行相应的数据同步、数据开发、数据分析等操作。前提条件 已 购买Hologres实例 并 创建数据库。重要 购买Hologres实例时，请确保其与DataWorks工作空间位于同一...
从此告别 Xcode 启动卡死、操作无响应、系统内存飙高等困扰。启动方式 在macOS的 应用程序 中找到 mPaaS 独立的应用 mPaaSPlugin，直接运行即可。支持自定义快捷键 mPaaS Xcode Extension 支持用户为 mPaaS 菜单添加自定义快捷键，方便快捷...
创建完成后，可在DataWorks的各功能模块使用该计算资源连接AnalyticDB for MySQL3.0集群，进行相应的数据同步、数据开发、数据分析等操作。前提条件 已 创建AnalyticDB for MySQL3.0集群。说明 建议购买AnalyticDB for MySQL3.0集群时，...
本文以使用MaxCompute数据源，在DataWorks上运行MaxCompute作业任务为例，为您介绍开发人员如何使用数据开发（DataStudio）创建一个周期调度任务，帮助您快速了解数据开发（DataStudio）模块的基本使用。前提条件 已完成开发前的环境准备，...
根据所使用系统类型，准备运行Spark on MaxCompute任务的开发环境，详情请参见 搭建Linux开发环境、搭建Windows开发环境。开发Java/Scala代码。在MaxCompute Spark节点执行Java或Scala语言类型代码前，需先在本地或已有环境开发好Spark on ...