数据集成 数据开发 简单开发应用教程 本教程将指引您完成一个完整的数据开发和周期调度运维操作，适用于各种数据开发场景。MaxCompute 数据集成 数据开发 运维中心 数据分析与可视化 相关教程 说明 教程使用的计算引擎 涉及模块 使用公开...
代码空间（CodeSpace）提供预置常用开发工具链的云端代码执行与开发环境，用于执行代码编译、运行脚本、API测试、CI/CD等开发相关任务。适用场景 云端开发环境：作为即开即用的远程开发环境，无需配置本地环境。自动化构建与测试：在CI/CD...
旧版数据开发使用镜像 进入数据开发：登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据开发与运维 数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。配置资源组：在数据开发功能中找到待测试三方包的 任务节点，...
当发布流程执行到 从开发环境下线 时，数据开发目录树会保留节点，但节点ID会被移除，并且生成 从开发下线 的版本记录。当发布流程执行到 从生产环境下线 时，节点删除操作将发布至生产环境，同步下线生产环境中的任务，您可在生产环境下线...
DataWorks的平台安全诊断，为您提供了当前DataWorks工作空间与数据源在数据传输、存储、运算等过程中，与身份认证、访问权限控制、开发模式等功能相关的安全能力，以及诊断相关安全问题的最佳实践，帮助您及时发现平台的安全隐患，在进行...
DataWorks支持StarRocks数据源，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、开发、分析、数据服务等功能。本文为您介绍EMR Serverless StarRocks在DataWorks上的操作流程。背景信息 了解EMR ...
本文介绍了在医疗行业中使用了移动开发平台服务的客户案例。南京儿医在线 mPaaS x 南京儿医在线：媲美原生，小程序容器提升医疗应用研发效能。项目背景「南京儿医在线」是南京儿童医院开发的官方就医 App。在 App 发展初期，采用了「原生 ...
本教程以用户画像为例，在华东2（上海）地域演示如何使用DataWorks完成数据同步、数据加工和质量监控的全流程操作。为了确保您能够顺利完成本教程，您需要准备教程所需的MaxCompute项目、DataWorks工作空间，以及数据来源、计算、存储的...
本教程以构建用户画像为例，基于DataWorks预先提供的原始数据集，指导您在DataWorks 华东2（上海）地域完成数据同步、加工及质量监控全流程操作。请提前准备MaxCompute项目、DataWorks工作空间，并配置好数据源、计算及存储资源。业务背景 ...
本示例以 数据开发/数据地图展示脱敏 和 数据分析展示脱敏 为主。数据开发/数据地图展示脱敏 下的二级场景名：开发展示。数据分析展示脱敏 下的二级场景名：SQL分析。新增脱敏规则 完成脱敏场景创建后，即可单击右上角的脱敏规则来新建脱敏...
本教程以用户画像分析为例，演示如何使用DataWorks完成数据同步、数据加工和质量监控的全流程操作。为确保您能够顺利完成本教程，请准备好所需的EMR集群、DataWorks工作空间，并完成相关的环境配置。业务背景 为了更好地制定企业经营策略，...
DataWorks支持在创建个人开发环境的自定义镜像时，同步生成MaxCompute的自定义镜像，方便您在DataWorks节点（如PyODPS 3节点、Notebook节点）中使用MaxCompute自定义镜像。本文将为您介绍在DataWorks构建并使用MaxCompute自定义镜像。背景...
本教程以用户画像为例，在华东2（上海）地域演示如何使用DataWorks完成数据同步、数据加工和质量监控的全流程操作。为了确保您能够顺利完成本教程，您需要准备教程所需的EMR Serverless StarRocks集群、DataWorks工作空间，并进行相关的...
本教程以用户画像为例，在华东2（上海）地域演示如何使用DataWorks完成数据同步、数据加工和质量监控的全流程操作。为了确保您能够顺利完成本教程，您需要准备教程所需的EMR Serverless Spark空间、DataWorks工作空间，并进行相关的环境...
创建Hologres数据源 开发前准备：绑定计算资源或集群 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发，您需执行如下操作：需将进行协同开发的RAM用户添加为当前工作空间的成员，并授予其开发角色。将工作空间成员添加至...
节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...
新增和使用Serverless资源组 二、开发环境准备 您需先在DataWorks工作空间注册 CDP或CDH 集群，才可在数据开发（DataStudio）进行数据开发工作，并以工作空间为单位管理空间成员，以便进行协同开发。类别 描述 相关文档 数据同步环境准备 ...
多引擎开发：DataWorks Notebook拥有SQL Cell功能，支持多种大数据引擎的SQL开发与分析。交互式分析：交互式SQL查询：通过Python编写Widgets组件，通过在组件中直观选择或设置参数的取值，后续可以进一步在SQL中引用相同参数及取值，从而...
新增和使用Serverless资源组 使用旧版资源组 二、开发环境准备 您需先在DataWorks工作空间注册EMR集群，才可在数据开发（DataStudio）进行数据开发工作，并以工作空间为单位管理空间成员以便进行协同开发。类别 描述 相关文档 数据同步环境...
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
2024-12-19 所有地域 使用新版数据开发（Data Studio）的用户 ADB Spark SQL节点 数据开发新增节点 数据开发新增ADB Spark节点，该节点可进行AnalyticDB Spark任务的开发和周期性调度，以及与其他作业的集成操作。2024-12-19 所有地域 使用...
开发或发布环境对比：在 开发记录 页签中，勾选两个版本，单击上方的 选择对比 按钮，即可对比不同版本的手动任务代码内容和调度配置信息。开发与发布或构建环境对比：在 开发记录 页签中，定位到手动任务的某个版本。单击 操作 栏中的 ...
Data Studio的资源管理功能支持创建并管理MaxCompute、EMR、CDH、Flink的资源与函数，在数据开发或SQL查询中使用。功能介绍 Data Studio的资源管理功能支持对资源和函数进行统一管理，不仅支持将存储在OSS对象存储或本地存储中的资源上传并...
本文描述大数据开发治理平台 DataWorks支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云...
您可以打开某个数据开发节点，进行具体的数据清洗工作，例如MaxCompute SQL节点，如果代码开发过程中需要用到资源或函数，DataWorks也支持您通过可视化的方式来创建资源节点和函数节点。数据开发的更多细节，请参见 节点开发，创建资源和...
DataWorks为您提供多种MaxCompute节点，便于您根据需要开发不同类型的MaxCompute任务，并为您提供丰富的节点调度配置，帮助您灵活设置MaxCompute任务的调度，本文为您介绍创建并管理MaxCompute节点的通用操作指导。适用范围 进行MaxCompute...
在 应用开发 页面的 开发工具 模块，单击 组件开发。在 组件开发 公开组件包 页面，定位到目标组件包，单击操作栏的 编辑。单击 编辑组件包 页面右上角的 添加组件。在右侧的 添加组件 弹框中，勾选待添加的个人组件，单击 添加。说明 仅...
在数据开发DataStudio界面中，您可在 操作历史 界面通过操作类型、操作人、操作时间进行筛选，查看人员在当前工作空间中的操作记录。使用说明 仅支持查看DataStudio中以下几类操作记录：任务责任人变更操作、任务调度属性变更操作、任务及...
背景信息 工作流（Workflow）是一种数据处理流程自动化管理工具，它通过可视化拖拽方式整合多种类型的子任务节点，便捷地建立任务依赖关系，加速数据处理流程的搭建，有效提升任务开发效率。周期工作流支持设置的调度依赖关系 周期工作流...
在数据开发过程中，可以创建SQL组件节点，利用这些预定义组件快速搭建数据处理流程，从而显著提升开发效率。1010 COMPONENT_SQL MaxCompute Script 可以将多条SQL语句整合成一个脚本进行整体编译和执行，这非常适合处理复杂的查询场景，如...
如需在DataWorks使用相关实例（例如MaxCompute、Hologres等）进行数据开发，需先将其绑定为DataWorks的计算资源。本文介绍如何创建与管理计算资源，为后续任务开发、调度运行提供基础能力。计算资源和数据源关系 DataWorks 支持多种计算...
本产品（大数据开发治理平台 DataWorks/2024-05-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能...
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
自由卡片组件可作为基础容器与其他组件自由结合，组成多样式卡片，展示多种类型数据，帮助您高效地开发多样式的可视化移动应用项目。本文介绍自由卡片组件的详细配置方法。步骤一：添加组件 创建移动应用。具体操作，请参见 创建移动应用。...
本产品（云原生应用开发平台 FunctionAI/2023-07-14）的OpenAPI采用 ROA 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不...
有关组件配置的具体操作，请参见本产品文档 Web可视化开发 组件 目录下的各组件文档。分别单击弹窗中的组件，配置各组件数据源。不同组件进入数据源配置页面的方法不同。具体操作，请参见本产品文档 Web可视化开发 组件 目录下的各组件文档...
有关组件配置的具体操作，请参见本产品文档 Web可视化开发 组件 目录下的各组件文档。分别单击抽屉中的组件，配置各组件数据源。不同组件进入数据源配置页面的方法不同。具体操作，请参见本产品文档 Web可视化开发 组件 目录下的各组件文档...
详细内容请参见本产品文档 Web可视化开发组件 目录下的各组件文档。组件通用操作 操作单个组件 选中组件，单击鼠标右键，可进行剪切、复制、锁定等操作。说明 支持在同一应用下，跨页面粘贴剪切的组件。支持在同一账号下，跨页面、跨应用和...
本文描述移动开发平台 mPaaS支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制...