项目模式选择 标准模式是指一个DataWorks项目对应两个MaxCompute项目，可设置开发和生产双环境，提升代码开发规范，并能够对表权限进行严格控制，禁止随意操作生产环境的表，保证生产表的数据安全。当您在DataWorks建立项目时，建议您使用...
netcdf 4.8.0 用于科学数据存储和分析的文件格式和软件库。hdf5 1.10.5 用于存储和处理大规模科学数据的文件格式和软件库。aocc 4.0.0 AMD的基础编译器发行版。mpich-aocc 4.0.3 基于AMD架构的MPI开源实现发行版本MPICH。docker 23.0.1 ...
DataWorks的ADB for MySQL节点可进行AnalyticDB for MySQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用ADB for MySQL节点进行任务开发的主要流程。前提条件（可选，RAM账号需要）进行任务开发的RAM账号已被添加至...
您可以参考本文完成组件接口的开发和使用。整个过程主要分为三步：获取业务组件数据结构。业务组件的数据结构和该组件的 mock.json 文件除去可选参数字段外，其余字段均保持一致。编写接口。表单提交接口 修改组件后，会调用该接口保存组件...
解决方案 数字海南选择了 mPaaS 作为海南省“码上办事”App 的开发和运营平台。具体来说 mPaaS 提供了以下能力支撑“码上办事”业务：业务快速开发：基于 mPaaS H5、小程序开发能力，1 个月内快速开发上线数百项业务，涵盖政府办事、公共...
函数 支持通过使用资源来创建MaxCompute、EMR、CDH和Flink函数，这些函数可在 数据开发 和 SQL查询 中使用。功能入口 进入 DataWorks工作空间列表页，在顶部切换至目标地域，找到已创建的工作空间，单击 操作 列的 快速进入 Data Studio，...
DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要流程。前提条件 EMR引擎类型包括新版数据湖（DataLake）及Hadoop，不同类型...
这一特性巧妙地构建了一个连接低代码开发和传统代码编写的桥梁，不仅极大提升了开发效率，同时也确保了应用的灵活性和个性化定制的可能性。代码扩展能力 代码扩展主要包含两个方面：预加载 JS 预加载 JS 允许开发者在应用加载时执行自定义...
在网络连通的情况下，您可以轻松访问NAS存储和Git仓库，克隆Git仓库中的代码，并进行在线开发和调试Python、Notebook代码。您还可以将代码提交到项目工作区以便调度。个人开发环境实例：支持 SQL、AI Notebook 和 Python 生态，允许本地...
删除场景 操作影响 删除【开发】和【生产】两个环境•生产任务将彻底失败，无法运行。在开发环境配置新任务时，该数据源不可见。仅【开发】环境•生产任务可正常运行。但编辑该任务时，无法获取元数据（如表结构）。在开发环境配置新任务时...
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询，DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。本文为您介绍使用EMR ...
DataWorks的ADB for PostgreSQL节点可进行AnalyticDB for PostgreSQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用ADB for PostgreSQL节点进行任务开发的主要流程。前提条件（可选，RAM账号需要）进行任务开发的RAM...
二、新建MaxCompute项目 DataWorks标准工作空间下，需绑定开发和生产两个MaxCompute项目，作为DataWorks开发环境下的计算资源以及生产环境下的计算资源。进入 MaxCompute工作台，单击左侧菜单进入 管理配置 项目管理 页面。单击 新建项目，...
二、新建MaxCompute项目 DataWorks标准工作空间下，需绑定开发和生产两个MaxCompute项目，作为DataWorks开发环境下的计算资源以及生产环境下的计算资源。进入 MaxCompute工作台，单击左侧菜单进入 管理配置 项目管理 页面。单击 新建项目 ...
通过DataWorks的Serverless Kyuubi节点，可基于 EMR Serverless Spark计算资源 进行Kyuubi任务的开发和周期性调度，以及与其他作业的集成操作。适用范围 计算资源限制：仅支持 绑定EMR Serverless Spark计算资源，需确保资源组和计算资源...
DataWorks为您提供CDH Spark节点，便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍如何创建及使用CDH Spark节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同开发引擎...
在此处添加项目团队成员（RAM用户），并授予其适当的空间级角色（如 工作空间管理员、开发、运维），以实现协同开发和权限管控。详情请参见 为工作空间添加空间成员。4、绑定计算资源 进入工作空间详情的 计算资源 列表，将已有的计算资源...
您可以创建EMR（E-MapReduce）HIVE节点，通过类SQL语句读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析和开发工作。前提条件 已创建阿里云EMR集群，并注册EMR集群至DataWorks。操作详情请参见 旧版数据开发...
有关个人组件开发和公开组件包的详细内容请参见 组件开发。审核组件包：IoT Studio平台管理员开始审核测试组件包内各组件的功能特性、源码文件和应用安全性等。审核通过：IoT Studio平台管理员确认组件包可以在IoT Studio平台上线。上线...
DataWorks的CDH Spark SQL节点可进行CDH Spark SQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍如何配置及使用CDH Spark SQL节点。前提条件 已创建阿里云CDH集群，并绑定至DataWorks工作空间。操作详情请参见 新版数据...
7.商业秘密，指一方的专有思想、可专利思想、现有或预期的产品和服务、软件、电路图、研发、工艺、方法、流程、配方、公式、算法、参数、数据、结构设计、原理图、为合作研发设计的模具、生产、成本、利润信息、金融和金融项目、顾客、客户...
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询，DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。本文为您介绍使用EMR ...
说明 上述说明在DataWorks上的具体体现为，管理员角色和开发角色的成员，有DataWorks上大部分功能权限，有DataWorks开发环境(MaxCompute引擎开发项目）所有权限，但默认没有生产环境（MaxCompute生产项目）的操作权限。如果子账号需要在...
DataWorks的AnalyticDB for MySQL节点可进行AnalyticDB for MySQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for MySQL节点进行任务开发的主要流程。前提条件 已购买AnalyticDB for MySQL，详情请参见...
参数赋值逻辑详情请参见 运行，高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏，单击 图标，保存编写的SQL语句，单击 图标，运行创建的SQL任务。（可选）冒烟测试。如果您希望在开发环境进行冒烟测试，可在...
参数赋值逻辑详情请参见 运行，高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏，单击 图标，保存编写的SQL语句，单击 图标，运行创建的SQL任务。（可选）冒烟测试。如果您希望在开发环境进行冒烟测试，可在...
参数赋值逻辑详情请参见 运行，高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏，单击 图标，保存编写的SQL语句，单击 图标，运行创建的SQL任务。（可选）冒烟测试。如果您希望在开发环境进行冒烟测试，可在...
计算资源和数据源关系 DataWorks 支持多种计算资源 的绑定与使用，绑定完成后，您可直接在DataWorks数据开发开展复杂数据处理及周期性调度任务开发。同时，大部分计算资源绑定至DataWorks后，将自动创建同名 数据源，您也可通过数据集成...
DataWorks的EMR Kyuubi节点可进行Kyuubi任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍如何配置使用EMR Kyuubi节点并进行数据开发。前提条件 已创建阿里云EMR集群，并注册EMR集群至DataWorks。操作详情请参见 新版数据...
DataWorks的Lindorm Spark SQL节点可进行Lindorm Spark SQL任务的开发和周期性调度。本文为您介绍使用Lindorm Spark SQL节点进行任务开发的主要流程。背景信息 Lindorm 是基于云原生架构的分布式计算服务，支持社区版计算模型、兼容Spark...
DataWorks的AnalyticDB for PostgreSQL节点可进行AnalyticDB for PostgreSQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for PostgreSQL节点进行任务开发的主要流程。前提条件 已创建业务流程。数据...
DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要流程。前提条件 已创建业务流程。数据开发（DataStudio）基于业务流程执行...
DataWorks为您提供CDH Spark节点，便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍如何配置及使用CDH Spark节点。前提条件 已创建阿里云CDH集群，并绑定至DataWorks工作空间。操作详情请参见 新版数据开发：绑定CDH计算...
在DataWorks任务开发中，您可以通过创建CDH MR（MapReduce）节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同...
您需先通过创建SSH数据源远程访问您的SSH服务器，才可在SSH节点中进行SSH任务的开发和周期性调度。创建数据源，请参见 创建SSH数据源。说明 SSH节点仅支持使用JDBC连接串方式创建的SSH数据源。同时，为避免任务运行失败，请确保数据源与...
DataWorks的StarRocks节点可进行StarRocks任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用StarRocks节点进行任务开发的主要流程。背景信息 StarRocks是新一代极速全场景MPP（Massively Parallel Processing）数据库，...
核心模块 主要能力 智能数据建模 帮助企业系统化地规划、设计和管理数据仓库，确保数据资产的规范、可复用与高质量。全域数据集成 支持复杂网络环境（云上、本地IDC）和丰富数据源之间的数据传输，实现实时、离线、全增量的全场景数据同步...
DataWorks的SQL Server节点可进行SQL Server任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用SQL Server节点进行任务开发的主要流程。背景信息 SQL Server是用于存储和处理数据的关系型数据库管理系统（RDBMS），为您...
DataWorks的DRDS节点可进行DRDS任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用DRDS节点进行任务开发的主要流程。背景信息 DRDS是一种分布式数据库服务。它允许您将关系数据库水平扩展到分布式系统，支持海量数据存储...
DataWorks的Doris节点可进行Doris任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用Doris节点进行任务开发的主要流程。背景信息 Apache Doris是一个高性能、实时的分析型数据库，能较好地满足报表分析、即席查询、数据...