DataWorks作为阿里云一站式大数据开发与治理平台，通常会与计算引擎产品联合使用，此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下，使用DataWorks时通常会使用到的其他云产品。计算...
背景信息 MapReduce是一个分布式计算框架，它将用户编写的业务逻辑代码与内置组件结合，形成一个完整的分布式程序，并发运行在一个Hadoop集群上。MaxCompute提供两个版本的MapReduce编程接口：详情请参见 MapReduce。MaxCompute MapReduce...
匿名访问功能需要在应用的登录配置中显式开启。匿名用户的权限通过系统内置的匿名账号 权限组 进行管理，开发者可以修改该权限组对应的权限内容。开启匿名访问 开发者可以通过应用设计器中的设置-登录配置开启应用的匿名访问能力。配置匿名...
背景信息 MapReduce是一个分布式运算程序的编程框架，核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序，并发运行在一个Hadoop集群上。MaxCompute提供两个版本的MapReduce编程接口：详情请参见 MapReduce...
步骤三：将DataWorks添加成员的OpenAPI接口，嵌入至本企业HR系统中，按需触发或在人员入职成功后自动将对应的RAM身份添加至DataWorks自定义角色。步骤四：最终，入职的新人便会默认拥有DataWorks空间角色及MaxCompute数据权限。详情请参见 ...
本文介绍物联网应用开发（IoT Studio）功能和文档的动态。2024年01月 Web可视化开发和移动可视化开发 功能名称 功能描述 发布时间 相关文档 组件交互 动作执行模式默认 同时执行，新增 按顺序执行。2024-01-29 交互配置 2023年12月 项目...
DataWorks是一站式智能大数据开发治理平台，适配阿里云MaxCompute、E-MapReduce、Hologres、Flink、AnalyticDB、StarRocks、PAI 等数十种大数据和AI计算服务，为数据仓库、数据湖、湖仓一体、Data+AI解决方案提供全链路智能化的数据集成、...
个人开发环境：支持运行Python节点开发及调试，支持Notebook交互式分析，以及集成Git代码管理与NAS/OSS存储。Notebook：智能化交互式数据开发和分析工具，支持面向多种数据引擎开展SQL或Python分析，即时运行或调试代码，获取可视化数据...
个人开发环境：支持运行Python节点开发及调试，支持Notebook交互式分析，以及集成Git代码管理与NAS/OSS存储。Notebook：智能化交互式数据开发和分析工具，支持面向多种数据引擎开展SQL或Python分析，即时运行或调试代码，获取可视化数据...
DataWorks支持创建多种数据库节点，以便于SQL任务的开发、周期性调度及与其他作业的集成操作。前提条件 RAM账号添加至对应空间（可选）。进行任务开发的RAM账号已被添加至对应工作空间中，并具有 开发 或 空间管理员（权限较大，谨慎添加）...
产品优势 提供动态内容展示，提高开发&运营效率 以卡片的形式嵌入到原生 Native 页面中 Android/iOS 双端具有一致性，开发效率高，发布即可见 体积小、性能好、内存小 经过支付宝钱包业务深度打磨 多种前端开发语言（精简 Vue）完善的开发...
手动业务流程：用于手动触发式任务的开发，该模块开发的任务可发布生产进行运维。运行历史：用于查看在DataStudio界面测试运行的历史记录，当前支持保留3天的历史记录。临时查询：用于进行单次简单的测试查询，无法发布生产运维。公共表：...
DataWorks 是阿里云提供的一站式大数据开发与治理平台，旨在帮助用户解决从数据接入、处理、治理到服务化的全链路数据问题。它通过一系列高度协同的功能模块，将复杂的数据工程流程化、可视化，显著降低了大数据开发的门槛。本文将为您逐一...
调用CreateFile，在数据开发中创建一个文件。目前不支持调用该接口创建数据集成节点任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 ...
两套系统开发、管理和维护成本高昂，数据口径难以统一。分析延迟，决策滞后：离线计算的海量数据无法被即席查询和快速分析，业务人员想要探索数据，需要等待数小时甚至一天的 T+1 报表。而实时数据又难以与海量历史数据进行有效的关联分析...
系统内置集成是由魔笔平台封装的集成资源，旨在简化用户的操作，帮助用户快速高效进行集成操作的开发和使用。系统内置集成 系统内置集成 是魔笔平台预置的集成资源，位于集成列表中置顶的"系统内置集成"文件夹中。这类集成资源由魔笔平台...
调用CreateFile，在数据开发中创建一个文件。目前不支持调用该接口创建数据集成节点任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下...
4155787800000 CronExpress string 否 周期调度的 cron 表达式，该参数与 DataWorks 控制台 中，数据开发任务的“调度配置 时间属性 cron 表达式”对应。配置完“调度周期”及“定时调度时间”后，DataWorks 会自动生成相应 cron 表达式。...
为适应云原生技术演进、满足日益复杂的数据处理场景需求，并应对现有架构在可扩展性、维护性及用户体验方面的挑战，DataWorks数据开发（Data Studio）正在进行一次全面的架构升级。本次升级旨在构建一个面向未来的、高性能、高可用的数据...
4155787800000 CronExpress string 否 周期调度的 cron 表达式，该参数与 DataWorks 控制台 中，数据开发任务的“调度配置 时间属性 cron 表达式”对应。配置完“调度周期”及“定时调度时间”后，DataWorks 会自动生成相应 cron 表达式。...
组件功能 统一端上开发标准，实现“开发一次，多端投放”继承支付宝小程序原生 IDE，提供“开发、调试、发布”一站式能力，深度提升需求迭代速度，并有能力保障发布质量。mPaaS 小程序，移动端全新的开发模式，深度融合 HTML5 的易开发性、...
数据开发（Data Studio）（新版）支持用户创建手动任务、手动业务流程和触发式工作流，数据开发（DataStudio）（旧版）用户只能创建手动业务流程。前提条件 手动任务、手动业务流程或触发式工作流已发布至生产环境。进入手动任务页面 登录 ...
在数据开发过程中，可以创建SQL组件节点，利用这些预定义组件快速搭建数据处理流程，从而显著提升开发效率。1010 COMPONENT_SQL MaxCompute Script 可以将多条SQL语句整合成一个脚本进行整体编译和执行，这非常适合处理复杂的查询场景，如...
请开发者 在您接入、使用移动开发平台 mPaaS 服务前，根据移动开发平台 mPaaS 的实际情况，在您 App 的隐私政策中，对移动开发平台 mPaaS 名称、公司名称、处理个⼈信息种类及⽬的、采集⽅式、隐私政策链接等内容进⾏披露，并获取用户的...
DataWorks 提供一站式大数据开发与治理平台，涵盖数据集成、开发、建模、分析、质量、服务、地图及开放能力，支持全链路数据处理与企业级数据中台建设。本文为您介绍DataWorks的核心功能特性。数据集成：全领域数据汇聚 DataWorks的数据...
方案概览 在现有的魔笔 Web 应用中集成其他业务系统应用，只需 2 步：使用 iframe 组件集成外部应用：利用魔笔平台预制的 iframe 组件，并在 iframe 组件中集成业务系统应用 URL，完成应用嵌入。发布应用：将完成集成的魔笔主应用进行预览...
了解DataWorks on EMR Serverless StarRocks DataWorks作为阿里云一站式大数据开发治理平台，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、作业周期性调度，同时结合StarRocks引擎在数据分析和数据...
环境限制 源工作空间跨云发布到目标工作空间时，环境限制如下：源工作空间 目标工作空间 工作空间模式 数据开发版本 简单模式 新版数据开发 简单模式 旧版数据开发 标准模式 新版数据开发 标准模式 旧版数据开发 简单模式 新版数据开发 不...
环境限制 源工作空间跨工作空间发布到目标工作空间时，环境限制如下：源工作空间 目标工作空间 工作空间模式 数据开发版本 简单模式 新版数据开发 简单模式 旧版数据开发 标准模式 新版数据开发 标准模式 旧版数据开发 简单模式 新版数据...
在插件和平台集成方面，AI Studio提供了灵活的插件化架构，允许开发者将生成式 AI 能力以标准化组件的形式嵌入到云原生应用中。无论是数据预处理、模型训练还是推理服务，都可以通过AI Studio快速配置，并通过FunctionAI平台实现Serverless...
物联网应用开发（IoT Studio）中的Web可视化开发工具可帮助您开发一个基于网页的控制界面，无需编写代码，十分的方便快捷。本文介绍通过开发Web应用，实现检测边缘计算机状态和控制设备电源指示灯开关的功能。前提条件 已完成项目开发和...
根据所使用系统类型，准备运行Spark on MaxCompute任务的开发环境，详情请参见 搭建Linux开发环境、搭建Windows开发环境。开发Java/Scala代码。在ODPS Spark节点执行Java或Scala语言类型代码前，需先在本地或已有环境开发好Spark on ...
设计师制定规范，开发解释规范成为控件，完整的开发指南便于开发实现，形成一站式的控件体系。通过统一的命名实现开发和设计的统一认知，更多关于命名规范。参见本文的 组件规范和原则。通过设计板实现设计人员对已有控件的认知，仅需要...
根据所使用系统类型，准备运行Spark on MaxCompute任务的开发环境，详情请参见 搭建Linux开发环境、搭建Windows开发环境。开发Java/Scala代码。在MaxCompute Spark节点执行Java或Scala语言类型代码前，需先在本地或已有环境开发好Spark on ...
本案例指导您完成购房群体分析，帮助您掌握DataWorks的数据开发与数据分析流程。案例介绍 本案例基于用户买房数据，分析不同群体的购房情况。通过DataWorks进行数据开发和数据分析。将本地数据通过DataWorks上传至MaxCompute的 bank_data ...
节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...
支持的JSON的数据格式有：对象（Object）：{} 数组（Array）：[]字符串（string）："test"数字（number）：123 布尔值（bool）：true、false 业务逻辑开发：调用在当前项目中，通过业务逻辑开发工作台开发的服务接口，将返回数据作为组件...
DataWorks的Notebook支持多种类型的单元格，提供一个交互式且模块化的分析环境，旨在帮助用户高效地完成数据处理、分析、可视化以及模型构建。功能介绍 在DataWorks中，可以通过Notebook节点构建交互式、模块化的可复用分析环境。多引擎...
配置示例 配置路径 您需要进入数据开发节点的编辑页面，单击右侧导航栏的 调度配置，在 调度配置 时间属性 区域配置节点的调度周期。场景示例 配置详情 目标任务配置在每年的一月、四月、七月、十月的1日和最后一日运行，则在上述指定日期...
2025-07-31 所有地域 使用新版数据开发（Data Studio）的用户 周期工作流 触发式工作流 手动业务流程 节点开发 手动任务 组件管理 资源管理 使用数据集 Data Studio支持在Shell节点、Python节点、Notebook和个人开发环境中使用数据集。...