Data Studio新版数据开发支持将个人开发环境制作成镜像，以供数据开发与其他个人开发环境使用。本文将介绍如何在个人开发环境制作个人开发实例镜像。背景介绍 在个人开发环境开发测试时，若您想要使用不同的三方依赖，您不仅可以在个人开发...
系统内置扩展程序启用后，暂时仅支持对ODPS SQL类的节点生效。即启用后，仅ODPS SQL类节点中相应扩展点事件被触发时，流程会被阻断，通过内置扩展程序对对应的逻辑进行校验并返回校验结果。非ODPS SQL节点对应的事件被触发后，流程会被阻断...
与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您轻松构建离线数仓、实时数仓与即席分析系统，保证数据生产的高效稳定。...
与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您轻松构建离线数仓、实时数仓与即席分析系统，保证数据生产的高效稳定。...
详情请参见：不存在跨工作空间依赖 存在跨工作空间依赖，未设置跨工作空间依赖映射 存在跨工作空间依赖，设置了跨工作空间依赖映射 发布MaxCompute引擎类任务，系统会修改任务代码中涉及的源工作空间名称为目标工作空间名称，详情请参见 ...
Data Studio是阿里巴巴基于15年大数据经验打造的智能湖仓一体数据开发平台，兼容阿里云多项计算服务，提供智能化ETL、数据目录管理及跨引擎工作流编排的产品能力。通过个人开发环境实例支持Python开发、Notebook分析与Git集成，Data Studio...
Data Studio是阿里巴巴基于15年大数据经验打造的智能湖仓一体数据开发平台，兼容阿里云多项计算服务，提供智能化ETL、数据目录管理及跨引擎工作流编排的产品能力。通过个人开发环境实例支持Python开发、Notebook分析与Git集成，Data Studio...
详情请参见：不存在跨工作空间依赖 存在跨工作空间依赖，未设置跨工作空间依赖映射 存在跨工作空间依赖，设置了跨工作空间依赖映射 发布MaxCompute引擎类任务，系统会修改任务代码中涉及的源工作空间名称为目标工作空间名称，详情请参见 ...
经过数据开发形成事实宽表后，再以商品、地域等为维度进行公共汇总。整体的数据流向如下图所示。其中，ODS层到DIM层的ETL（萃取（Extract）、转置（Transform）及加载（Load））处理是在MaxCompute中进行的，处理完成后会同步到所有存储...
本文介绍物联网应用开发（IoT Studio）功能和文档的动态。2024年01月 Web可视化开发和移动可视化开发 功能名称 功能描述 发布时间 相关文档 组件交互 动作执行模式默认 同时执行，新增 按顺序执行。2024-01-29 交互配置 2023年12月 项目...
2024-12-19 所有地域 使用新版数据开发（Data Studio）的用户 ADB Spark SQL节点 数据开发新增节点 数据开发新增ADB Spark节点，该节点可进行AnalyticDB Spark任务的开发和周期性调度，以及与其他作业的集成操作。2024-12-19 所有地域 使用...
客户端版本、用户 ID、设备 ID、操作系统版本、网络类型、设备类型、软件版本会自动填充，不需要业务埋点。param bizType 可选，业务类型，默认为 User_behavior_iOS，建议业务方填写业务标识*@param eventId 必填,埋点 ID*@param extParam...
考虑到手机端开发环境的限制（尤其是 iOS 系统），以及保持接口定义的简单，服务端在定义移动服务接口时，不能使用 Java 语法的全集。接口定义规范涉及三类定义：内部支持数据类规范：已支持的 Java 原生类和包装类。用户接口类规范：用户...
核心能力 广泛兼容 主流协议支持：兼容Playwright、Puppeteer等主流浏览器自动化协议，保障开发便捷性与业务系统对接一致性。灵活扩展：覆盖无头与有头浏览器模式，支持浏览器插件加载，可适配定制化运行需求。智能操作 智能驱动：支持通过...
本文以使用MaxCompute数据源，在DataWorks上运行MaxCompute作业任务为例，为您介绍开发人员如何使用数据开发（DataStudio）创建一个周期调度任务，帮助您快速了解数据开发（DataStudio）模块的基本使用。前提条件 已完成开发前的环境准备，...
为保障 移动开发平台 mPaaS 实现相关功能并稳定运行，我们可能会接入由第三方提供的软件开发包 SDK。接入的部分第三方 SDK 可能涉及收集用户信息，用于向用户提供服务。我们会评估该第三方收集信息的合法性、正当性、必要性，要求第三方对...
函数列表页面为您展示MaxCompute系统自带的函数，您可以在该页面查看函数的分类、说明和示例。背景信息 为了供您方便快捷的使用MaxCompute SQL进行数据分析和数据加工，MaxCompute提供了丰富的内建函数，以便您在日常开发和分析中使用，...
2011 FLINK_SQL_BATCH EMR EMR Hive 可以使用类SQL语句读取、写入和管理大数据集，从而高效地完成海量日志数据的分析和开发工作。227 EMR_HIVE EMR Impala PB级大数据的快速、实时交互式SQL查询引擎。260 EMR_IMPALA EMR MR 可以将大规模...
2025 年 2025 年 12 月 功能名称 功能概述 发布时间 相关文档 组件库上新 新增 Spark Design 组件库，涵盖 40+基础组件和 AI 对话类组件 2025-12-04 系统组件库 主题能力增强 应用主题新增3种预设风格，提供快捷切换和高级配置能力，支持细...
为规范DataWorks OpenAPI的调用，保障系统稳定性，将OpenAPI分为读、写两类。不同DataWorks版本中的读、写OpenAPI分别有相应的QPS限制和每日调用次数限制，具体如下。版本 QPS限制 每日调用次数上限 基础版 所有API总QPS≤5 每日API总调用...
DataWorks全新推出Serverless资源组，...数据开发：当使用数据开发（Data Studio）进行任务开发时，将在数据开发、数据质量、运维中心功能模块运行数据计算任务和调度任务，进而消耗Serverless资源组产生 数据计算类费用 和 任务实例调度费用 ...
系统管理：批量执行软件安装、环境配置、系统维护等任务。关键特性 多平台支持：支持Windows和Linux操作系统镜像，并支持用户定制自定义镜像。安全隔离：基于VPC网络隔离，并且每个任务运行在独立的镜像环境，确保环境稳定以及企业数据安全...
说明 以.a-、.am-开头的类选择器为系统组件占用，请不要使用。不支持属性选择器。全局样式与局部样式：定义在 app.acss 中的样式为全局样式，作用于每一个页面。在 Page 的 acss 文件中定义的样式为局部样式，只作用在对应的页面，并会覆盖...
说明 以.a-、.am-开头的类选择器为系统组件占用，不可使用。不支持属性选择器。全局样式与局部样式 app.acss 中的样式为全局样式，作用于每一个页面。页面文件夹内的.acss 文件中定义的样式为局部样式，只作用在对应的页面，并会覆盖 app....
该类格式的表需进入 智能数据建模 维度建模，通过创建模型并发布为物理表方式生成。建表策略配置如下。代码生成策略管理 配置代码生成策略 在系统管理中，您可自定义DDL语句中表及字段的Comment，与可视化建模界面里中文名与描述的对应关系...
2020 年 10 月《网络安全标准实践指南—移动互联网应用程序（App）使用软件开发工具包（SDK）安全指引》全国信息安全标准化技术委员会 2020 年 11 月《中华人民共和国数据安全法》全国人民代表大会常务委员会 2021 年 9 月《关于开展信息...
本文为您介绍数据开发的相关问题。资源 如何在pyodps调用第三方包？如何在节点内使用资源？如何下载上传到DataWorks的资源？超过30M的资源如何上传？通过odpscmd上传的资源如何在DataWorks上使用？在DataWorks如何上传自己本地编写的jar并...
根据所使用系统类型，准备运行Spark on MaxCompute任务的开发环境，详情请参见 搭建Linux开发环境、搭建Windows开发环境。开发Java/Scala代码。在ODPS Spark节点执行Java或Scala语言类型代码前，需先在本地或已有环境开发好Spark on ...
根据所使用系统类型，准备运行Spark on MaxCompute任务的开发环境，详情请参见 搭建Linux开发环境、搭建Windows开发环境。开发Java/Scala代码。在MaxCompute Spark节点执行Java或Scala语言类型代码前，需先在本地或已有环境开发好Spark on ...
在该阶段，DataWorks为您提供了数据分类分级、规范数据开发流程、企业级身份认证、开源身份隔离等多个场景的最佳实践，帮助企业做好数据安全治理的相关基础防护工作。场景一：数据分级分类 无论在任何行业，数据分级分类都是监管首要检查的...
面对这类场景，我们支持基于数据分级自定义审批流程，同时，支持通过OpenAPI与审批消息实现与外部系统对接，满足企业对平台开放性的诉求。详情请参见 通过分级分类配置审批策略、安全审批单相关OpenAPI中心、审批消息。场景三：数据可用而...
计算引擎类产品生态 DataWorks 构建了开放的计算引擎生态，深度集成MaxCompute、EMR、Hologres、Flink等主流引擎，支持跨引擎协同开发。用户可通过 绑定计算资源，将其转化为平台可用的 计算资源，进而实现 一站式大数据开发治理 。...
开通购买DataWorks软件版本后，在使用DataWorks的各项服务时，不同产品服务的功能模块会根据使用量和占用的资源量进行计费。例如在DataWorks进行任务开发、定时任务调度、数据同步任务调度、大规模工作流监控、数据质量监控、数据服务API...
代码评审要求 用例小类 测试要点 说明 是否已检查 数据一致性测试 主键唯一性 产出表必须有物理主键或逻辑主键，且在数据上主键成立。是 主键和外键逻辑关系 检查设计文档里关于主外键的设计是否在开发阶段得以实现，且在数据上成立，例如...
DataWorks官方镜像为数据开发中的不同节点提供常用的运行环境，以满足不同任务的执行环境需求，您可在数据开发中直接使用官方镜像，也可以基于官方镜像创建自定义镜像后使用，本文将介绍官方镜像。镜像介绍 进行数据开发时，若未给节点配置...
应用范围 系统模块 扩展点类型 扩展点 回调校验结果的OpenAPI 空间级 数据开发 文件变更事件 节点 资源 函数 文件删除前置事件 您可通过 UpdateIDEEventResult 接口将事件处理结果回调至DataWorks。文件提交前置事件 文件发布前置事件 代码...
可适配用户任何的车上系统输出的数据格式 不绑定算法供应商，用户可自行上传预标注、数据预处理、格式转换等算法在平台上运行 不绑定工具链内各模块，用户可以根据自身需要决定使用其中几个部分 云原生 支持在云上大规模调度仿真软件如VTD...
本文描述大数据开发治理平台 DataWorks支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云...
补丁管理服务为每种受支持的操作系统提供了预定义的默认基线。若需为特定操作系统创建自定义扫描和安装规则，可使用补丁基线功能来指定操作系统类型、补丁分类、严重性等级以及自动批准条件。设置完成后，可将此自定义基线设为操作系统的新...
配置完成后单击 发布，系统会将模型发布至对应的 开发 或 生产 环境，并物化至所选引擎。支持在 发布 对话框查看当前发布进度及相关日志 支持重复执行发布操作将模型发布至不同的环境中。可选：发布完成后，您可单击表详情页顶部菜单栏的 ...