两套系统开发、管理和维护成本高昂，数据口径难以统一。分析延迟，决策滞后：离线计算的海量数据无法被即席查询和快速分析，业务人员想要探索数据，需要等待数小时甚至一天的 T+1 报表。而实时数据又难以与海量历史数据进行有效的关联分析...
与此同时，阿里云推出的 多端低代码开发平台魔笔（Mobi），以其"可视化搭建+无缝云产品集成"的独特优势，正为企业提供快速、灵活的定制化智能会议系统开发方案。面对当前企业在智能会议系统方面的需求，主要体现在以下几个方面：个性化定制...
提交文件至调度系统的开发环境，生成对应的任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...
提交文件至调度系统的开发环境，生成对应的任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限...
IoT Studio提供了组件开发功能，便于开发者开发、发布和管理自己研发的组件，并将其发布到可视化工作台中用于可视化页面搭建。从而满足开发者的需求，提升组件丰富性，为可视化搭建提供无限可能。使用说明 组件开发功能升级中，暂停新用户...
在进行客户端开发之前，您首先需要配置开发环境：配置 Windows 开发环境 配置 macOS 开发环境 配置 Linux 开发环境 配置 Windows 开发环境 参考以下说明配置 Windows 开发环境。配置 Java 8 环境 mPaaS 框架只支持 JDK 8 及以上版本。下载...
根据所使用系统类型，准备运行Spark on MaxCompute任务的开发环境，详情请参见 搭建Linux开发环境、搭建Windows开发环境。开发Java/Scala代码。在ODPS Spark节点执行Java或Scala语言类型代码前，需先在本地或已有环境开发好Spark on ...
根据所使用系统类型，准备运行Spark on MaxCompute任务的开发环境，详情请参见 搭建Linux开发环境、搭建Windows开发环境。开发Java/Scala代码。在MaxCompute Spark节点执行Java或Scala语言类型代码前，需先在本地或已有环境开发好Spark on ...
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据开发与运维 数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面，鼠标悬停至 图标，单击 新建节点 通用 HTTP触发器。您也可以打开相应的业务流程...
DataWorks支持创建多种数据库节点，以便于SQL任务的开发、周期性调度及与其他作业的集成操作。前提条件 RAM账号添加至对应空间（可选）。进行任务开发的RAM账号已被添加至对应工作空间中，并具有 开发 或 空间管理员（权限较大，谨慎添加）...
产品优势 提供动态内容展示，提高开发&运营效率 以卡片的形式嵌入到原生 Native 页面中 Android/iOS 双端具有一致性，开发效率高，发布即可见 体积小、性能好、内存小 经过支付宝钱包业务深度打磨 多种前端开发语言（精简 Vue）完善的开发...
如图中 数据集成 模块的输入箭头所示，数据集成任务的源端（Source）和目标端（Sink）都依赖于预先在工作空间中配置好的数据源。自定义镜像：定义：一个包含特定操作系统、运行时环境和第三方库的打包环境。关系：按需绑定。如图左侧所示，...
在该阶段，DataWorks为您提供了数据分类分级、规范数据开发流程、企业级身份认证、开源身份隔离等多个场景的最佳实践，帮助企业做好数据安全治理的相关基础防护工作。场景一：数据分级分类 无论在任何行业，数据分级分类都是监管首要检查的...
SubmitFile 提交文件至调度系统开发环境 提交文件至调度系统的开发环境，生成对应的任务。DeployFile 部署文件 发布文件至生产环境。文件夹 文件夹 CreateFolder 创建文件夹 调用CreateFolder创建文件夹。DeleteFolder 删除数据开发页面的...
问题描述 魔笔开发过程中，使用工作流为用户分配逻辑流时，已经创建好了数据模型，但后端逻辑流中选择数据模型里面逻辑流为空，如下图所示：问题原因 逻辑流在创建的时候，必须返回一个系统用户的列表才能在这里被识别到。解决方案 建议您...
在个人开发环境中使用数据集 当数据集定义好以后，您可以在创建个人开发环境实例时或修改已有个人开发环境实例配置时，将DataWorks数据集的存储挂载到个人开发环境实例，后续，您可以在个人目录的终端或Notebook中直接读取数据集中的数据。...
本文介绍魔笔平台的系统组件库，阐述不同组件库间的差异和切换方法。组件层面差异请参考各组件文档。概念与差异 系统组件库 是魔笔...如有组件库切换需求，建议在应用开发初期选定并切换好组件库，单个应用中建议不同时使用两套组件库的组件。
DataWorks 提供一站式大数据开发与治理平台，涵盖数据集成、开发、建模、分析、质量、服务、地图及开放能力，支持全链路数据处理与企业级数据中台建设。本文为您介绍DataWorks的核心功能特性。数据集成：全领域数据汇聚 DataWorks的数据...
数据资产治理（原数据治理中心）可根据预先配置的治理计划，自动发现平台使用过程中数据存储、任务计算、代码开发、数据质量及安全等维度存在的问题，并通过健康分量化评估，从全局、工作空间、个人等多个视角，以治理报告及排行榜呈现治理...
为提升您使用 系统运维管理 的开发效率，建议您按需选择合适的操作和集成方式。OpenAPI介绍 为了能够让开发者快速高效地学习和使用云产品OpenAPI，阿里云为用户提供OpenAPI网站。它是一款集OpenAPI智能搜索、文档、在线调试、SDK获取、...
函数计算节点开发，在进入已创建好的节点后，根据业务需求，选择执行本次任务调用的函数并配置其运行方式及变量详情，可参考以下表格：参数 描述 选择版本或别名 选择后续调用函数时所使用的服务版本或别名。默认版本为 LATEST。服务版本。...
为方便满足不同安全管控要求的用户生产数据，DataWorks为您提供简单模式和标准模式两种工作空间模式。...建议：建议您将简单模式工作空间升级为标准模式工作空间，以便获得更好的开发流程管控。详情请参见 工作空间模式升级。
背景信息 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。阿里云...
从Java Storm迁移到Flink SQL使实时计算开发周期大大减少，维护更加容易，数据一致性得到更好地保障，提升了业务监控大屏的准确性和实时性，用户可以更专注于业务，加速了业务的实时化。同时，阿里云的24小时运维服务保证了集群稳定，实现...
本文介绍租户业务系统接入移动同步服务（Mobile Sync Service，MSS）的服务器端的开发流程。主要分为以下两个步骤：接入 Java SDK，编写调用代码：采用 Java SDK 的方式进行接入。由于需求不同，编写调用代码分为 使用单数据同步接口 与 ...
与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您轻松构建离线数仓、实时数仓与即席分析系统，保证数据生产的高效稳定。...
与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您轻松构建离线数仓、实时数仓与即席分析系统，保证数据生产的高效稳定。...
如：执行数据开发或离线同步任务时，系统自动根据任务当前所在环境，访问对应的数据库，避免生产库的数据被节点调试等操作污染。说明 数据集成 模块中仅标准模式工作空间下的单表离线同步任务支持数据源开发、生产隔离，其他类型 同步任务 ...
本文介绍了在交通行业中使用了移动开发平台服务的客户案例。北京公交 mPaaS x 启迪公交：为北京公交 App 重构研发模式。客户介绍 启迪公交，是中国领先的智慧公交系统方案提供商和服务运营商。旗下产品「北京公交 App」串联起了北京公共...
当您需要为新的数据项目启动开发工作时，面临着如何隔离代码、资源和团队成员，以避免项目混乱和安全风险的挑战。DataWorks 工作空间正是为此设计的解决方案。它通过提供一个独立的、项目制的容器，让您能够结构化地管理开发任务、计算资源...
您可以参考业务规划设计文档以及业务运行（开发、设计、变更等）相关文档，全面分析数据仓库涉及的源系统及业务管理系统：每个业务会生成哪些数据，存在于什么数据库中。对业务过程进行分解，了解过程中的每一个环节会产生哪些数据，数据的...
Data Studio新版数据开发支持将个人开发环境制作成镜像，以供数据开发与其他个人开发环境使用。本文将介绍如何在个人开发环境制作个人开发实例镜像。背景介绍 在个人开发环境开发测试时，若您想要使用不同的三方依赖，您不仅可以在个人开发...
为适应云原生技术演进、满足日益复杂的数据处理场景需求，并应对现有架构在可扩展性、维护性及用户体验方面的挑战，DataWorks数据开发（Data Studio）正在进行一次全面的架构升级。本次升级旨在构建一个面向未来的、高性能、高可用的数据...
通过本教程，您可以了解如何使用DataWorks和MaxCompute产品组合进行数仓开发与分析，并通过案例体验DataWorks数据集成、数据开发和运维中心模块的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站行为中获取网站用户群体...
（可选）单击画布右侧 调度配置，单击 调度策略，在下拉列表中，选择一个已创建好的触发器与当前工作流进行关联。设计触发式工作流 节点编排 在工作流看板左侧，根据需要开发的任务类型选择对应的节点，将其拖拽至画布中，并通过手动连线的...
找到需要创建数据集的工作空间后，单击工作空间名称，进入工作空间数据集的详情页，该页面将展示空间下已经创建好的所有数据集，您可通过 新建数据集 按钮，参照下文，快速创建DataWorks数据集。存储类型为对象存储（OSS）数据集配置：配置...
应用范围 系统模块 扩展点类型 扩展点 回调校验结果的OpenAPI 空间级 数据开发 文件变更事件 节点 资源 函数 文件删除前置事件 您可通过 UpdateIDEEventResult 接口将事件处理结果回调至DataWorks。文件提交前置事件 文件发布前置事件 代码...
虚拟节点属于控制类节点，它是不产生任何数据的空跑节点（即调度到该节点时，系统直接返回成功，不会真正执行、不会占用资源或阻塞下游节点运行），通常作为业务流程的统筹起始节点，或业务流程中多个分支节点的汇总输出节点使用。...
说明 此处展示工作空间的数据开发中绑定好的EMR引擎。资源类型 仅支持EMR JAR、EMR FILE类型的资源。路径 为您使用的业务流程路径。存储路径 为该资源选择存储的路径，包括 OSS 和 HDFS 两种存储类型：如果您选择 OSS，需要先授权再选择...
组件使用者在使用过程中发现该组件已存在最新版本V2，打开组件，查看不同版本详情，对比后发现新版本组件业务效果更好，然后更新升级到最新的组件版本使用。查看组件引用记录 您可以在组件编辑页右侧单击引用记录，查看哪些节点引用了当前...