数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建CDH集群，并注册至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将CDH集群注册至...
什么时候需要创建应用？应用创建完成后，可以下载客户端SDK（我们会把相关的ak/sk以安全的方式植入），然后进行自主的应用开发；创建的应用，可以在OTA服务模块进行自主升级；另外，对于消息推送服务的接入，同样需要创建应用。如何创建...
您可在Web可视化编辑页面添加各种样式的组件以及交互动作，完成应用的多样化设计和功能需求开发。什么是组件 组件承载Web应用编辑器的核心功能，提供构成Web应用的基本要素。Web可视化编辑页面中包含以下组件：类型 描述 常用组件 集成常用...
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建CDH集群，并注册至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将CDH集群注册至...
参数赋值逻辑详情请参见 运行，高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏，单击 图标，保存编写的SQL语句，单击 图标，运行创建的SQL任务。（可选）冒烟测试。如果您希望在开发环境进行冒烟测试，可在...
在 选择数据源 选择框内单击 弹出选择数据源弹窗，在弹窗内选择进行任务开发需要使用的数据源。如果没有所需数据源，可单击 新增数据源 添加相应的数据源。说明 标准模式工作空间下，仅展示已配置开发环境与生产环境的数据源。数据库节点 ...
空间级别-开发角色：可以做任务开发的工作，如DataStudio任务开发、数据服务开发、DQC配置等。空间级别-运维角色：负责配置资源与任务部署，如配置数据源、发布任务。空间级别-部署角色：仅负责发布任务。空间级别-模型设计师角色：仅能...
资源创建完成后，如果需要删除资源，简单模式下直接右键单击所需删除的资源即可，标准模式下需要先在开发环境中删除资源，再在生产环境中删除资源，以下以删除生产环境的资源为例，为您演示删除资源的操作步骤。说明 如果您的DataWorks为...
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，切换至目标地域后，单击左侧...
进行开发调试，需要完成以下步骤。安装依赖 开发调试 构建生产 单击 代码示例 获取 Kylin Demo，并完成以下操作。安装依赖 进入项目根目录，使用 cnpm 安装 npm 依赖。安装 npm 依赖 cnpm install 开发调试 安装完环境后，可以通过以下命令...
权限介绍 云原生应用开发平台 CAP 需要使用两个默认角色：AliyunDevsCustomRole：云原生应用开发平台 CAP 在部署项目时，会访问项目指定的云资源。云原生应用开发平台 CAP 使用该角色来访问项目指定的云资源。AliyunDevsDefaultRole：云...
人工智能平台PAI的 可视化建模Designer，用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点，方便您通过该算法节点载入Designer工作流，通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...
私有化部署问题 Q：是否支持私有化部署 A：支持 Q：私有化部署的方式 A：目前产物是独立于开发平台的，只是产物运行需要一个运行时底座 Q：生成的产物，是工程文件还是可读的源码 A：魔笔底座运行的 DSL 文件 Q：设计时平台能否独立私有化...
DataWorks是一站式智能大数据开发治理平台，适配阿里云MaxCompute、E-MapReduce、Hologres、Flink、AnalyticDB、StarRocks、PAI 等数十种大数据和AI计算服务，为数据仓库、数据湖、湖仓一体、Data+AI解决方案提供全链路智能化的数据集成、...
连接配置 连接MaxCompute计算资源的资源组，此处展示已创建并绑定至当前工作空间的Serverless资源组，您需要在此处分别测试开发环境和生产环境的连通性。单击 新建计算资源并绑定数据开发。根据页面提示，刷新数据开发计算资源页面后，即可...
前提条件 开始进行节点开发前，若您需要定制组件环境，此时即可基于官方镜像 dataworks_emr_base_task_pod 创建 自定义镜像，并在 数据开发中使用镜像。例如：在创建自定义镜像时替换Spark Jar包或是依赖特定的 库、文件 或 jar包。已创建...
参数赋值逻辑详情请参见 运行，高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。单击工具栏的 图标，保存编写的SQL语句，单击 图标，运行创建的SQL任务。（可选）冒烟测试。如您希望在开发环境进行冒烟测试，查看调度...
如果需要在前台实现展示，需要自己做处理。消息状态是 NoBindInfo NoBindInfo 表示用户通过 UserId 去推送，但根据 UserId 没有找到对应的信息。请先确认客户端是否有调用绑定接口，并且对应的 appId 和 workspaceId 是否一致。消息状态是 ...
如果需要在前台实现展示，需要自己做处理。消息状态是 NoBindInfo NoBindInfo 表示用户通过 UserId 去推送，但根据 UserId 没有找到对应的信息。请先确认客户端是否有调用绑定接口，并且对应的 appId 和 workspaceId 是否一致。消息状态是 ...
若您要使用DataWorks进行MaxCompute任务的开发、管理，需先将您的MaxCompute项目绑定为DataWorks的MaxCompute计算资源。绑定完成后，可在DataWorks的各功能模块使用该计算资源连接MaxCompute项目，进行相应的数据同步、数据开发、数据分析...
作为工作空间的管理者，在使用数据开发（DataStudio）时，您可以针对用户的开发行为实施有效的管控措施，进行开发流程、数据安全、审计等相关操作，本文将帮助您快速掌握DataStudio的相关功能，实现对数据开发过程的有效管控。背景信息 ...
连接配置 连接MaxCompute计算资源的资源组，此处展示已创建并绑定至当前工作空间的Serverless资源组，您需要在此处分别测试开发环境和生产环境的连通性。单击 确认，完成MaxCompute计算资源配置。更多绑定计算资源的操作指导，请参见：绑定...
进入 移动开发平台 mPaaS 控制台，选择目标应用，完成以下步骤新增数据同步任务，以发送业务数据。前提条件 控制台中已有一条推送配置并处于上线状态。操作步骤 在左侧导航栏单击 后台服务 数据同步，进入数据同步页面。在 配置管理 标签页...
DataWorks的OceanBase节点可进行OceanBase任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用OceanBase节点进行任务开发的主要流程。背景信息 OceanBase是由蚂蚁集团、阿里巴巴完全自主研发的分布式关系型数据库，具有...
易用性 与 commonui 不同的是，不对系统控件再做简单封装（如 APImageView、APTextView），需要用系统控件时，推荐使用原生控件。命名一定要准确，无二义性。类似功能在不同控件中应保持一致。尊重用户习惯。扩展性 控件功能中不要使用硬...
说明 如果在 创建工作空间 时选择了隔离生产、开发环境，则此处需要分别为生产和开发环境选择Spark工作空间。如何创建Spark工作空间，请参见 创建Spark工作空间。默认引擎版本 在Data Studio中新建EMR Spark任务时，将会默认使用此处配置的...
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
扩展程序参数配置 DataWorks支持在扩展程序开发过程中使用参数来提高扩展程序开发和应用效率，在扩展程序代码开发时，将需要应用的参数添加至此处即可。您可直接使用DataWorks提供的典型应用场景的内置参数，也可自定义参数。支持添加多个...
DataWorks支持StarRocks数据源，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、开发、分析、数据服务等功能。本文为您介绍EMR Serverless StarRocks在DataWorks上的操作流程。背景信息 了解EMR ...
什么是提交 提交是魔笔创建版本的主要操作，用户可以通过提交完成魔笔应用开发过程中的版本管理。魔笔的提交提供创建、查询和回滚三个主要操作。在一次提交中，魔笔会记录提交的摘要信息、提交人的账号信息、提交创建时间，同时会生成唯一...
使用 云原生应用开发平台 CAP 需要了解平台的核心组件和功能，本文介绍相关组件和功能的名词解释。概念名称 说明 模板 预置的应用定义，用于快速部署应用程序，便于开发者体验或二次开发。项目 项目就像一个应用程序栈或一组相关的组件，您...
通过本教程，您可以了解如何使用DataWorks和MaxCompute产品组合进行数仓开发与分析，并通过案例体验DataWorks数据集成、数据开发和运维中心模块的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站行为中获取网站用户群体...
说明 如果您在开发任务时，需要特定的开发环境支持，可使用DataWorks提供的自定义镜像功能，定制化构建任务执行所需的组件镜像。更多信息，请参见 自定义镜像。前提条件 已创建业务流程。数据开发（DataStudio）基于业务流程执行具体开发...
DevPod 是函数计算 FC 提供的云端开发环境。它集成了 VS Code、Jupyter Notebook 与终端等常用开发工具，支持通过预置或自定义的容器镜像快速创建开发环境。用户可以在 DevPod 中完成 AI 模型的开发、训练、调试，并将其部署为在线服务。...
AI 与大语言模型(LLM)的原生集成：新架构需具备原生能力，将机器学习、深度学习及自然语言处理等AI能力深度集成到数据开发全流程中。解决现有架构的技术挑战 单体式与批处理为核心的设计局限：原有架构基于早期单体式设计，核心面向批处理...
准备工作：开发Spark任务并获取JAR包 在使用DataWorks调度EMR Spark任务前，您需要先在EMR中开发Spark任务代码并完成任务代码的编译，生成编译后的任务JAR包，EMR Spark任务的开发指导详情请参见 Spark概述。说明 后续您需要将任务JAR包...
DataWorks提供了 周期工作流，以满足需要周期性调度运行的业务场景，本文介绍如何使用周期工作流。背景信息 工作流（Workflow）是一种数据处理流程自动化管理工具，它通过可视化拖拽方式整合多种类型的子任务节点，便捷地建立任务依赖关系...
如果您的任务不需要周期性运行，但又需要将任务发布至生产环境运行，则可以创建手动任务，本文为您介绍如何创建手动任务，并将其发布到生产环境。使用说明 若任务不需要发布生产环境操作生产环境引擎，您可在 个人目录 中创建并执行。手动...
在设计 mPaaS 小程序时，只有把产品做得足够简单易用，才能让更多的用户使用。用户越多，意味着市场越广、收益越大。一个页面只做一件事情 App 的一个页面能展示的信息非常有限。由于手机的使用环境非常不稳定，经常受各种因素影响，例如...
说明 如果在 创建工作空间 时选择了隔离生产、开发环境，则此处需要分别为生产和开发环境选择StarRocks实例。如何创建StarRocks实例，请参见 创建Serverless StarRocks实例。数据库名称 选择StarRocks实例中的数据库。如果未创建数据库，您...