钉钉小程序:钉钉小程序是一种全新的开发模式,并支持iOS、安卓等多端部署。其他集成方式:移动应用集成到微信公众号的具体操作,请参见 自定义菜单。移动应用集成到微信小程序的具体操作,请参见 小程序开发指南。使用说明 支付宝小程序和...
单击 确认,完成节点创建,后续您可在创建的节点中进行对应任务的开发与配置操作。步骤二:创建并引用CDH JAR资源 DataWorks支持您从本地先上传资源至DataStudio,再引用资源。具体操作如下:创建CDH JAR资源。在对应业务流程中,右键单击 ...
前提条件 您已完成相关数据源和提交接口的开发。操作步骤 登录 mPaaS 控制台后,从左侧导航栏进入 智能搭建 接口管理 页面。单击 创建接口,在接口创建面板上,完成接口配置。配置信息 说明 接口名称 接口的名称 接口类型 支持两种类型的...
为方便满足不同安全管控要求的用户生产数据,DataWorks为您提供简单模式和标准模式两种工作空间模式。...建议:建议您将简单模式工作空间升级为标准模式工作空间,以便获得更好的开发流程管控。详情请参见 工作空间模式升级。
DataWorks的EMR Kyuubi节点可进行Kyuubi任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍如何创建EMR Kyuubi节点并进行数据开发。前提条件 已创建阿里云EMR集群,并注册EMR集群至DataWorks。操作详情请参见 旧版数据开发:...
功能概述 DataWorks的数据开发的亮点功能如下:DataStudio支持 MaxCompute、E-MapReduce、CDH、Hologres、AnalyticDB、ClickHouse 等多种计算引擎,支持在统一的平台上进行各类引擎任务的开发、测试、发布和运维等操作。DataStudio支持智能...
背景信息 DataWorks的数据开发(DataStudio)面向各引擎(MaxCompute、Hologres、EMR、CDH等)提供可视化开发界面,包括智能代码开发、数据清洗加工、规范化任务开发与发布等,保证数据开发的高效与稳定。更多数据开发模块的使用,详情请...
您可以参考本文完成组件接口的开发和使用。整个过程主要分为三步:获取业务组件数据结构。业务组件的数据结构和该组件的 mock.json 文件除去可选参数字段外,其余字段均保持一致。编写接口。表单提交接口 修改组件后,会调用该接口保存组件...
DataWorks为您提供CDH Spark节点,便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍如何配置及使用CDH Spark节点。前提条件 已创建阿里云CDH集群,并绑定至DataWorks工作空间。操作详情请参见 新版数据开发:绑定CDH计算...
您将需要 配置开发环境(本教程中 Windows 下的开发环境为例进行说明)。网络浏览器(建议您使用 Chrome 浏览器)。一部安卓手机(系统版本为安卓 4.3 或更新版本)及配套的数据线。您也可以选择使用模拟器进行调试,本教程以模拟器为例。
作为工作空间的管理者,在使用数据开发(DataStudio)时,您可以针对用户的开发行为实施有效的管控措施,进行开发流程、数据安全、审计等相关操作,本文将帮助您快速掌握DataStudio的相关功能,实现对数据开发过程的有效管控。背景信息 ...
若您要使用DataWorks进行Hologres任务的开发、管理,需先将您的Hologres实例创建为DataWorks的Hologres计算资源。创建完成后,可在DataWorks的各功能模块使用该计算资源连接Hologres实例,进行相应的数据同步、数据开发、数据分析等操作。...
后续您可在节点中进行对应任务的开发与配置。步骤二:开发PAI DLC任务 开发任务代码:简单示例 在PAI DLC节点编辑页面,您可通过如下方式编写DLC任务:基于已有DLC任务编写任务代码。通过名称搜索,载入在人工智能平台PAI已创建的DLC任务。...
如果您想进一步体验IoT Studio的Web可视化和业务逻辑功能,可继续执行后续步骤,体验 监控机房温湿度 案例的开发过程。后续步骤 添加温湿度传感器,完成检测设备数据的目标,实现对机房温度和湿度环境参数的数据展示。为温湿度传感器定义物...
Presto(即PrestoDB)是一款灵活、可扩展的分布式SQL查询引擎,支持使用标准的SQL查询语言进行大数据的交互式分析查询,DataWorks为您提供EMR Presto节点,便于您在DataWorks上进行Presto任务的开发和周期性调度。本文为您介绍使用EMR ...
DataWorks的EMR Kyuubi节点可进行Kyuubi任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍如何配置使用EMR Kyuubi节点并进行数据开发。前提条件 已创建阿里云EMR集群,并注册EMR集群至DataWorks。操作详情请参见 新版数据...
已完成扩展程序的开发部署操作,详情请参见 开发部署扩展程序:函数计算方式。背景信息 启动扩展程序。您可以在 管理中心 页面查看 扩展程序,并控制是否需要在当前工作空间启用该扩展程序校验。数据开发支持的扩展点事件。DataWorks的数据...
它在统一的计算资源和数据集权限体系基础上,提供Spark计算框架,支持您以熟悉的开发使用方式提交运行Spark作业,满足更丰富的数据处理分析需求。在DataWorks中,您可通过ODPS Spark节点实现Spark on MaxCompute任务的调度运行,以及与其他...
软件版本选择与计费 DataWorks各版本功能详情 付费版 特指 标准版、专业版、企业版,提供更高级、更丰富的开发、治理、安全与运维功能。增值模块 特指 数据建模。数据建模支持维度建模,您可在此完成数仓规划设计、制定并沉淀企业数据标准...
完成上述步骤后,您只需要使用./gradlew 的形式构建,这样的方式能最小的影响您的开发环境。使用独立 gradle 下载。解压.zip 包,然后将解压路径配置为 GRADLE_HOME 环境变量,并将 GRADLE_HOME 下的 bin 路径添加到 PATH 环境变量中。正确...
已完成资源文件的开发,文件可从本地上传。创建并使用资源 资源说明 在Data Studio资源与函数管理中,可以将本地资源通过DataWorks上传到Flink,用于在DataWorks中开发Flink作业,或用来创建 Flink自定义函数。使用限制 上传资源需符合以下...
通过DataWorks的Serverless Kyuubi节点,可基于 EMR Serverless Spark计算资源 进行Kyuubi任务的开发和周期性调度,以及与其他作业的集成操作。适用范围 计算资源限制:仅支持 绑定EMR Serverless Spark计算资源,需确保资源组和计算资源...
本文介绍操作权限控制的相关问题。如何控制工作空间下各用户可操作哪些功能权限?...关于预设角色拥有的对应功能权限列表请参考文档:附录:预设角色权限列表(空间级)。关于自定义DataWorks角色您可以参考文档:空间级模块权限管控。...
权限类别 描述 MaxCompute开发项目权限 DataWorks通过空间级预设角色与开发环境MaxCompute引擎Role的映射关系,让被授予空间角色的RAM用户(子账号)拥有该角色映射的开发引擎权限,默认拥有开发环境对应的引擎项目权限,但无生产环境对应...
DataWorks的CDH Spark SQL节点可进行CDH Spark SQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍如何配置及使用CDH Spark SQL节点。前提条件 已创建阿里云CDH集群,并绑定至DataWorks工作空间。操作详情请参见 新版数据...
如果您需要修改代码中的参数赋值,请单击界面上方工具栏的 高级运行。参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。(可选)配置高级参数 您可在节点 高级设置 处配置特有属性参数。更多属性参数设置,请...
例如,执行离线同步任务时,开发环境自动访问预配置的开发环境数据库,而生产调度则访问生产库。说明 简单模式工作空间仅拥有一个环境,无法做到开发与生产隔离。关于工作空间模式的介绍,详情请参见 工作空间模式区别。若简单模式升级为...
智能搭建(Mobile Pages Building Service,简称 MBS)是一款互联网应用页面的快速搭建工具,无需研发投入开发,零代码快速搭建页面。MBS 实现了可视化、标准化、组件化的搭建方式,提供丰富的基础组件和多个预置业务组件,同时支持使用...
开发环境数据源仅用于节点的开发与调试,而生产环境数据源则专用于已发布节点的周期性调度,两者严格分离,可有效防止测试操作影响生产数据。功能介绍 数据源使用 DataWorks的数据源在工作空间的 管理中心 数据源 中进行统一管理和维护。...
注册CDH或CDP集群至DataWorks 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发,您需执行如下操作:需将进行协同开发的RAM用户添加为当前工作空间的成员,并授予其开发角色。将工作空间成员添加至 CDP或CDH 集群环境中。工作...
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射,来让被授予空间角色的RAM用户,拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限,但默认无生产权限,本文为您介绍预设角色权限基本情况、MaxCompute权限...
DataWorks 计费体系为适应不同业务场景而设计得非常灵活,因此包含软件版本、资源组、其他服务及底层引擎等多个组成部分。本文旨在帮您做出明智的购买决策,根据自身业务阶段选择最优配置以实现成本效益最大化,并提供针对个人开发者、成长...
手动业务流程:用于手动触发式任务的开发,该模块开发的任务可发布生产进行运维。运行历史:用于查看在DataStudio界面测试运行的历史记录,当前支持保留3天的历史记录。临时查询:用于进行单次简单的测试查询,无法发布生产运维。公共表:...
组件功能 为方便开发,mPaaS 封装了众多性能优异的组件,能够覆盖移动开发的各个阶段。组件可以跟框架一起使用来快速开发新的 App,各组件也可以独立集成到已有 App 中。开发阶段 组件名称 描述 客户端开发 设备标识 简单快捷地获取设备 ID...
上传数据操作入口 您可在数据开发的顶部菜单栏、业务流程下的表分组或表管理页面中进行上传数据操作,入口如下。数据开发 页面的顶部菜单栏。数据开发 业务流程 下的表分组。标准模式下,在 表管理 页面右键单击开发表,选择导入数据。上传...
本文为您介绍新版数据开发的基本开发流程。前提条件 已创建DataWorks工作空间并开通新版数据开发。本指南适用于新版数据开发,如需使用,请确保您的工作空间已开通新版数据开发。开通方式如下:创建工作空间 时,选择 使用新版数据开发...
适用场景 该功能仅支持 标准模式且使用了新版数据开发 的工作空间,在同一工作空间下,将节点、函数、资源、组件等对象批量从开发环境发布至生产环境。说明 标准模式的旧版数据开发同空间批量发布流程请参见 发布任务。使用限制 权限限制 ...
在数据开发的项目目录模块单击,选择 新建节点 算法 PAI Flow,创建并进入 PAI Flow 流程编排页面,新建节点。开发PAI Flow PAI Flow 支持多种可视化建模节点,您可根据不同节点,进行流程设计与节点开发。在 PAI Flow 内,在左侧选择需要...
您需先通过创建SSH数据源远程访问您的SSH服务器,才可在SSH节点中进行SSH任务的开发和周期性调度。创建数据源,请参见 创建SSH数据源。说明 SSH节点仅支持使用JDBC连接串方式创建的SSH数据源。同时,为避免任务运行失败,请确保数据源与...
它在统一的计算资源和数据集权限体系基础上,提供Spark计算框架,支持您以熟悉的开发使用方式提交运行Spark作业,满足更丰富的数据处理分析需求。在DataWorks中,您可通过MaxCompute Spark节点实现Spark on MaxCompute任务的调度运行,以及...