DataWorks的费用主要由三部分构成:一是购买功能权限的版本软件费;二是运行任务的资源组费用;三是数据质量、智能监控等服务的超额费用。此外,底层MaxCompute等引擎的计算与存储成本,将产生独立的账单。计费概览 一、软件费用 重要 购买...
数据服务基于业务流程实现以业务为单元的API开发,并基于业务流程对API、函数和服务编排进行组织管理。因此在生成API前,您需要创建业务流程。本文为您介绍如何创建及管理业务流程。前提条件 在创建业务流程之前,您需要登录 API网关控制台...
2025-02-10 所有地域 所有用户 自动运维 数据开发新增节点 SUB_PROCESS是一种特殊的任务类型,它可以在工作流内引用另一个已定义的工作流任务。这种任务类型适用于将复杂的任务分解为多个子任务,每个子任务可以独立定义和管理,从而提高...
面对MaxCompute无法直接调用外部API的限制,本文将通过一个完整的实践案例,教您如何利用“离线IP库+UDF”的方案,在MaxCompute中高效地实现IP地址归属地分析。案例说明 MaxCompute是一个封闭的计算环境,无法直接调用外部的HTTP API(如...
调用CreateFile,在数据开发中创建一个文件。目前不支持调用该接口创建数据集成节点任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 ...
这一特性巧妙地构建了一个连接低代码开发和传统代码编写的桥梁,不仅极大提升了开发效率,同时也确保了应用的灵活性和个性化定制的可能性。代码扩展能力 代码扩展主要包含两个方面:预加载 JS 预加载 JS 允许开发者在应用加载时执行自定义...
FunModel 是一个面向 AI 模型开发、部署与运维的全生命周期管理平台。您只需提供模型文件(例如来自 ModelScope、Hugging Face 等社区的模型仓库),即可利用 FunModel 的自动化工具快速完成模型服务的封装与部署,并获得可直接调用的推理 ...
DataWorks为您提供了多个实验教程,帮助您从前期的环境准备、数据采集,到后期的数据开发、结果展示,端到端了解DataWorks使用的全流程,更加熟悉产品的核心功能。综合示例:用户画像分析 本教程通过一个实战案例——网站用户画像分析,全...
若简单模式升级为标准模式,会将原有的一个数据源拆分为生产环境和开发环境隔离的两个数据源。详情请参见 场景:工作空间模式升级(简单模式升级标准模式)。与数据集成模块数据源的关系 简单模式:工作空间为简单模式时,仅拥有一个环境,...
若简单模式升级为标准模式(使用新版数据开发(Data Studio)的空间暂不支持升级),会将原有的一个计算资源拆分为生产环境和开发环境隔离的两个计算资源。详情请参见 工作空间模式升级。span.aliyun-docs-icon { color:transparent!...
Data Studio个人开发环境是账号级云端开发实例,集成OSS/NAS存储、Git代码管理及Python/Notebook生态,支持本地脚本执行、在线调试与任务提交,通过灵活的自定义镜像和外部服务扩展能力,为数据处理、模型训练及协作开发提供高效、可定制的...
本文以使用MaxCompute数据源,在DataWorks上运行MaxCompute作业任务为例,为您介绍开发人员如何使用数据开发(DataStudio)创建一个周期调度任务,帮助您快速了解数据开发(DataStudio)模块的基本使用。前提条件 已完成开发前的环境准备,...
本文介绍通过 云原生应用开发平台 CAP 快速创建一个空白项目。操作步骤 登录并前往 云原生应用开发平台 控制台的 项目 页面,创建空白项目。填写项目信息,点击 创建 按钮。创建 函数服务。填写函数服务相关配置,点击 预览&部署 按钮。在...
本案例描述如何使用物联网应用开发(IoT Studio)平台的业务逻辑功能,开发空气环境检测和净化的服务。该服务可控制空气净化器自动净化环境,并针对不同的环境系数对用户进行告警提示。设计思路 创建并接入相应的产品和设备。产品相关参数...
在业务逻辑工作台,开发三个业务服务,分别用于获取设备上报的温度数据,每整点统计前一小时的最高温度数据,和筛选指定时间段内每小时的最高温度数据。前提条件 已完成以下操作:创建项目和产品 开发虚拟设备 使用云数据库创建数据表 说明...
一个MR调用多个JAR资源时,classpath写法为-classpath./xxxx1.jar,./xxxx2.jar,即两个路径之间用英文逗号(,)分隔。执行 MR 任务 在 调试配置 的 计算资源 中,选择配置 计算资源、计算配额 和 DataWorks资源组。说明 访问公共网络或VPC...
多端开发 在 mPaaS 小程序 IDE 中开发的小程序,不仅可以投放到使用 mPaaS 框架开发的 App 中,还可以通过mPaaS 小程序 IDE 唤起微信小程序 IDE 进行联调,或快速构建为 H5 应用、实现真机预览。微信小程序 打开小程序 IDE,在 模板选取 中...
DataWorks数据开发(DataStudio)模块用于定义周期调度任务的开发及调度属性,与运维中心配合使用,面向各引擎(MaxCompute、Hologres、EMR等)提供可视化开发主界面,支持智能代码开发、多引擎混编工作流、规范化任务发布等能力,帮助您...
一个项目可以包含多个服务,项目用于管理服务及其资源,指引用户完成开发、调试和部署等过程。更多信息,请参见 管理项目。服务 应用的业务实现,每个服务均代表一个独立运行的微服务,同一个项目的服务间相互协作。云原生应用开发平台 CAP...
DataWorks数据开发(DataStudio)模块用于定义周期调度任务的开发及调度属性,与运维中心配合使用,面向各引擎(MaxCompute、Hologres、EMR等)提供可视化开发主界面,支持智能代码开发、多引擎混编工作流、规范化任务发布等能力,帮助您...
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...
mPaaS 提供了以下开发者工具以帮助开发者能够快速接入 mPaaS 并辅助进行开发工作。mPaaS Xcode Extension:是基于 XcodeKit 构建的官方插件,它可以在 Xcode 的 Editor 菜单中增加额外的命令。安装简单,不需要去除 Xcode 签名。通过全新的...
本文是阿里云Web可视化开发的快速入门指南,将通过创建产品、搭建应用、发布三个步骤,带您从零到一完成一个物联网开关监控应用的开发。
同一个名称的数据源可存在 开发环境 和 生产环境 两套配置,设置两个不同的数据库/实例,使任务在测试和生产调度时操作的数据隔离,确保生产环境数据的安全。数据集成 模块中仅 单表离线同步任务 支持数据源开发、生产隔离,其他类型 同步...
说明 如果需要为同一个模型表关联多个节点,可再次单击 模型开发 进行绑定。计费说明 发布模型功能本身不收费。物化过程中涉及的计算和存储资源将产生费用:目标引擎费用:模型物化后,在目标引擎(如MaxCompute、Hologres)中占用的存储...
步骤一:创建CDH Presto节点 进入数据开发页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。右键单击某个业务流程,选择 新建节点 CDH CDH ...
步骤一:创建CDH Hive节点 进入数据开发页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。右键单击某个业务流程,选择 新建节点 CDH CDH Hive。...
步骤一:创建CDH Impala节点 进入数据开发页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。右键单击某个业务流程,选择 新建节点 CDH CDH ...
它通过提供一个独立的、项目制的容器,让您能够结构化地管理开发任务、计算资源和成员权限,从而实现安全、有序、高效的团队协同开发。说明 推荐您优先阅读 工作空间概述。核心示例 对于有经验的用户,您可以通过以下最简路径创建一个可...
运行时底座是独立环境运行的 Q:私有化部署费用 A:需要订阅专业版+运行时底座(1W/个,每个部署环境需要一个底座,运行底座可以同时运行多个应用)套餐规格 Q:部署的 资源粗估 A:资源配置表 资源类型 配置规格 个数 ACK ACK Pro版本 1 ...
步骤二:开发Vertica任务(可选)选择Vertica数据源 如果您的工作空间创建了多个Vertica数据源,需先在Vertica节点编辑页面选择合适的数据源。如果仅创建了一个Vertica数据源,默认使用该数据源进行开发操作。说明 Vertica节点仅支持使用...
步骤二:开发CDH Spark SQL任务(可选)选择CDH集群实例 若您的工作空间注册了多个CDH集群,则可在节点编辑页面顶部选择合适的集群。若仅注册了一个CDH集群,默认使用该集群进行开发操作。开发SQL代码 开发SQL代码:简单示例 在CDH Spark ...
Trino是一个开源的分布式SQL查询引擎,适用于多数据源交互式分析查询。您可以通过创建EMR(E-MapReduce)Trino节点,完成海量多维数据聚合或报表分析。详情请参见 Trino。前提条件 已创建阿里云EMR集群,并注册EMR集群至DataWorks。创建EMR...
开发或发布环境对比:在 开发记录 页签中,勾选两个版本,单击上方的 选择对比 按钮,即可对比不同版本的手动业务流程代码信息和调度配置信息。开发与发布或构建环境对比:在 开发记录 页签中,定位到手动业务流程的某个版本。单击 操作 栏...
步骤二:开发KingbaseES任务(可选)选择KingbaseES数据源 如果您的工作空间创建了多个KingbaseES数据源,需先在KingbaseES节点编辑页面选择合适的数据源。如果仅创建了一个KingbaseES数据源,默认使用该数据源进行开发操作。说明 ...
发起代码评审流程 开发人员在提交节点时,可指定一个或多个代码评审人员。不同模式的工作空间代码评审流程说明如下表。说明 当节点已存在正在进行的代码评审,发起新的评审后,旧评审流程的结果将自动作废,不再生效。若执行的是删除节点...
步骤二:开发Doris任务(可选)选择Doris数据源 如果您的工作空间创建了多个Doris数据源,需先在Doris节点编辑页面选择合适的数据源。如果仅创建了一个Doris数据源,默认使用该数据源进行开发操作。说明 Doris节点仅支持使用JDBC连接串方式...
步骤二:开发SAP HANA任务(可选)选择SAP HANA数据源 如果您的工作空间创建了多个SAP HANA数据源,需先在SAP HANA节点编辑页面选择合适的数据源。如果仅创建了一个SAP HANA数据源,默认使用该数据源进行开发操作。说明 SAP HANA节点仅支持...
若您要使用DataWorks进行Hologres任务的开发、管理,需先将您的Hologres实例创建为DataWorks的Hologres计算资源。创建完成后,可在DataWorks的各功能模块使用该计算资源连接Hologres实例,进行相应的数据同步、数据开发、数据分析等操作。...
项目模式选择 标准模式是指一个DataWorks项目对应两个MaxCompute项目,可设置开发和生产双环境,提升代码开发规范,并能够对表权限进行严格控制,禁止随意操作生产环境的表,保证生产表的数据安全。当您在DataWorks建立项目时,建议您使用...