背景信息 SQL Server是用于存储和处理数据的关系型数据库管理系统(RDBMS),为您提供可靠、高效且安全的数据管理和分析服务。更多介绍请参见 SQL Server。前提条件 已创建业务流程。数据开发(DataStudio)基于业务流程执行不同引擎的具体...
DataWorks官方镜像为数据开发中的不同节点提供常用的运行环境,以满足不同任务的执行环境需求,您可在数据开发中直接使用官方镜像,也可以基于官方镜像创建自定义镜像后使用,本文将介绍官方镜像。镜像介绍 进行数据开发时,若未给节点配置...
AliyunDevsDefaultRole:云原生应用开发平台 CAP 在管理项目时,需要访问依赖的云资源。云原生应用开发平台 CAP 使用该角色来访问依赖的云资源。更多信息,请参见 默认角色。关于服务角色的介绍请见 创建可信实体为阿里云服务的RAM角色。...
背景信息 PostgreSQL是一款功能强大、灵活的开源关系型数据库管理系统(RDBMS),具备强大的数据模型、高度可扩展性和稳定性,拥有丰富的核心功能。详情请参见 PostgreSQL。前提条件 已创建业务流程。数据开发(DataStudio)基于业务流程...
本文描述移动开发平台 mPaaS支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制...
IoT Studio提供了组件开发功能,便于开发者开发、发布和管理自己研发的组件,并将其发布到可视化工作台中用于可视化页面搭建。从而满足开发者的需求,提升组件丰富性,为可视化搭建提供无限可能。使用说明 组件开发功能升级中,暂停新用户...
表开发、表管理、公共表 新版数据开发中,新增 数据目录 管理,数据目录-新建表,支持表单可视化建表,支持代码建表,支持AI建表。资源、函数开发 新版数据开发中,新增 资源管理 模块,统一管理资源和函数。临时查询 新版数据开发新增 ...
自定义 API 管理页面展示了 可以直接使用的 API、申请通过后可使用的 API 以及 API 审核列表。在此页面可以 查看 API 详情、提审 API。...说明 提审后的 API 需要在 小程序开发平台 运营管理后台 的 自定义 API 申请审核 中审核。
自定义 API 管理页面展示了 可以直接使用的 API、申请通过后可使用的 API 以及 API 审核列表。在此页面可以 查看 API 详情、提审 API。...说明 提审后的 API 需要在 小程序开发平台 运营管理后台 的 自定义 API 申请审核 中审核。
添加域名 在 小程序开放平台 的 开发者后台 左侧菜单栏单击 开发配置 域名管理 添加域名。在 增加域名 弹窗中添加域名。重要 配置域名时请输入带有协议头的域名地址,域名生效后,该域名下的目录与页面均将同时生效。单击 确定,添加域名...
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射,来让被授予空间角色的RAM用户,拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限,但默认无生产权限,本文为您介绍预设角色权限基本情况、MaxCompute权限...
您可以在数据开发中创建SQL组件节点,利用这些组件快速构建数据处理节点,从而提高开发效率。本文将介绍如何引用和使用这些SQL组件。前提条件(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间...
DataWorks的ADB for MySQL节点可进行AnalyticDB for MySQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用ADB for MySQL节点进行任务开发的主要流程。前提条件(可选,RAM账号需要)进行任务开发的RAM账号已被添加至...
DataWorks为您提供多种MaxCompute节点,便于您根据需要开发不同类型的MaxCompute任务,并为您提供丰富的节点调度配置,帮助您灵活设置MaxCompute任务的调度,本文为您介绍创建并管理MaxCompute节点的通用操作指导。适用范围 进行MaxCompute...
当您的团队需要在DataWorks中进行协同开发时,面临着项目隔离、权限分配和计算资源管理的挑战。工作空间正是解决这些问题的核心单元,它通过提供一个独立的环境,让您能够清晰地组织开发任务、分配成员角色并绑定所需的计算引擎,从而确保...
开发节点 在SQL编辑区域开发任务代码,您可在代码中使用${变量名} 的方式定义变量,并在节点编辑页面右侧 调度配置 的 调度参数 中为该变量赋值。实现调度场景下代码的动态传参,调度参数使用详情,请参考 调度参数支持格式,示例如下。...
节点开发 在SQL编辑区域开发任务代码,您可在代码中使用${变量名} 的方式定义变量,并在节点编辑页面右侧 调度配置 的 调度参数 中为该变量赋值。实现调度场景下代码的动态传参,调度参数使用详情,请参考 调度参数支持格式,示例如下。...
开发节点 在SQL编辑区域开发任务代码,您可在代码中使用${变量名} 的方式定义变量,并在节点编辑页面右侧 调度配置 的 调度参数 中为该变量赋值。实现调度场景下代码的动态传参,调度参数使用详情,请参考 调度参数支持格式,示例如下。...
认证文件管理是DataWorks的核心安全功能,用于统一管理访问数据源的身份凭证。本文系统阐述了其上传、管理到引用的完整操作及应用场景,从而保障数据开发集成的安全与规范。
DataWorks的ADB for PostgreSQL节点可进行AnalyticDB for PostgreSQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用ADB for PostgreSQL节点进行任务开发的主要流程。前提条件(可选,RAM账号需要)进行任务开发的RAM...
个人开发环境开发任务 个人开发环境支持Python编程,如需使用个人开发环境编辑Python节点任务,详情请参见 个人开发环境。通过关联角色运行 节点 支持 配置节点关联角色,使用特定RAM角色运行节点任务,实现权限的细粒度控制和安全管控。
在DataWorks任务开发中,您可以通过创建CDH MR(MapReduce)节点处理超大规模的数据集。本文为您介绍如何在DataWorks中配置并使用CDH MR节点。前提条件 已创建阿里云CDH集群,并绑定至DataWorks工作空间。操作详情请参见 新版数据开发:...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建CDH集群,并注册至DataWorks。创建CDH相关节点并开发CDH任务前,您需要先将CDH集群注册至...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建CDH集群,并注册至DataWorks。创建CDH相关节点并开发CDH任务前,您需要先将CDH集群注册至...
DataWorks的CDH Spark SQL节点可进行CDH Spark SQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍如何配置及使用CDH Spark SQL节点。前提条件 已创建阿里云CDH集群,并绑定至DataWorks工作空间。操作详情请参见 新版数据...
通过DataWorks的Serverless Kyuubi节点,可基于 EMR Serverless Spark计算资源 进行Kyuubi任务的开发和周期性调度,以及与其他作业的集成操作。适用范围 计算资源限制:仅支持 绑定EMR Serverless Spark计算资源,需确保资源组和计算资源...
准备工作:开发Spark任务并获取JAR包 在使用DataWorks调度CDH Spark任务前,您需要先在CDH中开发Spark任务代码并完成任务代码的编译,生成编译后的任务JAR包,CDH Spark任务的开发指导详情请参见 Spark概述。创建CDH JAR资源 您可将任务JAR...
DataWorks的StarRocks节点可进行StarRocks任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用StarRocks节点进行任务开发的主要流程。背景信息 StarRocks是新一代极速全场景MPP(Massively Parallel Processing)数据库,...
在DataWorks任务开发中,您可以通过创建CDH MR(MapReduce)节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同...
DataWorks的Doris节点可进行Doris任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用Doris节点进行任务开发的主要流程。背景信息 Apache Doris是一个高性能、实时的分析型数据库,能较好地满足报表分析、即席查询、数据...
DataWorks的EMR Kyuubi节点可进行Kyuubi任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍如何配置使用EMR Kyuubi节点并进行数据开发。前提条件 已创建阿里云EMR集群,并注册EMR集群至DataWorks。操作详情请参见 新版数据...
开发节点 在SQL编辑区域开发任务代码,您可在代码中使用${变量名} 的方式定义变量,并在节点编辑页面右侧 调度配置 的 调度参数 中为该变量赋值。实现调度场景下代码的动态传参,调度参数使用详情,请参考 调度参数支持格式,示例如下。...
DataWorks的SAP HANA节点可进行SAP HANA任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用SAP HANA节点进行任务开发的主要流程。背景信息 SAP HANA是一个高性能的内存数据库和应用平台,结合了数据库、数据处理和应用...
Presto(即PrestoDB)是一款灵活、可扩展的分布式SQL查询引擎,支持使用标准的SQL查询语言进行大数据的交互式分析查询,DataWorks为您提供EMR Presto节点,便于您在DataWorks上进行Presto任务的开发和周期性调度。本文为您介绍使用EMR ...
DataWorks的SelectDB节点可进行SelectDB任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用SelectDB节点进行任务开发的主要流程。背景信息 SelectDB是基于Apache Doris打造的新一代多云原生实时数据仓库,聚焦于满足企业...
DataWorks的Redshift节点可进行Redshift任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用Redshift节点进行任务开发的主要流程。背景信息 Amazon Redshift是云平台的一种完全托管的PB级数据仓库服务。您无需对预置数据...
DataWorks的OceanBase节点可进行OceanBase任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用OceanBase节点进行任务开发的主要流程。背景信息 OceanBase是由蚂蚁集团、阿里巴巴完全自主研发的分布式关系型数据库,具有...
DataWorks的PolarDB MySQL节点可进行PolarDB MySQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用PolarDB MySQL节点进行任务开发的主要流程。背景信息 PolarDB MySQL版 是阿里巴巴自研的新一代云原生数据库,在计算...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。使用限制 仅支持使用 Serverless资源组(推荐)或独享调度资源组运行该类型任务。步骤一:创建EMR...
DataWorks的Lindorm Spark SQL节点可进行Lindorm Spark SQL任务的开发和周期性调度。本文为您介绍使用Lindorm Spark SQL节点进行任务开发的主要流程。背景信息 Lindorm 是基于云原生架构的分布式计算服务,支持社区版计算模型、兼容Spark...