DataWorks的Redshift节点可进行Redshift任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用Redshift节点进行任务开发的主要流程。背景信息 Amazon Redshift是云平台的一种完全托管的PB级数据仓库服务。您无需对预置数据...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建CDH集群,并注册至DataWorks。创建CDH相关节点并开发CDH任务前,您需要先将CDH集群注册至...
DataWorks的SelectDB节点可进行SelectDB任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用SelectDB节点进行任务开发的主要流程。背景信息 SelectDB是基于Apache Doris打造的新一代多云原生实时数据仓库,聚焦于满足企业...
DataWorks的PolarDB MySQL节点可进行PolarDB MySQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用PolarDB MySQL节点进行任务开发的主要流程。背景信息 PolarDB MySQL版 是阿里巴巴自研的新一代云原生数据库,在计算...
DataWorks的OceanBase节点可进行OceanBase任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用OceanBase节点进行任务开发的主要流程。背景信息 OceanBase是由蚂蚁集团、阿里巴巴完全自主研发的分布式关系型数据库,具有...
开发节点 在CDH Spark节点编辑页面,执行如下开发操作。引用CDH JAR资源 打开创建的 CDH Spark 节点,停留在代码编辑页面。在左侧导航栏的资源管理中找到待引用资源,右键选择 引用资源。选择引用后,若CDH Spark节点的代码编辑页面出现#...
变量 变量是开发操作的重要组成部分,用于跨服务管理配置和敏感字段托管。支持定义项目级别的共享变量和服务级别的服务变量,共享变量支持在项目下的所有服务中以${shared.变量名} 形式引用,服务变量仅支持在当前服务中以${self.变量名} ...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。使用限制 仅支持使用Serverless资源组运行该类型任务。DataLake或自定义集群若要在DataWorks管理...
DataWorks的PolarDB PostgreSQL节点可进行PolarDB PostgreSQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用PolarDB PostgreSQL节点进行任务开发的主要流程。背景信息 云原生数据库PolarDB PostgreSQL版是阿里云完全...
角色 角色定义了一组开发操作权限,用于分配给应用开发者。魔笔平台目前内置了三种角色:Owner、Admin、Dev。权限组 权限组定义了一组使用资源的权限,用于分配给终端用户。魔笔平台目前内置了两种权限组:END_USER、TEST_USER。身份源 ...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,因此,创建节点前需先新建业务流程,操作详情请参见 创建业务流程。步骤一:创建PAI Designer节点 进入数据开发页面。登录 DataWorks控制台,切换至目标地域后,单击...
数据开发(DataStudio)基于业务流程执行不同引擎的具体开发操作,因此,创建节点前需先创建业务流程,操作详情请参见 创建业务流程。已创建SSH数据源。您需先通过创建SSH数据源远程访问您的SSH服务器,才可在SSH节点中进行SSH任务的开发和...
个人目录是为每位开发者提供的私有存储与开发空间,用于代码的管理和调试。您可以在此目录中创建和维护个人代码。个人目录说明 个人目录下的文件分为两类:我的文件和本地文件。以下为这两种文件类型的介绍:目录类型 存储目录 存储提供方 ...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。使用限制 仅支持使用 Serverless资源组(推荐)或独享调度资源组运行该类型任务。不支持EMR on ...
操作详情请参见 新版数据开发:绑定EMR计算资源。(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见 为工作空间添加空间成员。...
如果仅创建了一个SSH数据源,默认使用该数据源进行开发操作。说明 SSH节点仅支持使用JDBC连接串方式创建的SSH数据源。同时,为避免任务运行失败,请确保数据源与资源组网络连通。开发代码:简单示例 在SSH节点的代码编辑区域编写要执行的...
操作详情请参见 新版数据开发:绑定EMR计算资源。(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有 开发 或 空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见 为工作空间添加空间成员。...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,因此,创建节点前需先新建业务流程,操作详情请参见 创建业务流程。注意事项 PAI DLC节点每次运行完成,均会在人工智能平台PAI的分布式训练(DLC)平台生成一个新的DLC...
魔笔平台的错误检查功能旨在帮助开发者快速识别和修复开发过程中出现的各种错误,提升开发效率和代码质量。本文档将指导您如何使用错误检查相关功能。功能特点 魔笔平台的错误检查功能包含以下特点:自动实时检查:错误检查功能会随着您的...
IoT Studio平台,即物联网开发平台。您可以使用IoT Studio中的Web应用编辑器可搭建监控大屏,用于展示设备上报的数据。操作步骤 在物联网平台控制台左侧导航栏,选择 IoT Studio 项目管理,在 普通项目 下单击 新建项目,新建一个普通项目...
DataWorks的MySQL节点可进行MySQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用MySQL节点进行任务开发的主要流程。前提条件 已创建业务流程。数据开发(DataStudio)基于业务流程执行不同引擎的具体开发操作,因此...
数据模型设计空间 与 数据研发工作空间 的关系后,模型设计师在进行模型(汇总表、维度表、明细表、应用表)发布时,可以选择将模型物化到被关联的某一个研发空间,后续数据开发工程师即可在对应的工作空间进行数据开发操作。需要注意的是...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。在DataWorks资源组本地运行Python脚本时,代码需要调用第三方包,需要根据任务使用的资源组不同,...
数据开发(DataStudio)基于业务流程执行具体开发操作,因此创建节点前需先新建业务流程,详情请参见 创建业务流程。创建通用Shell节点 进入数据开发页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据...
背景信息 Raspbian是专门用于ARM卡片式计算机树莓派(Raspberry Pi)的操作系统。由于以下原因,安装并初始化系统后,您需要更新Raspbian系统。即Raspbian需要单独组建软件仓库,而不能使用Debian的仓库:Debian下所有的软件包都需要用...
进入 移动开发平台 mPaaS 控制台,选择目标应用,...系统 表示需要接收数据的客户端操作系统类型,默认选中 Android 和 iOS。版本区间 表示需要接收数据的客户端的应用版本区间,选填。有效期 表示本次推送的数据的最长有效期,默认 30 天。
龙蜥(Anolis)OS是OpenAnolis社区推出的完全开源、中立且开放的发行版,它支持多种计算架构,100%兼容CentOS 8软件生态,且兼容其他主流Linux发行版。Anolis OS镜像会定期更新,以提供最新的功能、安全补丁和性能优化。本文介绍Anolis OS...
如果您的任务不需要周期性运行,但又需要将任务发布至生产环境运行,则可以创建手动任务,本文为您介绍如何创建...您可在 开发记录 页签中找到目标版本,单击 操作 栏中的 还原 按钮,即可将该手动任务的代码和 调度配置 信息还原至目标版本。
核心能力 移动原生 多设备模拟:支持多个版本Android操作系统,支持配置不同屏幕尺寸和分辨率的移动设备,兼容最新应用。触摸交互:支持点击、滑动、长按等原生触摸操作,模拟真实用户手势行为。移动特性:支持重力感应、GPS定位、摄像头等...
集成操作是魔笔平台的重要能力,通过详述其核心功能,帮助用户高效进行集成操作的开发和使用。什么是集成 集成是魔笔平台的重要能力之一,开发者可以通过为资源创建多个集成,以实现与各种外部系统的无缝连接。这些集成可以包括但不限于SQL...
DataWorks提供的EMR(E-MapReduce)Hive节点支持云端大规模数据的批处理分析,能够操作存储在分布式系统中的数据,简化大数据处理流程并提高开发效率。在EMR Hive节点中,您可以使用类SQL语句读取、写入和管理大数据集,从而高效地完成海量...
操作步骤 在MaxCompute MR节点编辑页面,执行如下开发操作。开发MR代码 以下以一个简单示例为您介绍MaxCompute MR节点的使用:统计wc_in表中各字符串出现的次数,并将结果写入wc_out表。上传并提交、发布资源 mapreduce example.jar,操作...
与运维中心配合使用,面向各引擎(MaxCompute、Hologres、EMR等)提供可视化开发主界面,支持智能代码开发、多引擎混编工作流、规范化任务发布等能力,帮助您轻松构建离线数仓、实时数仓与即席分析系统,保证数据生产的高效稳定。...
与运维中心配合使用,面向各引擎(MaxCompute、Hologres、EMR等)提供可视化开发主界面,支持智能代码开发、多引擎混编工作流、规范化任务发布等能力,帮助您轻松构建离线数仓、实时数仓与即席分析系统,保证数据生产的高效稳定。...
您可以创建EMR(E-MapReduce)HIVE节点,通过类SQL语句读写、管理存储在分布式存储系统上的大数据集的数据仓库,完成海量日志数据的分析和开发工作。前提条件 已创建阿里云EMR集群,并注册EMR集群至DataWorks。操作详情请参见 旧版数据开发...
如果您的业务流程不需要周期性运行,但又需要将任务发布...您可在 开发记录 页签中找到目标版本,单击 操作 栏中的 还原 按钮,即可将该手动业务流程信息还原至目标版本。说明 还原时,系统会基于目标版本进行恢复,并生成一条新的版本记录。
绑定后,在不同工作空间模式下,DataWorks模块对应操作的数据源如下表所示:DataWorks模块 标准模式 简单模式 数据开发 操作开发环境数据源(实例,项目、数据库)操作生产环境数据源(实例,项目、数据库)运维中心 开发环境运维中心:...
周期实例 周期实例为您展示周期任务提交至调度系统后生成的实例列表,在列表内可进行实例的 DAG图、运行诊断、重跑 周期实例等更多操作。测试实例 测试实例列表为您展示周期任务执行测试操作后生成的测试实例,您可以查看测试实例的执行...
与此同时,阿里云推出的 多端低代码开发平台魔笔(Mobi),以其"可视化搭建+无缝云产品集成"的独特优势,正为企业提供快速、灵活的定制化智能会议系统开发方案。面对当前企业在智能会议系统方面的需求,主要体现在以下几个方面:个性化定制...
周期实例 周期实例为您展示周期任务提交至调度系统后生成的实例列表,在列表内可进行实例的 DAG图、运行诊断、重跑 周期实例等更多操作。测试实例 测试实例列表为您展示周期任务执行测试操作后生成的测试实例,您可以查看测试实例的执行...