数据管理DMS离线集成是一种低代码的数据开发工具,您可以组合各类任务节点,形成数据流,通过周期调度运行达到数据加工、数据同步的目的。支持的数据库类型 MySQL:RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB...
在左侧菜单栏,选择 任务管理。创建或者编辑任务时,可在 定时配置 流程的 高级配置 中,指定日历 选择上一步导入的日历即可。修改日历 如果您需要订正日历,只需要重新导入日历即可,具有相同名称的日历(Name)将覆盖旧日历。
基础版 DataWorks资源组 通过DataWorks进行数据集成、数据开发、任务调度等任务时,需要消耗计算资源,您需要配套购买资源组,以确保后续任务的顺利运行。重要 首次购买用户会默认开通按量付费Serverless资源组。资源组名称:自定义 专有...
本文介绍任务管理中的高级配置参数。任务管理高级配置参数说明如下:参数 适用的执行模式 解释 默认值 任务失败重试次数 通用 任务运行失败自动重试的次数。说明 正在执行任务的机器重启,任务会变成失败状态,如果想立即重跑,可以配置该...
在请求时,InstanceParameters 参数可用于填充新的输入,以替换XXL-JOB控制台任务管理中的输入。执行成功后返回 JobExecutionId(任务执行ID)。根据 JobExecutionId(任务执行ID)查询状态和结果:GetJobExecution-获取任务执行的详细信息...
您可以通过客户端工具管理 DLC 中的任务和数据。本文介绍客户端工具提供的常用命令。客户端工具提供了用户认证等命令,命令列表如下。类别 命令 准备工作 自动补全(completion)用户认证(config)提交命令 提交TensorFlow训练任务...
该模块任务主要来源于:接口导入:您在“数据服务”模块开通的接口需要依赖客户源数据,而生成的数据开发任务。原始清单:您通过“全部任务 创建任务”上传的数据表而生成的数据开发任务。衍生清单:系统通过追溯您已导入表的血缘信息而...
当单个可用区发生故障,系统会通过资源冗余和任务自动故障转移(failover)机制,将任务切换至其他可用区,保障数据开发任务的连续性和稳定性。核心概念 概念 描述 Serverless资源组高可用 DataWorks Serverless资源组通过多可用区部署,在...
创建脚本任务 登录 分布式任务调度平台,在左侧导航栏的 任务管理 页面 创建任务。配置项中 任务类型 选择 脚本任务。步骤一:选择脚本语言 选择 脚本语言。当前支持的脚本语言类型:Shell、Python和Php。步骤二:执行命令 执行不同脚本...
在左侧导航栏的 任务管理 页面,单击目标任务操作列的 编辑,在 高级配置 中,通过 任务并发数 控制任务同时跑的并发数。当任务并发数设置为1,表示任务幂等执行。若上一次没跑完,下一次调度时间到了直接跳过执行。应用级别限流 如果您的...
持续集成/交付 GitLab:Git存储库管理工具,集成的CI/CD功能,支持版本控制和开发协作。Jenkins:开源的自动化服务器,支持执行CI/CD任务。编程语言与运行环境:Java、Python、Node.js、PHP 缓存与数据库:MySQL、Redis、Nginx 应用性能...
在 任务管理 页面,单击目标任务 操作 列下的 更多,然后单击 重刷任务。在 重刷任务 面板,设置 起止日期 和 数据时间,单击 确定。起止日期:指定重刷的日期区间。数据时间:指定重刷日期区间内的重刷时间。示例重刷配置如下:当前时间为...
在 任务管理 页面,单击目标任务 操作 列下的 更多,然后单击 重刷任务。在 重刷任务 面板,设置 起止日期 和 数据时间,单击 确定。起止日期:指定重刷的日期区间。数据时间:指定重刷日期区间内的重刷时间。示例重刷配置如下:当前时间为...
您可以基于DataWorks的Serverless资源组轻松完成模型部署,并直接在数据开发任务中调用模型,所有流量均通过PrivateLink建立的私网通道传输,确保数据全程不出域,从而有效保障数据安全性。2025-09-22 华东1(杭州)、华东2(上海)、华北2...
mppm 是 mPaaS 提供的 SDK 管理工具,可用于清理依赖缓存、安装依赖、生成必要初始化代码等功能。安装 mppm 工具 npm install@alipay-inc/oh-mpaas-cli-g 查看工具版本 mppm-version 目前工具版本为 v2.0.2。清除鸿蒙工程缓存 mppm clean ...
持续集成/交付 GitLab:Git存储库管理工具,集成的CI/CD功能,支持版本控制和开发协作。Jenkins:开源的自动化服务器,支持执行CI/CD任务。编程语言与运行环境:Java、Python、Node.js、PHP 缓存与数据库:MySQL、Redis、Nginx 应用性能...
endpoint=xxxx namespace=xxxx groupId=xxx appKey=xxx 请参见 任务管理,创建一个Golang类型任务。客户端接入 执行以下命令,拉取Go版本SDK。go get github.com/alibaba/schedulerx-worker-go@{最新的tag} 编写业务代码,实现 Processor ...
操作 访问级别 资源类型 条件关键字 关联操作 edas:ManageSchedulerxJobInstStop update*全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 JobId long 是 任务 ID,在控制台的任务管理页面中获取。92583 InstanceId long 是 运行实例 ...
testSchedulerx.defaultGroup JobId long 否 任务 ID,在控制台的 任务管理页面中获取。92583 返回参数 名称 类型 描述 示例值 object Schema of Response Code integer 接口状态码 200 Message string 附加信息。strategy is already ...
支持执行的操作限制:在Data Studio创建的数据质量监控规则,仅支持在数据开发运行,并执行修改、发布等管理操作。该规则也可在数据质量模块中查看,但不能触发调度运行,不允许执行相关管理操作。若修改数据质量监控节点中配置的监控规则...
testSchedulerx.defaultGroup JobIdList array 否 任务 ID 列表 long 否 任务 ID,在控制台的 任务管理页面中获取 99341 返回参数 名称 类型 描述 示例值 object Schema of Response RequestId string Id of the request 704A2A61-3681-...
您可以使用标签路由的方式实现任务的灰度调度,通过指定标签来指定每个任务调度到哪个...步骤三:配置标签路由 在左侧导航栏的 任务管理 页面,单击目标任务 操作 列下 更多 指定机器,指定类型 选择 标签,则该任务只会运行在指定的标签上。
在 任务管理 页面,单击创建的 sinaNews 任务名操作列下的 运行一次,等待任务执行成功,钉群即可定时接收AI分析总结的资讯。自建XXL-JOB Admin 在自建的XXL-JOB Admin控制台上创建任务,配置 JobHandler 为 sinaNews,任务参数可参见 任务...
操作 访问级别 资源类型 条件关键字 关联操作 edas:ManageSchedulerxJobModify update*全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 JobId long 是 任务 ID,在控制台的任务管理页面中获取 301 Namespace string 是 命名空间 ID,...
单击指定XXL-JOB实例,在左侧导航栏,选择 任务管理,单击指定任务操作列的 编辑。在 通知配置 界面配置对应任务级别监控报警信息。通知配置参数说明如下:配置项 描述 默认值 超时报警 任务执行超时是否发送告警。开启 超时时间 任务执行...
阿里云IoT Studio全新推出移动可视化开发工具。本文介绍通过使用该工具,快速搭建室内温度监控应用,监测室内温湿度和空气质量,并手动控制空调和空气净化器设备,调节室内温湿度和空气质量。背景信息 移动可视化开发是物联网应用开发(IoT...
如果只有一个Job,请直接使用任务管理。工作流支持跨应用编排,可以将不同应用下的任务进行编排。使用限制 当前只有Java任务支持数据传输,分布式Java任务请使用MapReduce模型进行数据传输。使用 指南 具体操作,请参见 流程管理。工作流上...
操作 访问级别 资源类型 条件关键字 关联操作 edas:ManageSchedulerxJobTrigger create*全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 JobId long 是 任务 ID,在控制台的任务管理页面中获取。92583 InstanceParameters string 否 ...
开发小助手 DevHelper 是基于 mPaaS 框架,整合了解决用户常见问题的开发工具集,该工具集随着 mPaaS 插件一起提供给开发者(点击快速了解开发小助手的功能)。在将开发工程接入 mPaaS 后或基于 mPaaS 插件创建工程后,即可将开发小助手接...
任务流 管理 进入任务编排运维中心 后,单击 任务流管理,可以 编辑 任务流、查看 DAG图、回滚 版本、查看任务流的 运行记录(可查看 调度触发 与 手动触发 的任务流的执行耗时趋势图)、批量 发布 或 下线 任务流、批量 冻结 或 解冻 任务...
操作 访问级别 资源类型 条件关键字 关联操作 edas:DeleteSchedulerxJobDelete delete*全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 JobId long 是 任务 ID,在控制台的 任务管理页面中获取。92583 Namespace string 是 命名空间 ...
操作 访问级别 资源类型 条件关键字 关联操作 edas:ManageSchedulerxJobEnable update*全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 JobId long 是 任务 ID,在控制台的任务管理页面中获取。92555 Namespace string 是 命名空间 ID...
操作 访问级别 资源类型 条件关键字 关联操作 edas:ManageSchedulerxJobDisable update*全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 JobId long 是 任务 ID,在控制台的任务管理页面中获取。92583 Namespace string 是 命名空间 ...
已 安装helm包管理工具。步骤一:下载SchedulerX helm 执行如下命令,下载SchedulerX helm包。wget https://schedulerx2.oss-cn-hangzhou.aliyuncs.com/helm/schedulerxchart-2.0.0.tgz 步骤二:安装schedulerx helm包 在分布式任务调度...
操作 访问级别 资源类型 条件关键字 关联操作 edas:ReadSchedulerxJobQuery list*全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 JobId long 是 任务 ID,在控制台的任务管理页面中获取 92583 GroupId string 是 应用 ID,在控制台的...
请参见 任务管理,创建一个Golang类型任务。客户端接入 执行以下命令,使用最新的tag拉取Go版本的SchedulerX SDK。go get github.com/alibaba/schedulerx-worker-go@{最新的tag} 或执行以下命令,拉取某个分支。go get github....
否 操作步骤 登录 分布式任务调度平台,在左侧导航栏,单击 任务管理。在 任务管理 页面,单击 创建任务。在 创建任务 面板,任务类型 选择 Java。执行模式 选择 MapReduce,在 高级配置 区域配置相关信息。配置项 说明 分发策略 说明 需...
工作流是一种数据处理流程自动化管理工具,它通过可视化拖拽方式整合多种类型的子任务节点,便捷地建立任务上下游关系,加速数据处理流程的搭建,有效提升任务开发效率。功能说明 DataWorks提供了两种类型的工作流:周期工作流、触发式工作...
在左侧导航栏选择 任务管理,然后单击 创建任务,关联应用选择步骤3创建的应用,任务类型选择HTTP。配置HTTP任务的请求域名、Path、请求方式、超时时间。配置HTTP任务的请求参数,根据需求填写Header、Query、Body。配置HTTP任务响应定义,...
新增组件 在 应用开发 页面的 开发工具 模块,单击 组件开发。在 组件开发个人组件 页签,单击 新建组件。在 新建组件 对话框,设置组件基本信息。参数 配置说明 组件名称 自定义组件名称。建议输入便于识别的名称。仅支持中文汉字、英文...