社区工作职责和任务

_相关内容

创建IMPALA_SQL任务

运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。资源配置 您可为当前计算任务配置调度资源组,计算任务调度时将...

创建GAUSSDB_SQL任务

运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。资源配置 您可为当前计算任务配置调度资源组,计算任务调度时将...

HTTP任务

支持AI Agent和工作流场景。HTTP任务接入方式 Kubernetes环境接入 Kubernetes环境接入是指将Kubernetes集群中的Service与应用进行绑定,以支持HTTP任务的调度。绑定完成后,该应用下的所有任务可共享对应Service关联的Pod资源。当用户在...

创建SHELL任务

运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。资源配置 您可为当前计算任务配置调度资源组,计算任务调度时将...

创建SPARK_SQL任务

运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。资源配置:任务生成的实例调度所消耗的资源,不同资源组之间资源...

创建HIVE_SQL任务

运行配置 您可以根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。资源配置 您可以为当前计算任务配置调度资源组,计算任务调度...

迁移Batch批量计算到分布式工作流Argo集群

将离线任务和批量计算任务迁移到 工作流集群 可以帮助您降低运维复杂度、节约运行成本。背景信息 工作流集群 是无服务器Serverless工作流引擎,基于Kubernetes集群构建,托管了开源 Argo Workflows。Batch批量计算相关概念 作业(Jobs)...

管理导入任务

导入任务是EMR StarRocks Manager中的一个功能模块,旨在降低用户在导入任务管理方面的运维成本,提供可视化的导入任务管理能力。本文为您介绍如何使用EMR StarRocks Manager管理导入...该页面为您展示该导入任务的任务详情和任务Profile。

创建SPARK_ON_YARN任务

运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。资源配置 您可为当前计算任务配置调度资源组,计算任务调度时将...

变量管理

通过变量的复用,可以在SQL开发、批任务开发及工作流等场景中简化代码的维护调整,进而提高开发效率。本文将为您详细介绍如何创建变量及其在不同场景下的具体使用方法。背景信息 变量由变量名变量值组成。其中,变量名是您自定义的名称...

任务中心

在任务中心管理的任务和支持的操作具体如下:RDS MySQL 任务中心 管理的任务 任务 高性能本地盘 云盘 创建实例 支持 支持 参数调整 支持 支持 配置变更 支持 支持 重启实例 支持 支持 克隆实例 支持 支持 内核小版本升级 支持 支持 账号...

大数据实时计算性能调优服务

本项目计划、实施时间和工作量评估是基于本SOW约定范围制定的,如果项目范围发生调整,双方应依照本工作说明书附件一《项目变更流程与项目变更控制申请单》中规定的程序评估对项目价款、计划和工作量的影响,并在签署《项目变更控制申请单...

XXL-JOB引擎版本

版本2.2.0 变更时间 变更类型 功能描述 2025年05月20日 新功能 支持Dify工作任务,可以 管理调度Dify工作流。执行列表新增耗时Tokens消耗。版本2.1.3 变更时间 变更类型 功能描述 2025年04月18日 问题修复 修复 fixed_delay 时间类型...

One Time

可视化运维:SchedulerX的一次性任务和其他任务一样,具有可视化的界面,方便您观测和查询。并且支持在调度时间到达之前修改任务参数,支持失败自动重试等功能。通过API创建一次性调度任务 在应用程序的 pom.xml 文件中添加OpenAPI的SDK...

如何接入日志服务

如果将SchedulerxLog配置在rootLogger里,会让所有日志都通过SchedulerX采集,不仅搜索速度较慢,而且业务日志和任务调度日志会混在一起,难以排查问题。配置如下:?xml version="1.0"encoding="UTF-8?Configuration status="off"Appenders...

功能简介

因此,用户在构建数据应用时,只需从解决实际某一业务场景出发,组合多种类型的计算节点来配置计算节点工作流程,从而快速解决业务工作流并依托数据开发的跨平台多异构任务的一键运行上线能力,极大的提高了工程效率。节点模式 节点模式...

创建PYTHON计算任务

运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。资源配置 您可为当前计算任务配置所属资源组,计算任务运行时将...

创建PYTHON计算任务

运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。资源配置 您可为当前计算任务配置所属资源组,计算任务运行时将...

数据开发

因此,用户在构建数据应用时,只需从解决实际某一业务场景出发,组合多种类型的计算节点来配置计算节点工作流程,从而快速解决业务工作流并依托数据开发的跨平台多异构任务的一键部署上线能力,极大的提高了工程效率。节点模式 节点模式...

创建数据库SQL任务

运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。资源配置 任务生成的实例调度所消耗的资源,不同资源组之间资源...

任务中心

任务中心对数据资源平台中的数据同步、数据开发、标签加工等任务和实例进行运维管理。数据资源平台各模块发起的任务,如数据同步、数据开发、标签加工等,都会发到对应的任务流,不同的任务来源通过业务类型区分。根据业务流程,任务流中...

概述

任务中心对 数据资源平台 中的数据同步、数据开发、标签同步、质量评估等任务和实例进行运维管理。数据资源平台 各模块发起的任务,如数据同步、数据开发、标签加工 等,都会发到对应的任务流,不同的任务来源通过业务类型区分。根据业务...

DataWorks数据集成

您可在工作空间中协作完成工作流,共同维护数据和任务等,因此使用DataWorks前需要先创建工作空间。说明 如果您想通过子账号创建数据集成任务,可以赋予其相应的权限。详情请参见 创建RAM用户 AnalyticDB PostgreSQL版 准备:进行数据导入...

任务管理

任务管理 功能概述 1)任务内优先级 任务类型:单任务和MA任务 单任务:一次性单一渠道批量触达用户 MA任务:带有流程逻辑的多渠道触达用户 2)优先级取值和代表含义:1~10(从高到低,1是最高,10是最低),不参与(默认)配置了优先级的...

研发链路透视

数据资产治理支持您按照研发链路(数据同步和数据开发)查看和分析工作空间内DataWorks离线同步任务和DataWorks调度任务运行情况及资源消耗详情。便于您了解当前花费较多的资源类别、识别运行失败的任务,合理调整消费结构,发现阻塞任务...

操作记录

您可以通过操作记录页面,查看应用分组、调度任务和流程的操作记录。操作步骤 登录 分布式任务调度平台,在顶部菜单栏选择地域,在左侧导航栏,单击 操作记录,在 操作记录 页面选择目标命名空间,查看操作记录。说明 操作记录 页面仅记录...

如何将任务调度应用优雅下线

spring.schedulerx2.httpServerPort=52333 下线模式 描述 等待全部(WAIT_ALL)(推荐)该模式下,待所有已接收的任务和子任务执行完成后,应用才退出。等待运行中(WAIT_RUNNING)该模式下,应用在退出时,将等待已分配线程并在处理中的...

HTTP任务

支持AI Agent和工作流场景。HTTP任务接入方式 Kubernetes环境接入 Kubernetes环境接入是指将Kubernetes集群中的Service与应用进行绑定,以支持HTTP任务的调度。绑定完成后,该应用下的所有任务可共享对应Service关联的Pod资源。当用户在...

群组任务

说明 此为历史版本功能,后续会逐步...在群组中可以查看所有任务和完成情况,便于对群组中的各项事务进行全面的了解和梳理。个人任务:个人任务包含了“我”创建的和指派给“我”的任务。如某条任务中与“我”无关则在个人任务无法查看到。

任务管理高级配置参数说明

负载最优策略:由主节点自动感知worker节点各自负载情况,适用子任务和worker机器处理耗时有较大差异的场景。说明 客户端版本为1.10.14及以上。分发速率 可视化MapReduce MapReduce 子任务分发速率,支持每秒或每分钟分发多少个子任务。子...

可视化MapReduce模型

负载最优策略:由主节点自动感知Worker节点的负载情况,适用于子任务和Worker机器处理耗时有较大差异的场景。说明 客户端版本为1.10.14及以上。子任务单机并发数 即单机执行线程数,默认为5。如需加快执行速度,可以调大该值。如果下游或者...

批量任务编排

3、管理工作流(数据工程师)编排并行任务后,您可以通过Argo CLI或Argo控制台进行任务的提交管理。基础使用:如果您是新手用户,可以参见 创建工作流 快速体验如何在ACS集群中创建一个工作流。进阶使用:针对特定业务场景,例如动态DAG ...

设置消息通知

媒体处理中的任务分为同步任务和异步任务,异步任务无法实时接收到任务结果。如果您需要获取异步任务执行状态,如获取转码任务是否成功、智能审核任务是否已完成等,您可以设置消息通知监控管道或工作流内任务状态的变化情况。本文介绍在...

批量任务编排

3、管理工作流(数据工程师)编排并行任务后,您可以通过Argo CLI或Argo控制台进行任务的提交管理。基础使用:如果您是新手用户,可以参见 创建工作流 快速体验如何在ACK集群中创建一个工作流。进阶使用:针对特定业务场景,例如动态DAG ...

任务管理

管理任务 可以在 全局设置 任务管理,组织任务 页签中管理 Flow 提供的任务和用户创建的组织任务。根据需求可以对组织任务进行关闭、编辑、删除,而流水线Flow 提供的任务只能做开启或者关闭,如果任务关闭后,在组织成员编排流水线时,将...

无锁结构变更

新建无锁结构变更任务 本文以 OceanBase 社区企业版 OMS 为例,演示场景为将表 student 中的列 birth 类型修改为 datetime。该示例所使用的项目名称为 odc_4.2.0,数据库名称为 odc_test,表名称为 student。在 SQL 窗口中,编辑 SQL ...

基线管理

若您需保障重要任务能按时完成,则可使用基线管理功能将重要任务添加至基线并设置承诺时间,系统将根据任务运行情况计算基线任务的预计完成时间。当系统判断基线任务可能无法在承诺时间前完成时,将发出告警。本文为您介绍如何创建管理...

添加属性设置任务

在 创建任务 页面,单击以下参数名称右侧的帮助图标,根据页面提示,配置任务和作业。任务配置 参数 说明 任务名称 输入符合规则的任务名称。可自定义。任务类型 选择类型:设备批量属性设置任务。任务描述 输入该任务的用途等信息,便于您...

添加自定义任务

在 创建任务 页面,单击以下参数名称右侧的帮助图标,根据页面提示,配置任务和作业,单击 完成。任务配置 参数 说明 任务名称 输入符合规则的任务名称。可自定义。任务类型 选择类型:自定义任务。任务描述 输入该任务的用途等信息,便于...

通过识别任务扫描敏感数据

任务类型 数据安全中心针对敏感数据扫描提供两种识别任务:系统默认任务 自定义识别任务。系统默认任务 完成资产授权后,DSC 会使用 主用识别模板 为每一个资产实例创建一个扫描任务,此类任务统称为系统默认任务。主用识别模板 的详细...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用