在Dataphin的实时计算任务列表为您展示了实时任务的基本信息及相关管理操作选项，方便您查看创建的实时任务并进行管理。本文为您介绍实时计算任务列表支持的管理功能。实时 计算任务列表入口 在Dataphin首页，单击顶部菜单栏 研发。默认...
在Dataphin的实时计算任务列表为您展示了实时任务的基本信息及相关管理操作选项，方便您查看创建的实时任务并进行管理。本文为您介绍实时计算任务列表支持的管理功能。实时 计算任务列表入口 在Dataphin首页，单击顶部菜单栏 研发。默认...
发布管理是客户端升级新版本的配置后台，支持用户创建多任务、多维度的升级配置。关于此任务 Android 发布管理的功能包括以下方面：增加升级资源并提示二维码的下载地址。创建、修改新版本资源包的任务。对已添加的发布包创建多种类型的...
方法一：在周期任务列表模式下，单击相应任务 操作 列的 测试。如果当前页面非列表模式，您可单击页面中间的 图标返回列表模式。方法二：在DAG模式下，右键单击相应实例的DAG图，单击菜单中的 测试。如果当前页面非DAG图模式，您可单击相应...
本文为您介绍如何基于Dataphin构建Shell类型的离线计算任务。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，进入 新建SHELL任务 对话框。编写并运行代码。在 新建SHELL任务 对话框，配置参数...
本文为您介绍如何基于Dataphin构建HADOOP_MR类型的离线计算任务。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面。按照下图操作指引，进入 新建HADOOP_MR任务 页面。编写并运行代码。在 新建HADOOP_MR任务 对话框...
本文为您介绍如何基于Dataphin构建Shell类型的离线计算任务。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，进入 新建SHELL任务 对话框。编写并运行代码。在 新建SHELL任务 对话框，配置参数...
本文为您介绍在绑定了星环TDH计算引擎的项目下如何创建INCEPTOR_SQL任务。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面。按照下图操作指引，进入 新建INCEPTOR_SQL任务 对话框。编写并运行代码。在 新建INCEPTOR...
本文为您介绍如何基于Dataphin构建Spark SQL任务类型的离线计算任务。前提条件 项目的Hadoop计算源的Spark SQL服务配置已开启Spark SQL任务。更多信息，请参见 创建Hadoop计算源。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认...
本文为您介绍在绑定了AnalyticDB for PostgreSQL计算引擎的项目下如何创建ADB_PG_SQL任务。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面。按照下图操作指引，进入 新建ADB_PG_SQL任务 对话框。编写并运行代码。...
调度类型 选择任务的调度类型：周期任务：自动参与系统的周期性调度。手动任务：需要手动触发任务的运行。选择目录 选择任务所存放的目录。若未创建目录，您可按照下图操作指引，填写目录名称和选择目录所在位置进行创建。描述 填写对任务...
调度类型 选择任务的调度类型：周期任务：自动参与系统的周期性调度。手动任务：需要手动触发任务的运行。选择目录 选择任务所存放的目录。若未创建目录，您可按照下图操作指引，填写目录名称和选择目录所在位置进行创建。描述 填写对任务...
优化各场景下任务强制停止的原因说明。修复任务指定机器都掉线时，开启故障机器自动转移功能无效的问题。任务管理 2022-03-15 变更类型 功能描述 相关文档 新增 概览页功能更新：增加每分钟触发汇总图表。增加汇总数据链接跳转。增加在线...
本文为您介绍如何基于Dataphin构建HIVE_SQL类型的离线计算任务。背景信息 HIVE_SQL计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据的场景。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面。...
本文为您介绍如何基于Dataphin新建数据库SQL任务。使用限制 支持存储过程的创建及执行，但是Dataphin系统将不做语法校验及解析。执行数据库SQL需要获取数据源的执行权限，不支持表级权限校验。更多信息，请参见 申请、续期和交还数据源权限...
数据安全卫士可以全方位、多角度、周期性地评估数据资产的安全性，并生成安全报告。根据安全报告，您可以从某些方面进行修复或优化，从而提升数据资产的安全性。本文介绍在数据安全卫士创建扫描任务、安全模板的操作步骤。前提条件 待扫描...
本文为您介绍如何基于Dataphin新建数据库SQL任务。使用限制 支持存储过程的创建及执行，但是Dataphin系统将不做语法校验及解析。执行数据库SQL需要获取数据源的执行权限，不支持表级权限校验。更多信息，请参见 申请、续期和交还数据源权限...
阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测，本次公测带来了全新的可视化功能，兼容开源XXL-JOB任务，支持一次性任务，融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下，...
本文为您介绍如何基于Dataphin新建SPARK_JAR_ON_HIVE类型的任务。背景信息 SPARK_JAR_ON_HIVE任务中引用到的JAR和PYTHON文件需要提前创建，因此您在资源管理中先上传JAR和PYTHON文件，然后在SPARK_JAR_ON_HIVE任务中引用。具体操作，请参见...
本文为您介绍如何基于Dataphin新建IMPALA_SQL类型的离线计算任务。前提条件 创建IMPALA_SQL任务需在Hadoop计算源中开启Impala任务。具体操作，请参见 创建Hadoop计算源。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 ...
本文为您介绍在离线计算引擎MaxCompute下如何创建MAX_COMPUTE_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据场景。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面...
本文为您介绍在离线计算引擎MaxCompute下如何创建MAX_COMPUTE_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据场景。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面...
发布管理是客户端升级新版本的配置后台，支持用户创建多任务、多维度的升级配置。关于此任务 iOS 发布管理的功能包括以下方面：增加升级资源并提示 App 的下载二维码（仅限 企业分发）。创建、修改新版本资源包的任务。对已添加的发布包...
本文为您介绍如何基于Dataphin新建SPARK_JAR_ON_MAX_COMPUTE类型的任务。背景信息 SPARK_JAR_ON_MAX_COMPUTE任务中引用到的JAR和PYTHON文件需要提前创建，因此您在资源管理中先上传JAR和PYTHON文件，然后在SPARK_JAR_ON_MAX_COMPUTE任务中...
单个任务添加至基线 单击目标周期任务 操作 列的 更多>添加基线监控。批量添加任务至基线 勾选多个周期任务，在底部菜单栏选择 操作>添加基线监控。管理基线 您可在基线管理页面根据 责任人、工作空间、基线名称、优先级 等条件进行精确...
在 任务管理 页面，单击目标任务 操作 列下的 更多，然后单击 重刷任务。在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。示例重刷配置如下：当前时间为...
在 任务管理 页面，单击目标任务 操作 列下的 更多，然后单击 重刷任务。在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。示例重刷配置如下：当前时间为...
停止训练任务 当任务配置错误、耗时过长或与其他任务产生资源冲突时，您可以在 分布式训练任务 列表中，单击目标任务 操作 列下的 停止，停止正在运行的任务。克隆训练任务 如果您已经创建了一个训练任务并对其进行了详细的配置，您可以在...
在该应用的任务管理页面依次在 中优先级任务、低优先级任务 和 高优先级任务 的 操作 列，单击 运行一次。观察执行结果。由于中优先级任务运行的时候，队列中时空的，所以中优先级直接被执行。中优先级任务执行完成后，高优先级任务会抢占...
支持的操作系统 操作系统名称 版本 Alibaba Cloud Linux 3.2104 64位 2.1903 LTS 64位 2.1903 64位快速启动版 CentOS CentOS 8.5 CentOS 7.8 CentOS Stream 8 CentOS 6.10 Ubuntu Ubuntu 20.04 64位 Ubuntu 18.04 64位 Ubuntu16.04 32位 ...
本文介绍如何通过应用管理功能创建应用（任务分组）、测试该应用的连接机器、为RAM用户进行分组授权等操作。创建应用 在创建调度任务前，您需要先创建应用。步骤一：基本配置 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏...
任务中心功能将对异步任务进行中整体调度，包括但不限于各个功能下的导出、导入等。该功能的入口固定在系统的右上角“任务中心”。在任务中心中可以对执行成功的任务进行导出的结果下载或者对导入的进度查看。还可以对执行失败的任务查看...
导入迁移源信息后，SMC控制台会自动生成迁移源记录，您需要在控制台为迁移源创建操作系统迁移任务，并完成操作系统的迁移。说明 关于操作系统迁移的更多信息，请参见 操作系统迁移（Linux）和 操作系统迁移（Windows）。前提条件 已导入...
2.2 DAG任务 作业中的多个任务之间可以有 DAG 依赖关系。即前面的任务运行完成后,后面的任务才开始运行。3.任务实现 这两种任务是在提交的 Job 中指定相关字段实现的，下面以 Python SDK 为例给出实现方式，代码的完整程序见快速开始。3.1 ...
周期任务是指调度系统按照调度配置自动定时运行的任务。您可以在 运维中心>周期任务 页面查看当前工作空间下的定时调度的任务列表及生产环境调度任务配置详情，并管理周期任务。背景信息 周期任务的创建、发布、运行、暂停调度、下线等任务...
任务360功能从任务的重要基础信息、任务对应的治理项问题状态、任务关联的基线列表及基线执行情况、任务实例运行情况信息、用户对任务做的治理操作等多个维度辅助您对任务进行360全景信息了解。使用限制 仅阿里云主账号和拥有 ...
上游任务对当前任务执行的影响如下：上游任务是否为成功状态，决定当前任务是否执行 节点依赖关系设置后，默认当前任务与当前任务依赖的上游存在数据依赖（即上游任务未执行，将导致当前节点依赖的上游数据未产出，当前节点执行会产生数据...
相关操作 操作 说明 查看同步任务 在任务列表中，单击目标同步任务 操作 列的 更多，选择 查看，可查看同步任务详细内容。修改同步任务 在任务列表中，对于未运行的同步任务，单击 操作 列的 更多，选择 修改，可对同步任务进行修改。删除...
相关操作 操作 说明 查看同步任务 在任务列表中，单击目标同步任务 操作 列的 更多，选择 查看，可查看同步任务详细内容。修改同步任务 在任务列表中，对于未运行的同步任务，单击 操作 列的 更多，选择 修改，可对同步任务进行修改。删除...
CancelAutoSnapshotPolicy 取消一个或者多个文件系统的自动快照策略 取消一个或者多个文件系统的自动快照策略。DescribeAutoSnapshotPolicies 查询已创建的自动快照策略 查询已创建的自动快照策略。DescribeAutoSnapshotTasks 查询自动快照...