类别 支持的异常场景 Pod诊断 Pod未被调度器处理。Pod不满足调度约束无法被调度。Pod已调度但未被Kubelet处理。Pod等待存储卷就绪。Pod被驱逐。Pod因节点磁盘空间不足被驱逐。Pod因节点内存不足被驱逐。Pod因节点磁盘索引不足被驱逐。Pod的...
全面消除偶发问题引发的风险 依托于限流、降级、熔断、隔离等能力，可以在出现偶发的流量洪峰和依赖服务出现异常时，有效地限流保护、削峰填谷、隔离故障、降级保护。低成本实现微服务敏捷开发 依托于开发环境隔离能力，可以在不增加物理...
MaxCompute Spark作业可通过 Local模式、Cluster模式 执行，此外，您也可在DataWorks中运行MaxCompute Spark离线作业（Cluster模式），以便与其它类型执行...Spark常见问题：您可了解Spark执行过程中的常见问题，便于出现异常时快速排查解决。
MaxCompute Spark作业可通过 Local模式、Cluster模式 执行，此外，您也可在DataWorks中运行MaxCompute Spark离线作业（Cluster模式），以便与其它类型执行...Spark常见问题：您可了解Spark执行过程中的常见问题，便于出现异常时快速排查解决。
订单拍下时间不会大于当天时间，也不会小于业务系统上线时间，一旦出现异常校验则报错。当业务复杂、规则繁多、规则配置的运行成本高时，您也可以根据数据资产等级进行监控。离线数据风险点监控 数据准确性 数据准确性是数据质量的关键，也...
当某台后端服务器健康检查出现异常时，ALB 会自动将新的请求分发到其他健康检查正常的后端服务器。当该服务器恢复正常运行时，ALB 会将其自动恢复到负载均衡服务中。健康检查为短连接，完成健康检查后连接将关闭。说明 如果后端服务器权重...
例如，当您提交一个包含多个任务的批量Job时，可能会出现多个任务全部调度成功或者都调度失败的情况。这种All-or-Nothing调度场景，就被称作Gang scheduling。ACK将一组需要同时调度的Pod称为PodGroup。您在提交All-or-Nothing作业时，可以...
例如，当您提交一个包含多个任务的批量Job时，可能会出现多个任务全部调度成功或者都调度失败的情况。这种All-or-Nothing调度场景，就被称作Gang scheduling。ACK将一组需要同时调度的Pod称为PodGroup。您在提交All-or-Nothing作业时，可以...
大型单体应用 适用于无法水平扩展的应用，通常是在Pod出现异常恢复时生效。容器垂直伸缩（VPA）CronHPA ACK开源的组件，主要面向应用资源使用率存在周期性变化的场景。周期性负载业务 适用于Deployment、StatefulSet等，实现了scale接口的...
异常情况监测：阿里云DCDN节点也可能会因为一些少量的异常情况（例如：运营商线路故障、数据中心机房故障等）而出现计划外的下线。对于这一类问题，阿里云DCDN产品的调度系统提供了对所有节点的探测监控，一旦发现节点异常下线，会实时把...
任务异常通知：监控任务出现异常（任务状态符合告警级别）时的实时告警通知。定期巡检报告：周期性对业务分组下所有任务的巡检报告输出（统计分析指标输出）。标准协议：按照标准化的参数结构要求输出消息订阅内容，由第三方应用依照自身...
任务异常通知：监控任务出现异常（任务状态符合告警级别）时的实时告警通知。定期巡检报告：周期性对业务分组下所有任务的巡检报告输出（统计分析指标输出）。标准协议：按照标准化的参数结构要求输出消息订阅内容，由第三方应用依照自身...
ECS实例网卡链路层状态 检查ECS实例网卡链路层是否出现异常。ECS实例未正常启动或网络配置有问题，您可以尝试通过重启实例进行恢复。ECS实例启动状态 检查ECS实例的boot操作是否能正常执行加载。ECS实例无法正常启动，您需要创建一个新的...
如果Pod status.reason为空（fail-fast一般不会出现该情况），可以查看Pod status condition，通过ContainerInstanceCreated的status确认调度状态。如果ContainerInstanceCreated为True，则表示ECI调度成功，是Sandbox创建异常。如果...
企业级分布式批处理方案 1.4.2，2022-03-07 变更类型 功能描述 相关文档 新增 分布式任务调度系统SchedulerX 2.0的日志服务，您不需要修改一行代码，只需要增加一个Log4j或Logback的配置，即可在控制台看到每次任务调度（包括分布式任务）...
如果在开启自动伸缩后停止管控节点，可能会导致自动伸缩决策失误从而出现一些异常问题。说明 如果管控节点需要关机或者重启，请在计算节点没有作业运行，并且自动伸缩已经释放了空闲节点后再进行操作。此时，建议您先关闭自动伸缩，在管控...
开启健康检查功能后，当后端某个ECS实例健康检查出现异常时，负载均衡会自动将新的请求分发到其他健康检查正常的ECS实例上，而当该ECS实例恢复正常运行时，负载均衡会将其自动恢复到负载均衡服务中。为了使健康检查功能正常运作，需要开启...
公共调度资源组、公共数据集成资源组、公共数据服务资源组 为共享资源池，高峰期可能出现实例等待无法调起、同步任务线程数分配不足、API调用执行异常及限流 的情况。如果需要保证并发任务运行，请购买 独享调度资源组，独享数据集成资源组...
1.2.3.1，2020-12-16 问题修复 修复客户端负载高把任务调度长连接打挂，导致任务无法继续调度的问题。1.2.2.2，2020-12-10 新特性 支持容器内采集容器真实CPU使用率。需要增加配置，以starter为例：spring.schedulerx2.enableCgroupMetrics...
注意事项 若在数据归档过程中选择了自动清理源库表数据，请注意源库表空间的预留情况，避免由于空间不足导致归档过程中出现异常。支持存储弹性模式和Serverless模式两种实例资源类型的 AnalyticDB PostgreSQL版。推荐您使用资源类型为...
即某任务在该时间内调度，会出现因执行时间较长，超出该时间段的情况。示例 配置0~6点和18~24点调度BUILD任务。SET ADB_CONFIG RC_CSTORE_BUILD_SCHEDULE_PERIOD=`0,6;18,24`;配置BUILD调度优先级 BUILD调度是按照单表某个一级分区新增数据...
由于作业Failover次数为独立计数，如果出现全局性异常导致大量Task同时Failover，Failover计数会按照发生异常的Task数量相应增加。操作步骤 进入Task快速重启配置入口。登录 实时计算控制台。在 Flink全托管 页签，单击目标工作空间 操作 ...
开启自动伸缩的节点池中出现如下异常情况。实例未加入到集群且超时。节点未ready且超时。为保证后续扩缩准确性，弹性组件以阻尼方式处理异常情况，在处理完异常情况节点前，不进行扩缩容。为什么节点自动伸缩组件无法缩容节点？请检查是否...
当集群的容量规划无法满足应用Pod调度时，您可以使用ACK提供的节点伸缩功能，自动扩缩节点资源以进行调度容量的补充。ACK目前提供 节点自动伸缩 与 节点即时弹性 两种弹性方案，后者相较于前者有着更快的弹性速度、更高的交付效率和更低的...
开启自动伸缩的节点池中出现如下异常情况。实例未加入到集群且超时。节点未ready且超时。为保证后续扩缩准确性，弹性组件以阻尼方式处理异常情况，在处理完异常情况节点前，不进行扩缩容。为什么节点自动伸缩组件无法缩容节点？请检查是否...
功能 描述 参考文档 负载感知调度 在调度过程中，通过参考节点负载的历史统计，将Pod优先调度到负载较低的节点，实现节点负载均衡的目标，避免出现因单个节点负载过高而导致的应用程序或节点故障。使用负载感知调度 使用负载热点打散重调度...
TERMINATE终止调度,实例终止调度后，不会被调度运行，如果下游未运行，则下游也会连带被挂起调度。SET_SUCCESS置为成功,会影响下游调度，主要用于用户手动刷数据后强制更新实例调度状态，使下游可以被调度运行。重跑下游操作请使用...
全部 自助诊断GPU节点问题 ACK调度器支持IP感知调度和拓扑调度等功能 IP感知调度 当Pod调度到某节点上时，由于可用IP不足无法启动，该节点将被标记为缺少IP状态并被拉黑五分钟。IP感知调度可防止大量Pod由于IP不足而导致的启动失败问题。...
大部分场景下使用一个MapReduce分布式任务是可以解决的，但是如果由于报警规则的复杂程度不同而导致执行时间差异较大时，有可能出现一个报警子任务没有执行完而阻塞整个任务下次调度。所以，可以给每个报警规则配置一个定时单机任务。当...
本文为您介绍调度依赖的配置指引，避免因调度依赖配置有误导致数据异常，配置前建议先了解此内容。背景信息 DataWorks上任务的调度依赖是指调度场景下节点间的上下游依赖关系。在DataWorks中，上游节点任务运行完成且运行成功，下游节点...
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。后续步骤 完成任务配置后，您可以对已创建的任务进行管理、执行加减表操作，或对任务...
常见的Pod异常状态及处理方式 Pod状态 Pod含义 解决方案 Pending Pod未被调度到节点上。Pod状态为Pending Init:N/M Pod包含M个Init容器，其中N个已经启动完成。Pod状态为Init:N/M（Init:Error和Init:CrashLoopBackOff）Init:Error Init容器...
出现添加自定义调度资源服务器失败，服务状态 一直显示为 停止，可能有以下原因：界面注册的机器名称和实际的机器名称不一致。确认方法如下：经典网络下（仅华东2支持），需要确保填写的主机名称和IP是在ECS上执行命令 hostname 和 ...
任务执行超时 问题现象 出现 TIMEOUT 错误。问题原因 客户端处理超时。解决方法 查看超时时间是否配置太小。建议根据任务的实际执行情况设置合理的超时时间。查看客户端错误日志 common-error.log。自定义参数不存在 问题现象 出现 javax....
常见的Pod异常状态及处理方式 Pod状态 Pod含义 解决方案 Pending Pod未被调度到节点上。Pod状态为Pending Init:N/M Pod包含M个Init容器，其中N个已经启动完成。Pod状态为Init:N/M（Init:Error和Init:CrashLoopBackOff）Init:Error Init容器...
强弱规则说明如下：如果设置强规则，红色异常报警并阻塞下游任务节点，橙色异常报警不阻塞。如果设置弱规则，红色异常报警不阻塞下游任务节点，橙色异常不报警不阻塞。规则来源 选择 内置模板。规则字段 选择 表级规则。规则模板 选择 表行...
强弱规则说明如下：如果设置强规则，红色异常报警并阻塞下游任务节点，橙色异常报警不阻塞。如果设置弱规则，红色异常报警不阻塞下游任务节点，橙色异常不报警不阻塞。规则来源 选择 内置模板。规则字段 选择 表级规则。规则模板 选择 表行...
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
调度资源大盘：为您提供全局任务资源分配、全局资源消耗、建议优化任务等，便于您及时获取资源调度状况、了解资源调度趋势，以判断资源的消耗及影响，从而作出预算准备、资源扩容或规格升级的决策。任务运维 任务运维依照调度时效分为周期...
等待资源耗时：当任务出现长时间等待资源的情况，您可以使用 运行诊断 功能定位当前任务运行时，哪些任务在占用资源，快速找到异常任务进行排查。运行时长过长：当任务运行时间与历史运行情况相比明显变长，您可参考以下场景进行处理。非...