常见的AIOps应用路径为：对监控的各种关键性能指标（KPI）行实时异常检测；对多维指标进行根源分析，快速下钻到异常维度和元素；基于应用拓扑和实时Trace，实现根因定位；结合CMDB、关联等、构建异常根因上下文，帮助快速修复问题等等。...
建议在故障应急协同群中推荐输出常见的快速恢复能力，并提供PC、手机端的一键快速执行能力，减少研发在各自平台上查找快恢入口的时间，也解决研发在外无电脑应急的尴尬局面。快恢能力主要包含人工梳理快恢预案、通用垂直专项快恢能力：人工...
对于未知的故障，您可以依据运维经验，编排出常见的排查路径，辅助快速故障定位。新建诊断决策树 登录高可用管理控制台。在左侧导航栏上，单击 故障诊断>诊断决策树。单击 新建，在 创建诊断决策树 页面，配置诊断决策树信息，包括决策树...
常见问题 本文介绍了以下常见问题：AHAS架构感知和故障演练探针limits配置 ECS探针安装常见问题 容器服务安装ack-ahas-pilot常见问题1 容器服务安装ack-ahas-pilot常见问题2 容器服务安装ack-ahas-pilot常见问题3 容器服务安装ack-ahas-...
CC API在调用时可能会遇到一些错误，遇到错误时以错误码为依据进行故障排除，本文为您介绍 常见错误码的解决方案。云产品运行时错误码 云产品API运行时返回的错误码。以下两个错误码为云产品运行时错误，如想获取云产品详细错误信息，需...
当节点的运行状态发生变化并持续一段时间后，ACK将判定该状态符合故障状态，存在节点故障。当发现节点故障时，ACK会根据故障原因触发对应恢复任务，并记录相应的事件。当恢复任务完成后，故障状态解除，节点恢复正常状态。当恢复任务完成后...
可能原因包含数据库服务进程异常退出、数据库节点宕机、数据库网络异常等，常见的容错策略如下：自动重启：当数据库实例异常终止或崩溃时，可以设置自动重启和恢复机制，自动重新启动数据库服务，并进行必要的数据恢复操作，以确保数据库的...
NVMe共享盘可以帮助应用实现高可用、高并发、可扩展的业务，可以帮助基于传统SAN的业务无缝上云，共享盘常见的应用场景包括数据共享、高可用故障转移、分布式缓存加速、机器模型训练等。数据共享 NVMe最简单的应用场景为数据共享，当数据被...
在数据库出现故障时，您可以利用一键诊断功能，快速诊断选定时间段内数据库性能情况，直观地查看数据库性能情况的全貌，快速定位异常原因。前提条件 实例为如下版本：RDS MySQL 8.0 高可用系列或集群系列 RDS MySQL 5.7 高可用系列或集群...
问题描述 使用 xfs_growfs 命令在线扩容CentOS 8系统盘时，出现以下错误信息。xfs_growfs:/dev/vda1 is not a mounted XFS filesystem 问题原因 新旧版本的 xfs_growfs 命令使用问题。新版的 xfs_growfs 命令后面的参数需要为文件系统挂载...
问题描述 在操作系统迁移时，出错提示“Deprecated XFS mount options present in FSTAB”。问题原因 待迁移的操作系统FSTAB表中存在已经弃用的XFS选项，这会导致迁移后无法正确挂载XFS文件系统，导致操作系统迁移失败。解决方案 远程连接...
丰富的故障场景 丰富的故障场景也是 AHAS Chaos 的一大特色，包括了以下场景：常见的基础设施资源例如CPU、内存、磁盘等。应用级别的故障注入，目前只支持 Java 应用，后续将陆续推出对于 NodeJs 和 C++ 的应用故障注入。云原生领域的演练...
容器服务平台提供网络诊断功能，帮助您诊断网络常见问题，例如Pod之间不通、集群到公网访问不通、公网到LoadBalancer不通。本文介绍网络诊断的基本原理、使用方式、以及如何针对常见网络不通的场景定位网络问题和使用网络诊断。重要 使用...
问题描述 将XFS文件系统挂载到ECS实例时，出现以下报错。mount:/mnt:wrong fs type,bad option,bad superblock on/dev/vdc1,missing codepage or helper program,or other error.问题原因 该磁盘是通过快照生成的，因此UUID与已有的磁盘...
本文介绍ASM的常见应用场景。流量管理 通过ASM，可以轻松实现基于配置的流量管理：将流量管理与基础设施管理分隔开来，并提供了许多独立于应用代码之外的流量管理功能，在部署规模逐步扩大的过程中帮助简化流量管理。管理 服务网格 的服务...
lvhdata xfs 50G 33M 50G 1%hana/data/dev/mapper/datavg-lvhlog xfs 10G 33M 10G 1%hana/log/dev/mapper/datavg-lvhshared xfs 20G 33M 20G 1%hana/shared/dev/mapper/sapvg-lvusrsap xfs 60G 33M 60G 1%usr/sap tmpfs tmpfs 799M 0 799M ...
mount:unknown filesystem type 'xfs' 问题原因 该问题可能是与initramfs的/boot 目录下缺少3.10.0-862.el7.x86_64内核的相关文件导致。对比正常实例，可能缺少以下文件。vmlinuz-3.10.0-862.el7.x86_64 initramfs-3.10.0-862.el7.x86_64....
ext*文件系统：sudo e2fsck-n/dev/vdb1 xfs文件系统：sudo xfs_repair-n/dev/vdb1 btrfs文件系统：sudo btrfsck/dev/vdb1 不同文件系统的查询示例如下：ext*和xfs文件系统的示例结果如下所示，当文件系统状态为 clean，表示文件系统状态...
如果查询结果为 TYPE="xfs"，具体操作，请参见 修改xfs文件系统的UUID。修改ext2/ext3/ext4文件系统的UUID 说明 本示例以/dev/vdb1为例，您需要根据自己的设备名修改相关命令。远程连接ECS实例。具体操作，请参见 使用VNC登录实例。运行...
能够解决 多源监控集成：支持多个常见监控系统集成，简单配置即可完成集成对接。报警统一处理：所有报警进行集中降噪处理，抑制收敛，避免报警风暴。事件闭环管理：对报警生成事件，进行全生命周期管理，不遗漏重大事件。体系化故障闭环...
计算巢为用户提供了丰富的软件选择，覆盖常见的软件类型，包括：数据库等基础软件，CRM等应用软件，以及制造、医疗等行业软件。已经有超过600家软件服务商入驻计算巢，超过100款可独立部署的软件。用户可以通过计算巢推荐服务列表、阿里云...
注：扩展XFS文件系统的前提是需要先挂载分区，否则会提示[$Partition]is not a mounted XFS filesystem 错误。xfs_growfs[$Partition]扩容GPT分区 执行如下命令，查看待扩容分区的磁盘信息。fdisk-l[$Device]系统返回类似如下，确认该磁盘...
容器智能运维平台 提供一键故障诊断能力，包括节点诊断、Pod诊断、Service诊断、Ingress诊断、内存诊断、网络诊断，可以辅助您定位集群中出现的问题。本文介绍如何在ACK集群中使用集群诊断功能。前提条件 已创建Kubernetes托管版集群。具体...
常见的做法包括基于HTTP Header和Cookie，将特定请求或用户灰度至新版本，降低故障影响范围。金丝雀发布：通过调整流量权重比例，逐步将流量从老版本切换至新版本。同时对老版本服务进行缩容，对新版本进行扩容，相比蓝绿发布资源利用率较...
ext4文件系统 sudo resize2fs<逻辑卷路径>以扩容逻辑卷lv01（路径为/dev/vg_01/lv01）为例，则命令为：sudo resize2fs/dev/vg_01/lv01 xfs文件系统 sudo xfs_growfs<逻辑卷挂载点>以扩容逻辑卷lv01（挂载点为/media/lv01）为例，则命令为：...
无法连接 网络连接异常或目标实例出现故障导致无法连接。监控异常 DAS数据库网关（DBGateway）出现异常，详情请参见 DBGateway常见问题。连接正常 目标实例已正确连接至DAS控制台，您可以使用集群管理、实例监控和告警服务等功能，详情请...
重要 标准版最快可在4分钟左右准确发现故障并切换 故障发现时间：GTM可保障故障发现时间，目前默认的健康检查配置可以在故障的4分钟左右准确发现故障并切换；全网生效时间：GTM无法保障全网的最终生效时间，因受限于全国各地运营商的TTL...
执行 blkid 命令，查看文件系统类型，从而针对不同的文件系统类型，执行不同的检查和修复命令：对于EXT3、EXT4文件系统：fsck-y/dev/vdb1 对于XFS文件系统：xfs_repair/dev/vdb1 确认修复成功后，若您是数据盘文件系统问题，请忽略此步骤。...
保护组进入增量复制状态后，您就可以进行故障切换操作。本文介绍故障切换和恢复的基本操作。故障切换类型 数据同步后切换 该故障切换会先停止保护组中被保护的实例，并且等到所有被保护的实例停止后再进行最后一轮数据同步，等待数据同步...
保护组进入增量复制状态后，您就可以进行故障切换操作。本文介绍故障切换和恢复的基本操作。故障切换类型 数据同步后切换 该故障切换会先停止保护组中被保护的实例，并且等到所有被保护的实例停止后再进行最后一轮数据同步，等待数据同步...
保护组进入增量复制状态后，您就可以进行故障切换操作。本文介绍故障切换和恢复的基本操作。故障切换类型 数据同步后切换 该故障切换会先停止保护组中被保护的实例，并且等到所有被保护的实例停止后再进行最后一轮数据同步，等待数据同步...
保护组进入增量复制状态后，您就可以进行故障切换操作。本文介绍故障切换和恢复的基本操作。故障切换类型 数据同步后切换 该故障切换会先停止保护组中被保护的实例，并且等到所有被保护的实例停止后再进行最后一轮数据同步，等待数据同步...
更新故障通知：在故障处理的过程中，当故障进展发生变化，包括进度更新、影响恶化、故障等级变化、原因明确、根因定位等场景下，可更新故障过程中的内容，并在 故障详情 页点击更新故障通知，选择需要的故障通告类型，并最终确认发出故障...
2.故障应急场景群：事件升级故障后，群内推出 故障处理中 消息卡片，如果满足自动生成故障场景群的需求（下文详细介绍创建故障场景群逻辑），故障场景群内同时推出 故障处理中 消息卡片。本群故障消息卡片包含按钮：签到、签到记录、应急...
故障管理概述 故障管理是源于ITIL的一个概念，在IT企业或者互联网企业进行故障管理的目的是当生产环境出现重大宕机时尽快恢复正常的服务运营，将组件失败对业务所造成的负面影响降到最低，从而确保满足事先与业务客户之间所约定的服务级别...
故障复盘规范 故障复盘作为故障体系中的重要一环，整体复盘流程包括故障处理过程、改进分析、故障定责，基于包含标准化的复盘SOP、对应预防action推荐、问责管理机制，全面地回溯线上故障的发生，产出故障复盘报告和改进措施，避免故障重复...
故障通告及更新 基于7x24监控值班工作特性，对于业务异常达到故障等级时，以用户定制的（语音、短信、IM）的方式在约定时间内将故障影响信息以及处理进展通知给对应的接收人/组，并持续更新直至故障结束。故障应急协同群 故障发生后，可以...
重要 故障发现时间：GTM可保障故障发现时间，目前默认的健康检查配置可以在故障的4分钟左右准确发现故障并切换；DNS切换同步时间：GTM无法保障全网的最终生效时间，因受限于全国各地运营商的TTL缓存设置以及网络环境不同，所以全网生效时间...
本文主要介绍什么是故障。定义 在日常运营中，无论什么原因导致业务服务中断、服务品质下降或用户服务体验下降的现象，称为故障，但不包括用户侧环境或用户自身操作引起的问题。“用户体验下降”说明故障的核心要关注用户感受，可通过客服...
故障管理体系是围绕故障全生命周期采取的一系列控制流程，包括故障基础数据管理（故障等级定义、应急场景监控覆盖、服务组&值班表管理、故障订阅管理），故障发现（7*24监控值班、智能基线告警），故障应急协同（故障通告及更新、故障应急...