本文为您介绍如何通过E-MapReduce（简称EMR）控制台，快速创建一个基于开源Hadoop生态的数据湖分析集群，并通过集群客户端提交经典的WordCount作业。WordCount是Hadoop中最基础且经典的分布式计算任务，用于统计海量文本中的单词数量，广泛...
操作说明 登录“费用与成本控制台”，进入 成本管理 成本优化 页后，单击 集群成本分析与优化-容器服务ACK，即可进入云原生场景下的集群成本分析与优化分析页。说明 首次进入时，出现开通页，您可以确认功能对应的使用场景说明，单击 立即...
集群总览分析 在集群总览信息中，您可以获取以下图表信息：集群健康度评分趋势图 集群分区均衡度趋势图 集群分区数量分布饼图 集群请求数趋势图 总表数、总分区数、总节点数、平均负载、总数据量、总读请求数、总写请求数、总请求数 ...
本文介绍ES集群负载不均问题的分析方法及解决方案。问题现象 节点间磁盘使用率差距不大，监控中节点 CPU使用率或load_1m 呈现明显的负载不均衡现象。节点间磁盘使用率差距很大，监控中节点 CPU使用率或load_1m 呈现明显的负载不均衡现象。...
当您在EDAS的K8s集群中创建、部署或扩容应用后，可以跳转到应用详情页面查看变更状态，同时还可以在变更记录中查看和分析应用部署失败的常见原因。查看部署失败的执行结果 在执行完应用部署操作后，返回 应用总览 页面。在 应用总览 上方，...
说明 如果集群监控提供的指标比Kibana监控多，在实际使用时，建议将集群监控和Kibana监控结合起来分析集群监控详情。采集接口差异性：Kibana监控指标依赖于Elasticsearch API，而集群监控部分节点级别的指标（例如，CPU使用率、load_1m、...
集群的计算资源请求、使用率趋势 ⑥ 使用场景：分析集群中的水位、容量是否存在资源浪费。弹性等场景下，集群水位会产生周期性波动，可供您规划资源容量。趋势图含义：Y轴：整体集群的计算资源总容量（Capacity），代表整体集群能承载的...
功能 序号 描述 Pod资源请求量排行 ① 统计分析集群中Pod资源请求量大的应用，用于容量规划等场景。Pod资源使用率排行 ② 查看资源利用率低的Pod应用副本，供您查看闲置应用。Pod资源闲置排行 ③ 资源闲置率为Pod未被使用的计算资源占已...
本文介绍如何使用成本洞察功能分析集群资源的风险性。前提条件 已开启成本洞察功能。具体操作，请参见 启用成本洞察功能。已开启阿里云Prometheus监控。具体操作，请参见 使用阿里云Prometheus监控。资源配置不合理有哪些风险？Kubernetes...
阿里云EMR针对不同业务场景提供了数据湖集群、数据分析集群、实时数据流集群、数据服务集群四类预定义业务场景。若您的业务需集成特定组合的组件，您可创建自定义集群，灵活组合EMR提供的组件，打造适配业务特性的大数据平台。本文将为您...
集群实例性能监控支持的下钻维度为 集群实例 租户 节点。操作步骤 进入 OceanBase 管理控制台。在左侧导航栏中，单击 实例列表。在实例列表中找到目标集群实例，单击集群实例名称，进入 集群实例工作台。在集群实例工作台页面的左侧导航栏...
步骤三：基于MaxCompute实时分析Hadoop集群数据 基于已创建的MaxCompute项目以及Hadoop集群表数据，再创建External Project，用于Hadoop集群，并映射至已创建的MaxCompute项目。后续可通过映射的MaxCompute项目对External Project进行数据...
集群维度成本分析 命名空间维度成本分析 应用维度成本分析 集群维度成本分析 筛选维度 功能 序号 描述 集群成本统计选项 ① 集群成本统计指标选项。优惠后实际账单成本（默认）：成本统计时，统计集群中所有云资源的应付金额。原价账单成本...
集群状态正常，但负载过高。常见排查方式、异常原因及解决方案如下。排查方式 常见异常原因 解决方案 查看磁盘使用率监控 GET_cat/allocation 命令 GET_cluster/allocation/explain 命令 查看日志 磁盘使用率达到85%磁盘使用率达到85%，...
考虑因素说明 考虑因素 描述 相关文档 业务场景 阿里云EMR预定义了四类业务场景，分别为数据湖集群、数据分析集群、实时数据流集群和数据服务集群。此外，系统还支持自定义集群，您可以根据具体的业务选择相应的业务场景。选择业务场景 ...
启动实时检测与分析 集群日报 通过集群的健康检查功能，可以了解当前集群的健康状态，并根据改进建议对集群进行调整，以保持健康的状态。查看集群日报与分析 Gateway 创建Gateway集群 Gateway集群不仅支持负载均衡和实现安全隔离，也能够...
集群计算资源的请求&使用率趋势图 使用场景：用于分析集群中的水位、容量是否存在资源浪费的情况。当出现弹性等场景时，集群水位会产生周期性波动，此图表可供您规划资源容量。趋势图含义：Y轴：整体集群的计算资源总容量（Capacity），...
全部 查看集群网络拓扑 成本分析支持应用视角大盘 成本分析支持应用视角的大盘监控，提供应用维度费用趋势、相关性分析，以及应用成本优化建议与策略。全部 启用成本洞察功能 云原生AI套件新功能上线 云原生AI套件管理员运维指南发布。支持...
结果分析 集群内流量保持功能开启前后，网格中流量的调用链路示意图如下。类型 说明 未开启集群内流量保持功能 在Bookinfo应用中，Productpage组件会调用Reviews服务以获取书评信息。在浏览器访问 http://{入口网关IP}/productpage1 时，会...
资源画像通过分析集群历史资源的使用数据来推荐容器的资源规格，不仅能有效降低为容器配置Request和Limit的复杂度，还能实现容器粒度的资源规格推荐，提高集群资源的利用率。更多信息，请参见 资源画像。管理命名空间与配额 在多租场景下，...
资源画像通过分析集群历史资源的使用数据来推荐容器的资源规格，不仅能有效降低为容器配置Request和Limit的复杂度，还能实现容器粒度的资源规格推荐，提高集群资源的利用率。更多信息，请参见 资源画像。管理命名空间与配额 在多租场景下，...
与HPC集群对比 对比项 基因分析平台 HPC集群 成本投入 Serverless模式，支持从0到千万的样本分析需求，按需计费，精确到单样本。一次性购买基础设施，需要提前规划容量，成本压力大，不够灵活。运维管理 完全无服务计算，无需创建和管理...
ACK One多集群舰队支持全局成本分析功能。您可以开启各关联集群的成本洞察功能，并将其关联至ACK One舰队。关联后多集群舰队将汇总成本数据，提供多集群全局成本洞察功能，帮助您在多集群场景进行全局成本分析和成本优化。本文介绍如何开启...
分析器与管道 index.analysis.*自定义分析器、分词器、过滤器等，用于控制文本字段的分词规则。index.default_pipeline 插入文档时默认使用的数据管道，用于系统预处理数据（例如，格式转换、字段计算）。index.final_pipeline 文档插入后...
异常事件分析 异常事件分析面板展示了所有影响集群/实例健康状况的异常检查项。通过选择框可以筛选出对应等级的异常事件，异常级别说明如下。关注：当某些监控指标或系统行为指标达到一个可疑的状态，这可能意味着系统存在潜在风险，建议运...
AnalyticDB for MySQL 推出 一键诊断 功能，可针对指定时间段的集群运行状况发起诊断，结合监控数据、日志数据以及库表状态等信息进行联合分析，从集群的资源水位、负载变化、查询SQL、算子、存储等多方面评估集群的健康状况，帮助您提高...
v 命令对集群健康进行排查分析。功能概览 智能运维系统支持以下功能：开启或关闭智能运维服务 详情请参见 开启智能运维服务、关闭智能运维服务。查看集群概况 查看集群的基本健康状况。诊断集群健康状况 诊断集群，并产生诊断报告。支持...
本文以一个简单的流程为您介绍如何使用实时数仓Hologres 共享集群（MaxCompute BI加速版）能力。前提条件 阿里云账号注册，详情请参见 阿里云账号注册流程。实名认证，详情请参见 个人实名认证 或 企业实名认证。开通Quick BI，详情请参见 ...
检索分析服务Elasticsearch版支持原地变更和蓝绿变更两种集群变更方式。本文介绍这两种集群变更方式的详细信息。说明 通常情况下，后端会根据您的变更操作类型自动选择合适的变更方式。当变更操作类型为重启或升配集群时，您可以按照业务...
集群负载不均问题的分析方法及解决方案。通过手动迁移shard均匀分布热点数据的解决方案。如果开启了自动创建索引功能，建议启用 索引生命周期管理，或者通过ES API脚本删除过期的索引。建议及时清理小索引，小索引同样会占用ES堆内存。
容器服务 Kubernetes 版 对K8s多种组件日志和审计提供采集和分析能力，包括API Server、Ingress、管控平面组件和K8s关键Events事件等，以便在出现安全问题或集群问题时进行根因分析和溯源。使用集群审计功能 在Kubernetes集群中，API ...
PolarDB PostgreSQL版（兼容Oracle）的一键诊断融合了DAS部分功能，您可以通过空间分析，来查看目标集群的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况和空间异常诊断等。注意事项 空间分析功能最多分析20000张表。...
PolarDB MySQL版 的一键诊断融合了DAS部分功能，您可以通过空间分析，来查看目标集群的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况、空间碎片、空间异常诊断等。注意事项 空间分析功能最多分析20000张表。在数据...
当Elasticsearch（ES）集群的CPU、内存、磁盘等资源使用率持续处于高位，或查询与写入性能无法满足业务需求时，可通过扩展节点数量、提升节点规格、增加磁盘空间、新增节点类型等方式升级集群配置，恢复服务稳定性。升配前须知 重要 升配...
您可以调用DescribeClusterLogs接口检索集群的日志数据，以便在出现集群问题时进行根因分析和溯源。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 ...
您可以调用DescribeClusterLogs接口检索集群的日志数据，以便在出现集群问题时进行根因分析和溯源。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 ...
集群暴露分析支持自动执行和手动执行方式：自动执行暴露分析：接入K8s集群后，云安全中心默认每日凌晨自动全量同步集群信息，并且自动对所有已接入集群执行暴露分析。手动执行暴露分析：在 容器资产 页面的 集群 页签，单击目标集群 操作 ...
GetDoctorHDFSDirectory 获取HDFS特定目录分析结果 通过EMR Doctor获取集群HDFS特定目录数据分析结果，目录不超过5级。ListDoctorJobsStats 批量获取任务运行汇总数据 通过EMR Doctor批量获取任务基本运行汇总信息。ListDoctorReports 批量...
集群 Nginx Ingress 日志监控 开关：收集ACK集群中Nginx Ingress组件日志，并提供数据分析大盘。配置完成后单击 确定。说明 Prometheus服务接入容器集群后，数据接入大概需要1~2分钟左右，所以监控大盘刚开始不显示数据。步骤二：查看监控...
成本分析需要集群的监控数据和费用数据，监控数据在开启后3 min内即可开始采集，费用相关的数据需要从集群开启成本分析后的第二天08:00才有数据显示。为什么命名空间的费用相加与实际的费用账单不相等？命名空间的费用是通过成本估算来进行...