性能采集负责对实例进行实时性能数据采集，涉及数据库的多项性能指标信息、规格配置信息、实例运行会话信息等。决策中心模块则会根据当前性能数据、实例会话列表数据等信息进行全局判断，以基于根因的全局自治，例如可通过SQL限流来解决...
帮助客户制定满足客户业务系统的大数据平台迁移改造技术方案，快速高效的实现数据/作业的迁移，保证数据的一致性。以解决以下客户痛点：对云计算平台产品不熟悉，对大数据迁移没有设计经验，缺乏相应的迁移方案设计能力。数据迁移整体流程...
采集数据常见的错误类型请参见 日志服务采集数据常见的错误类型。默认情况下，一个日志文件只能匹配一个Logtail配置。如果同一份日志需要被采集多份，请参见 如何实现文件中的日志被采集多份。将企业内网服务器日志采集到日志服务，请参见 ...
您可以将主机的配置数据（CPU型号、内存大小等）和指标数据（CPU使用率、内存利用率等）接入到全栈可观测应用中，进行可视化分析和展示。重要 目前该功能处于维护状态，阿里云可观测监控Prometheus版主机监控支持更多更实时指标接入，建议...
日志服务开放了大量的OpenAPI，支持用户通过OpenAPI门户的阿里云SDK等方式进行集成，同时为了更好的采集和使用数据，日志服务自研了日志服务SDK和日志服务CLI，如满足嵌入式/智能设备轻量化采集日志等场景。OpenAPI集成 日志服务 提供日志...
本产品（大数据开发治理平台 DataWorks/2024-05-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能...
DataWorks支持多种数据源类型，覆盖了主流数据库、大数据存储及消息队列等。为保障数据安全，标准模式的工作空间支持数据源环境隔离功能。您可以为开发环境和生产环境分别配置独立的数据源。开发环境数据源仅用于节点的开发与调试，而生产...
云安全中心基于云原生部署能力，提供从数据采集、识别、分析到响应和处置的自动化安全流程，并支持统一的安全管控。该系统利用多日志关联和上下文分析，实时检测并防御命令执行、代码执行、SQL注入、数据泄露等常见风险，覆盖业务漏洞入侵...
CloudLens for ALB支持一键开启数据采集功能，用于采集ALB访问日志。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建应用型负载均衡实例。具体操作，请参见 创建应用型负载均衡。已创建日志服务Project和Logstore。具体...
DataWorks 数据地图是一个集中的数据资产管理与发现平台。它帮助您全面了解企业内的数据状况，并像使用搜索引擎一样，快速、准确地找到您需要的数据。核心功能包括：数据总览：提供数据资产的统计视图，帮助您快速洞察数据现状。全局关键字...
对象存储OSS：将查询结果以指定格式（如CSV、Parquet）导出至阿里云对象存储OSS（Object Storage Service）空间，适用于大数据量归档或与其他云产品集成的场景。首次使用时，您需要为DataWorks进行授权，以允许其访问您的OSS资源。请在 ...
本文介绍如何使用阿里云Prometheus监控ECS主机，以及配置主机监控组件、指标采集、告警的方案，以实现符合您所需的指标采集业务场景。方案概览 使用Prometheus监控ECS主机大致分为4步，如下：ECS接入主机监控：接入后，会自动安装各类开源...
本文介绍如何使用阿里云Prometheus监控ECS主机，以及配置主机监控组件、指标采集、告警的方案，以实现符合您所需的指标采集业务场景。方案概览 使用Prometheus监控ECS主机大致分为4步，如下：ECS接入主机监控：接入后，会自动安装各类开源...
本文介绍如何使用阿里云Prometheus监控ECS主机，以及配置主机监控组件、指标采集、告警的方案，以实现符合您所需的指标采集业务场景。方案概览 使用Prometheus监控ECS主机大致分为4步，如下：ECS接入主机监控：接入后，会自动安装各类开源...
DeleteConsumeProcessor 删除消费处理器 删除消费处理器 机器学习 API 标题 API概述 ListAiTools 列举可观测 AI 工具能力 获取可观测提供的智能工具列表，包括可观测各业务 Copilot 相关能力 CallAiTools 调用可观测AI工具能力 调用可观测 ...
本文档将指导您如何在我们的移动应用中正确使用性能体验SDK，实现全域数据采集与性能监控。准备阶段 重要 在使用与验证前请务必仔细确认您已经根据 基础集成 文档正确集成性能体验SDK。为了方便您进一步验证相关功能，请将SDK内的Log打开。...
常见问题 Q：为什么 RDS MySQL 和 PolarDB MySQL版 数据库实例搜索功能的日志列表中，有些SQL语句实际有数据返回，但扫描行数显示为0？A：数据库实例开启了 query_cache_type。日志列表中，SQL语句的扫描行数统计的是在InnoDB引擎层扫描的...
ACS默认开启的GPU设备监控因部分监控指标仅支持单进程独立采集，会与NVIDIA Nsight等性能分析工具产生冲突。这会导致在T4、A10、L20(GN8IS)、P16EN卡型上无法正常采集数据，产生 CUPTI 或 DCGM 错误，通过临时暂停部分监控指标采集可解决该...
DescribeEngineVersion 查询实例的大版本和小版本信息 查询云数据库 Tair（兼容 Redis）实例的大版本和小版本信息，同时可查询到小版本的发布日志信息。DescribeRoleZoneInfo 查询节点和所属可用区信息 查询云数据库 Tair（兼容 Redis）...
背景信息 OBCloud Exporter 是云数据库 OceanBase 提供的一款数据库数据处理工具，可通过该工具完成 OceanBase 数据库的鉴权和数据获取。再结合本地 Prometheus 工具对数据库进行相应的监控。下文通过系统直接部署和通过 docker 部署两种...
CloudLens for CLB 支持一键开启数据采集功能，用于采集CLB访问日志、配置审计日志和云监控事件。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建CLB实例。具体操作，请参见 创建实例。已为CLB实例配置7层监听，即配置HTTP...
为了统一管理阿里云容器服务ACK集群或自建 Kubernetes 集群在多环境、多集群场景下的日志采集配置，避免因手动配置导致的不一致、效率低下及变更不可追溯等问题，可采用Kubernetes 的自定义资源（CRD）方式定义采集配置。通过该方式，无论...
什么是Prometheus实例 Prometheus实例是阿里云 可观测监控 Prometheus 版 服务提供的管理Prometheus数据采集和数据存储分析的逻辑单元，每个 Prometheus实例 提供对应的Prometheus数据采集配置、时序数据库实例、Dashboard监控大盘和报警...
介绍：数据迁移 实践：数据迁移最佳实践 常见问题：数据上传下载常见问题 大规模数据迁移 MaxCompute提供MMA（MaxCompute Migration Assist）迁移工具支撑大规模数据迁移。开发与分析 数据类型 MaxCompute支持三种数据类型版本，为您介绍各...
什么是Prometheus实例 Prometheus实例是阿里云 可观测监控 Prometheus 版 服务提供的管理Prometheus数据采集和数据存储分析的逻辑单元，每个 Prometheus实例 提供对应的Prometheus数据采集配置、时序数据库实例、Dashboard监控大盘和报警...
什么是Prometheus实例 Prometheus实例是阿里云 可观测监控 Prometheus 版 服务提供的管理Prometheus数据采集和数据存储分析的逻辑单元，每个 Prometheus实例 提供对应的Prometheus数据采集配置、时序数据库实例、Dashboard监控大盘和报警...
Logstash是开源的服务器端数据处理管道，能够同时从多个数据源采集数据，然后对数据进行转换，并将数据写入指定的存储中。云原生数据仓库 AnalyticDB MySQL 版 完全兼容MySQL，您可以将Logstash Input插件支持的任一数据源中的数据写入 ...
验证与故障排查：配置完成后，验证日志是否成功采集，如遇采集无数据、心跳失败或解析错误等问题，请参考 常见问题排查。准备工作 在采集日志前，需规划并创建用于管理与存储日志的Project和Logstore。若已有可用资源，可跳过此步骤，直接...
验证与故障排查：配置完成后，验证日志是否成功采集，如遇采集无数据、心跳失败或解析错误等问题，请参考 常见问题排查。步骤一：安装LoongCollector LoongCollector 是阿里云日志服务推出的新一代日志采集 Agent，是 Logtail 的升级版，...
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
本章节展示如何将BI工具与大数据平台集成，构建高效的数据可视化解决方案。使用Power BI连接EMR Serverless Spark并进行数据可视化
日志服务SDK已经实现日志服务大部分功能，包括日志采集、创建索引、查询和分析、数据加工、日志消费、日志投递管理、告警、定时SQL等。若您在SDK调试中发现未实现功能，建议您升级到最新版本SDK重试或关注后续SDK版本更新。使用日志服务SDK...
数据采集 功能权限 功能权限名称 权限说明 数据采集_埋点验证访问 可以访问「数据采集-埋点验证」，使用埋点验证功能并可以查看验证报告 注意：必须要有至少一个「数据采集」的“数据权限”才能正常访问。数据权限 数据权限名称 权限说明 ...
SDK能采集到的设备标识越少，对统计数据的准确性和稳定性的负面影响越大。自定义工具类注册：import com.quick.qt.commonsdk.QtConfigure;请在设置收数域名之前，调用SDK预初始化函数之前，先调用采集工具类注册函数/如果不需要对设备标识...
优势 对于前端开发者而言，Chrome浏览器中的性能分析可能是最为直观的性能数据采集，下图记录了Chrome浏览器加载网页每个事件的时间戳和持续时间，包括JavaScript函数执行、网络请求和渲染过程等。这些数据为前端开发者寻找网页性能瓶颈与...
连接到profile数据库再次进行数据采集：SELECT take_sample();查看采集数据：SELECT*FROM show_samples('server');示例结果如下：sample|sample_time|sizes_collected|dbstats_reset|bgwrstats_reset|archstats_reset-+-+-+-+-+-1|2024-02-...
连接到profile数据库再次进行数据采集：SELECT take_sample();查看采集数据：SELECT*FROM show_samples('server');示例结果如下：sample|sample_time|sizes_collected|dbstats_reset|bgwrstats_reset|archstats_reset-+-+-+-+-+-1|2024-02-...
使用场景 交互式分析：利用Kyuubi可以构建企业级分析平台，用于对大数据进行交互式可视化分析，支持常见的计算框架。Kyuubi支持JDBC和ODBC接口，您可以直接通过SQL或通过BI工具来访问Kyuubi并高效地运行查询。Kyuubi可以在用户级别缓存后台...
产品为客户提供资产建模、数据采集、数据分析、设备监控和数据分析五大产品能力：资产建模：定义设备资产标准模型，管理设备资产数据 提供设备资产全维度数据建模工具 快速构建实体资产数据模型 对设备资产进行全生命周期管理 为数据应用...
云原生数据库PolarDB 提供以下相关API接口。地域 API 描述 DescribeRegions 该接口...DescribeDBClusterMonitor 该接口用于查询 PolarDB 集群的监控数据采集频率。ModifyDBClusterMonitor 该接口用于修改 PolarDB 集群的监控数据采集频率。