每个阶段分别对网络提出了不同的能力要求：数据采集与预处理：就近数据源端提升数据采集效率并节约采集流量成本、全球内网支撑数据回传和聚集速度、支持多种数据标注工具安全接入 模型训练：构建全球、多云统一算力资源池、提供高吞吐数据...
在Service Mesh中，不同的服务可能需要采集不同的可观测性数据，因此需要支持针对网格Waypoint与网关Pod分别定义采集配置规则，并统一标准化采集配置规则，以便更好地支持云原生应用的可观测性。可观测性在云原生应用中扮演着非常重要的...
安全网络：数据控制、身份认证等，保障数据传输与模型调用安全，构建端到端可信算力服务 算网协同的阶段网络架构 数据采集与预处理：就近数据源端提升数据采集效率并节约采集流量成本、全球内网支撑数据回传和聚集速度、支持多种数据标注...
配置参数 说明 示例值.metadata.name 日志采集配置资源名，在当前ACS集群内唯一。test-stdout.spec.project 可选配置，Project名称。可自定义，推荐使用 k8s-log-ACS集群ID 命名。k8s-log-c326bc86*.spec.logstore 必选配置，Logstore名称...
配置参数 说明 示例值.metadata.name 日志采集配置资源名，在当前ACS集群内唯一。test-stdout.spec.project 可选配置，Project名称。可自定义，推荐使用 k8s-log-ACS集群ID 命名。k8s-log-c326bc86*.spec.logstore 必选配置，Logstore名称...
2025年01月 功能名称 功能描述 新增资源关系功能 资源关系功能允许查看任一资源和其他资源的关系，包括：哪些资源的ID可作为本资源的输入。本资源的输出可作为哪些资源的输入。2024年11月 功能名称 功能描述 ROS架构编辑器支持 Terraform ...
在使用LoongCollector进行数据采集时，可能会遇到采集异常问题。本文将介绍排查采集异常问题的流程，以及一些常见场景下的处理示例。采集异常问题排查指引 采集异常问题的成因复杂多样，且不同原因可能导致相同表象，甚至有时异常无法及时...
配置管理 配置管理指对网络设备、业务承载服务器、客户IoT资源的配置状态信息的采集和维护，主要包括硬件配置资料、状态数据、网元配置文件备份和巡检的管理。变更中心 业务开通场景管理中心，以自动化模板为原子操作的网络变更编排引擎，...
当DataWorks功能模块（如数据集成、数据服务、元数据采集、数据分析等）需要访问您的数据源时，部分数据源会通过白名单机制限制访问来源。为确保各功能模块的正常运行，您需要将对应模块的出口IP地址或网段加入数据源的白名单。背景信息 ...
背景信息 当多个Logtail采集配置匹配同一个文件时，会导致多倍的CPU、内存、磁盘IO和网络IO资源占用，将影响同一台服务器部署的其他服务性能，因此默认情况下，一个文件只能匹配一个Logtail采集配置。解决方案 将日志数据存储到不同...
方式 说明 全员 日志审计服务自动将资源目录下的所有成员纳入到采集名单中，并采集这些成员中已开启日志采集功能的云产品的日志。新增资源目录成员后，该成员自动被纳入采集名单中。移除资源目录成员后，该成员自动被移出采集名单。自定义 ...
该 Chart 除了核心的 LoongCollector 核心组件提供基础的数据采集能力外，还额外提供了以下组件：entity-collector:阿里云监控 2.0 容器洞察的核心组件之一（默认启用）集群拓扑采集:自动发现和采集 Kubernetes 集群中的各种资源实体信息 ...
调度资源 采集任务调度时将占用该资源组的资源配额，为了避免并发过高占用较多资源影响其他系统任务正常运行，全局所有租户创建的采集任务遵循统一的并发运行数，请合理分配调度资源。支持选择当前租户下创建的状态为 正常 的资源组。连接...
3650表示永久保留 logtailConfig:#Logtail配置 inputType:plugin#采集的数据源类型，file表示文本日志，plugin表示标准输出 configName:test-stdout#Logtail配置的名称，必须与资源名(metadata.name)相同 inputDetail:#Logtail配置的详细...
3650表示永久保留 logtailConfig:#Logtail配置 inputType:plugin#采集的数据源类型，file表示文本日志，plugin表示标准输出 configName:test-stdout#Logtail配置的名称，必须与资源名(metadata.name)相同 inputDetail:#Logtail配置的详细...
修改控制面日志采集配置。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中...
本文主要介绍了如何使用CloudLens for SLS对采集延迟问题进行分析和定位，并针对一些场景问题提供了告警语句的配置建议。采集延迟场景 采集延迟是指本地实时日志在较长时间后才被发送至 SLS，可能导致监控延迟、数据不全，影响问题发现和...
✅资源纳管 ✅资源迁移 ✅资源探查 ✅源标签 ✅源资源组 ✅源资源 ALIYUN:VPC:HaVip 无 ❌资源复制 ❌资源纳管 ❌资源迁移 ✅资源探查 ✅源标签 ✅源资源组 ✅源资源 ALIYUN:VPC:NatGateway 无 ✅资源复制 ✅资源纳管 ✅资源迁移 ✅资源...
资源确认 通过在线调研或者离线采集完成了 资源调研 后，需要进行资源确认操作，将调研/采集的资源导入CMH的资源清单中。调研/采集源端 进入资源清单的资源 AWS EC2,RDS,ELB,NAT,S3,ES,DocumentDB,KAFKA,ElastiCache for Redis HUAWEI ECS,...
通过使用工作空间，可以创建多个独立的资源环境，每个资源环境都可以拥有自己的对象集（如云服务、基础设施、服务端和前端应用、中间件等），每个组内的资源是相互隔离的，这可防止不同组之间的资源冲突，提高资源使用的安全性。...
产品简介 全域采集与增长分析(Quick Tracking)提供APP/小程序/H5/Web/IoT等数字应用终端的行为采集分析、私域标签画像、性能体验监控、隐私采集授权管理 等数据采集与洞察服务，助力企业实现全域数据采集、用户增长和体验提升。同时原始...
如何关闭日志服务/停止计费 若需终止日志服务的计费，需从数据采集和资源存储两方面操作：关闭日志采集：停止采集后，采集器将不再传输新日志。清理存储资源：删除日志服务中对应的Project 和 Logstore，确保删除所有关联资源，避免因存储...
EMR Doctor存储元数据采集会根据用户资源动态调整采集的资源，不会占用过多用户资源。EMR Doctor的任务采集使用Java探针技术，不会单独启动Java进程监控。采集使用异步方式，不会阻塞任务主进程，当采集造成的压力过大时，会自动丢弃采集...
LoongCollector是阿里云日志服务（SLS）推出的新一代日志采集 Agent，是 Logtail 的升级版。本文档指导您如何在 Kubernetes 集群中安装 LoongCollector，并提供了 DaemonSet 和 Sidecar 两种安装模式。准备工作 在安装前，请在集群节点上...
无 TrafficType String 否 是 采集的流量类型。取值：All：全部流量。Allow：访问控制允许的流量。Drop：访问控制拒绝的流量。RefreshOptions String 否 是 当资源栈更新时，数据源资源的刷新策略。有效值：Never（默认值）：更新堆栈时，...
查询指定代理集群的数据采集配置信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 ...
重要 对于通过自定义资源创建的采集配置，其修改只能通过更新相应的自定义资源来实现，在日志服务控制台上对采集配置的修改不会同步到自定义资源中。登录 容器服务管理控制台。在 集群列表 页面，单击目标集群名称，然后在左侧导航栏，选择...
在服务器上成功安装LoongCollector后，您还需要设置机器组，将服务器关联到日志服务指定资源中，随后进行LoongCollector采集配置，来定义数据的采集规则。并将采集配置手动绑定到机器组中，来实现下发采集规则到服务器上。核心概念与关系...
3.发现一些资源上报量大，且资源uri类似请求：可能接入了一些其它三方插件，通过资源加载的方式进行网络请求。这些插件在运行过程中发送请求，则会被当作资源大量上报。若无需监控其资源加载情况，可以对特定资源进行 SDK上报配置，以免...
为防止Logtail消耗过多服务器资源，影响其他服务运行，日志服务对Logtail采集性能做了限制。当您需要提升Logtail采集性能时，可以 设置Logtail启动参数。如何开启传输加速服务加速日志服务数据采集，请参考 采集加速。如果有重要日志需要...
方案优势 集中式日志记录 本方案提供了多容器集群日志的统一采集方法，包括开启集群审计日志、集群操作日志及业务日志以及统一采集的方法。通过统一日志采集，方便用户在一个可自定义、用户友好地产品控制面板做集群日志的日志分析、可视化...
在Service Mesh中，不同的服务可能需要采集不同的可观测性数据，因此需要支持针对网格代理与网关Pod分别定义采集配置规则，并统一标准化采集配置规则，以便更好地支持云原生应用的可观测性。可观测性在云原生应用中扮演着非常重要的角色，...
2.1.8 发布时间：2025-05-14 修复 修复旧版标准输出采集插件在容器停止情况下最后部分日志未采集完整问题。时序数据写入 Metricstore 优化。2.1.7 发布时间：2025-04-01 修复 修复 Linux 场景采集配置中路径为根目录时目录拼接不正确的问题...
CADT的异构云资源探查功能支持对第三方公共云服务商上的资源进行探查。目前支持的云服务商包括：AWS（国内/国际）、腾讯云和华为云。探查结束后，用户可以获取资源清单，并能够生成资源架构图。该服务提供两种使用方式：在线模式和离线模式...
Kubernetes环境下的采集方案 当企业应用部署在Kubernetes环境下，使用阿里云日志服务进行采集时请参考如下内容：Kubernetes集群容器日志采集：对于应用日志采集有两种方式，支持标准输出与文本日志类型，采集前请阅读 Kubernetes集群容器...
关于控制面日志采集的详细介绍，请参见 启用控制平面日志采集和日志告警（旧版）或 启用控制平面日志采集和日志告警（新版）。网格审计 是否 启用网格审计。网格审计功能可以帮助网格管理人员记录或追溯不同用户的日常操作，是集群安全运维...
关于控制面日志采集的详细介绍，请参见 启用控制平面日志采集和日志告警（旧版）或 启用控制平面日志采集和日志告警（新版）。网格审计 是否 启用网格审计。网格审计功能可以帮助网格管理人员记录或追溯不同用户的日常操作，是集群安全运维...
关于控制面日志采集的详细介绍，请参见 启用控制平面日志采集和日志告警（旧版）或 启用控制平面日志采集和日志告警（新版）。网格审计 是否 启用网格审计。网格审计功能可以帮助网格管理人员记录或追溯不同用户的日常操作，是集群安全运维...
模式 方式 说明 资源目录管理模式 全员 日志审计服务自动将资源目录下的所有成员纳入到采集名单中，并采集这些成员中已开启日志采集功能的云产品的日志。新增资源目录成员后，该成员自动被纳入采集名单中。移除资源目录成员后，该成员自动...
Logtail是日志服务提供的日志采集Agent，用于采集阿里云ECS、自建IDC或其他云厂商等服务器上的日志。本文介绍Logtail的采集流程、功能、优势、使用限制及配置流程等信息。Logtail多年来一直承载着阿里巴巴集团重要服务的数据采集。每天采集...