该文档描述了云迁移中心CMH的AWS资源采集工具所采集您AWS资产的基础信息。简介 AWS资源采集工具使用AWS SDK 进行相关资源信息采集,当前SDK 版本为 AWS SDK for Java API Reference-2.17.180 Availability Zone 关于Availability Zone 采集...
resourceMode string 是 资源采集模式。如果配置 all 表示会采集账号下的全部实例到默认日志库,如果配置 attributeMode 表示会按照实例地域属性和资源标签进行过滤,如果配置 instanceMode 表示会按照实例 ID 进行过滤。all resourceTags ...
resourceMode string 资源采集模式。all regions array 实例所属的地域集合,支持通配符。string 地域 ID。cn-hangzhou instanceIds array 实例 ID 集合。string 实例 ID。your-test-bucket1 resourceTags object 资源标签。{"tag1":"value...
resourceMode string 资源采集模式。all regions array 实例所属的地域集合。string 地域 ID。cn-hangzhou instanceIds array 实例 ID 集合。string 实例 ID。your-test-bucket1 resourceTags object 资源标签。{"tag1":"value1","tag2":...
如果您需要快速复制一组资源及其依赖关系,可以通过创建资源复制场景来实现。背景信息 创建资源复制场景时,ROS会筛选指定范围内的所有资源并生成源节点,同时额外生成新节点,用于复制资源。ROS会根据新节点的内容创建资源栈,从而复制出...
如果您需要迁移一组资源及其依赖关系,可以通过创建资源迁移场景来实现。背景信息 创建资源迁移场景时,ROS会筛选指定范围内的所有资源并生成源节点,同时额外生成新节点,用于迁移资源。发起迁移后,ROS会根据新节点的内容创建资源栈,...
本文为您介绍如何创建资源场景,包括创建资源复制场景、资源纳管场景、资源迁移场景和资源探查场景。创建资源复制场景 登录 资源编排控制台。在左侧导航栏,单击 资源场景。在顶部菜单栏的地域下拉列表,选择资源场景所在的地域。在 资源...
是 acl:访问控制 资源ID、资源名称 云服务转组API:MoveResourceGroup 统一转组API:MoveResources-资源转组 ccn:云连接网 资源ID、资源名称、标签 intelligentrouting:智能路选 资源ID、资源名称、标签 flowlog:流日志 资源ID、资源...
资源所有者和资源使用者在同一VPC内创建的云资源默认私网互通。更多信息,请参见 共享VPC。共享VPC的具体实现细节如下:多账号共享同一个交换机 企业可将VPC的交换机在多账号间进行共享,不用为每个账号单独配置VPC,极大减少了VPC的使用...
2022-12 全部 支持资源组的云服务 2022年11月 功能模块 功能描述 发布时间 发布地域 相关文档 资源组 新增支持资源组的云服务:私网连接、数据传输服务DTS、全球加速和大数据开发治理平台DataWorks。2022-11 全部 支持资源组的云服务 资源...
资源类型 和 资源实例:可选采集粒度为 弹性网卡、交换机、专有网络。选择专有网络或交换机时,系统会监控其内所有弹性网卡的流量。流量类型:可选被访问控制允许或拒绝的流量,此处的访问控制包括安全组和网络ACL。流量采集版本:可选仅...
调度资源 采集任务调度时将占用该资源组的资源配额,为了避免并发过高占用较多资源影响其他系统任务正常运行,全局所有租户创建的采集任务遵循统一的并发运行数,请合理分配调度资源。支持选择当前租户下创建的状态为 正常 的资源组。您...
当一个节点上的 Pod 数据量异常庞大,远超出 Daemonset 的采集性能上限时,Sidecar模式允许我们为LoongCollector分配特定的资源,从而提升其日志采集的性能和稳定性。在 Serverless 容器中缺乏节点的概念,传统的 Daemonset 部署模式无法...
简介 Hive采集工具通过访问Metastore DB 进行相关资源信息采集,当前支持的类型为MySQL数据库。基本信息 通过对Hive的对象信息进行盘点,采集的字段重点举例为:Hive版本 Hive db名称 Hive db大小 表个数 分区表个数 外部表个数 事物表个数...
离线采集—IDC资源(Linux)操作视频 准备工作 重要 目前被调研机器仅支持类Unix 系统,详情请参考文档:支持列表 运行环境准备 服务器选择 IDC资源采集工具(简称idc-scanner)需要安装和运行在工具服务器上,工具服务器与其他被采集...
❌资源复制 ❌资源纳管 ❌资源迁移 ✅资源探查 ✅源标签 ✅源资源组 ✅源资源 对象存储OSS ALIYUN:OSS:Bucket 无 ✅资源复制 ✅资源纳管 ✅资源迁移 ❌资源探查 ✅源标签 ❌源资源组 ✅源资源 私网连接(PrivateLink)ALIYUN:PrivateLink:...
资源组网络拓扑 系统资源组部署在数据资源平台VPC,需要使用公网地址连接用户云资源(部分云资源支持VPC打通),即云资源注册时需要填写公网地址,云资源白名单需要添加数据资源平台的公网出口IP。独享资源组部署在数据资源平台VPC,通过...
资源配额超限处理 如果数据发送速率超出Logstore最大配额,Logtail会阻塞采集并自动重试。请尝试扩大Logstore的Shard数量。更多信息,请参见 相关技术文章。客户端时间异常 可能因为请求时间和服务端时间差别超过15分钟,导致最大重试5次...
本文简介Logtail采集数据时在运行环境、文件采集、容器采集、CheckPoint管理、Logtail采集配置、机器组、性能、错误处理等方面的限制。运行环境 限制项 限制说明 体系结构 Linux Logtail版本支持x86_64和arm64。Windows Logtail版本支持x86...
EMR Doctor存储元数据采集会根据用户资源动态调整采集的资源,不会占用过多用户资源。EMR Doctor的任务采集使用Java探针技术,不会单独启动Java进程监控。采集使用异步方式,不会阻塞任务主进程,当采集造成的压力过大时,会自动丢弃采集...
VPC即专有网络VPC(Virtual Private Cloud),您可将VPC中的阿里云资源添加到数据资源平台中使用。本文以AnalyticDB PostgreSQL资源为例,为您介绍如何新建VPC类型的云计算资源。前提条件 您已开通并搭建专有网络 VPC,具体操作,请参见 ...
资源迁移场景 如果您需要迁移一组资源及其依赖关系,可以创建资源迁移类型的资源场景,在资源场景中迁移资源、生成资源栈,通过资源栈查看迁移进度,待迁移完成后,您还可以删除源资源。更多信息,请参见 资源迁移场景。本文将提供一个示例...
资源迁移场景 当您仅迁移资源并未删除源资源时,如果您对资源场景进行更新,您可以通过删除源资源操作纳管更新后的资源场景内容。您还可以调用 GenerateTemplateByScratch-为资源场景生成模板 接口为资源场景生成新的模板。说明 请确保待...
2024年02月01日之前购买的资源组,如果在资源组与数据源网络已连通的情况下,此处元数据采集显示连通性测试不通过,请联系技术支持升级资源组版本后,再进行尝试。二、查看表详情 在采集对应数据源完成后,需要通过搜索来查询已采集到的...
背景信息 监控采集粒度是指系统自动采集系统资源信息的频率,在以往的版本中,云数据库MongoDB版提供1秒和300秒的采集频率,其中1秒的采集频率太高,而300秒的采集频率又过低,无法满足用户的需求。阿里云针对这一痛点进行了改进,统一将...
负载均衡实例资源支持根据架构位置自动判断内、外网 负载均衡实例资源支持根据架构位置自动判断内网和外网:若将其拖入交换机内,则自动设置为内网负载均衡实例。若将其拖入交换机外,则自动设置为外网负载均衡实例。一站式部署能力优化 若...
配置参数 说明 示例值.metadata.name 日志采集配置资源名,在当前ACS集群内唯一。test-stdout.spec.project 可选配置,Project名称。可自定义,推荐使用 k8s-log-ACS集群ID 命名。k8s-log-c326bc86*.spec.logstore 必选配置,Logstore名称...
配置参数 说明 示例值.metadata.name 日志采集配置资源名,在当前ACS集群内唯一。test-stdout.spec.project 可选配置,Project名称。可自定义,推荐使用 k8s-log-ACS集群ID 命名。k8s-log-c326bc86*.spec.logstore 必选配置,Logstore名称...
如何关闭日志服务/停止计费 若需终止日志服务的计费,需从数据采集和资源存储两方面操作:关闭日志采集:停止采集后,采集器将不再传输新日志。清理存储资源:删除日志服务中对应的Project 和 Logstore,确保删除所有关联资源,避免因存储...
资源类型 描述 ARN示例 ALIYUN:GPDB:INSTANCE 实例 arn:acs:gpdb:cn-shanghai:123456789xxxxxxx:instance/gp-xxxxx 云企业网 资源类型 描述 ARN示例 ALIYUN:CEN:CEN 云企业网实例 arn:acs:cen:cn-shanghai:123456789xxxxxxx:cen/cen-xxxxx ...
资源组配置:资源组:选择一个用于执行采集任务的资源组。测试连通性:此步骤至关重要。单击 测试连通性,确保资源组可以成功访问数据源。重要 请确认数据源是否开启白名单限制,如果需要采集已开启白名单访问控制的元数据,请参考 网络...
每个阶段分别对网络提出了不同的能力要求:数据采集与预处理:就近数据源端提升数据采集效率并节约采集流量成本、全球内网支撑数据回传和聚集速度、支持多种数据标注工具安全接入 模型训练:构建全球、多云统一算力资源池、提供高吞吐数据...
安全网络:数据控制、身份认证等,保障数据传输与模型调用安全,构建端到端可信算力服务 算网协同的阶段网络架构 数据采集与预处理:就近数据源端提升数据采集效率并节约采集流量成本、全球内网支撑数据回传和聚集速度、支持多种数据标注...
在使用LoongCollector进行数据采集时,可能会遇到采集异常问题。本文将介绍排查采集异常问题的流程,以及一些常见场景下的处理示例。采集异常问题排查指引 采集异常问题的成因复杂多样,且不同原因可能导致相同表象,甚至有时异常无法及时...
配置管理 配置管理指对网络设备、业务承载服务器、客户IoT资源的配置状态信息的采集和维护,主要包括硬件配置资料、状态数据、网元配置文件备份和巡检的管理。变更中心 业务开通场景管理中心,以自动化模板为原子操作的网络变更编排引擎,...
方式 说明 全员 日志审计服务自动将资源目录下的所有成员纳入到采集名单中,并采集这些成员中已开启日志采集功能的云产品的日志。新增资源目录成员后,该成员自动被纳入采集名单中。移除资源目录成员后,该成员自动被移出采集名单。自定义 ...
背景信息 当多个Logtail采集配置匹配同一个文件时,会导致多倍的CPU、内存、磁盘IO和网络IO资源占用,将影响同一台服务器部署的其他服务性能,因此默认情况下,一个文件只能匹配一个Logtail采集配置。解决方案 将日志数据存储到不同...
该 Chart 除了核心的 LoongCollector 核心组件提供基础的数据采集能力外,还额外提供了以下组件:entity-collector:阿里云监控 2.0 容器洞察的核心组件之一(默认启用)集群拓扑采集:自动发现和采集 Kubernetes 集群中的各种资源实体信息 ...
修改控制面日志采集配置。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中...
重要 对于通过自定义资源创建的采集配置,其修改只能通过更新相应的自定义资源来实现,在日志服务控制台上对采集配置的修改不会同步到自定义资源中。登录 容器服务管理控制台。在 集群列表 页面,单击目标集群名称,然后在左侧导航栏,选择...