核心概念 名词 说明 相关文档 准资产 通过采集适配器指定数据源采集的资产和从数据中台获取的资产，您可以根据业务场景判断是否上架，如需上架，需完善资产属性，包括设置上架的目标专题及目录、设置资产的可见范围以及是否允许查看数据...
本文介绍如何通过阿里云Metricbeat采集器收集系统数据（CPU使用率、内存、磁盘IO和网络IO统计数据）和Nginx服务数据，并生成可视化图表。前提条件 您已完成以下操作：创建阿里云Elasticsearch（简称ES）实例。详情请参见 创建阿里云...
flush_interval 1s buffer_chunk_limit 3m buffer_queue_limit 128 dirty_data_continue true dirty_data_file 脏数据记录文件路径 retry_times 3 put_data_batch_size 1000/match 使用如下命令启动Fluentd，即可完成CSV文件数据采集进入...
单击 在线数据库采集 或 下载采集器，采集源库数据。具体操作，请参见 数据库采集。数据库采集完成后，单击 下一步查看源库画像，单击 新建画像 上传采集的数据包进行数据库分析。具体操作，请参见 数据库画像。在 源库画像 页签，选中目标...
db，数据表 test_tbl，字段 test_col，各层级的实体ID如下：（通过对JDBC连接串进行URL编码生成MetaSourceId）层级 ID 采集器元数据实例 mysql:jdbc%3Amysql%3A%2F%2F47.0.X.X%3A3306%2Ftest_db 数据库 mysql-database:jdbc%3Amysql%3A%2F%...
迭代数指数据采集模块激活时的迭代次数，独立于AI作业的迭代计数。迭代入口模块：例如：transformers.trainer。迭代入口函数：vllm推理场景默认为 LLMEngine.step。训练场景默认为 Optimizerstep。采集时长：默认为2000毫秒，您可以根据...
若XA事务的连续性遭到破坏（包括但不限于修改同步对象、增量数据采集模块容灾等场景），则未提交的XA事务可能会丢失。执行数据同步前需评估源库和目标库的性能，同时建议在业务低峰期执行数据同步。否则全量同步时DTS占用源和目标库一定...
调用ListCollectors，获取采集器列表信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求头 该接口使用公共请求头，无特殊请求头。请参见公共请求...
操作流程 步骤一：准备工作 步骤二：配置并安装Filebeat采集器 步骤三：配置Logstash管道过滤并同步数据 步骤四：查看数据采集结果 步骤一：准备工作 创建阿里云Elasticsearch实例和Logstash实例，两者版本相同，并且在同一专有网络VPC...
由系统自动运维元数据采集器，您无需额外管理元数据采集器。在数据地图中，通过全局 元数据检索 搜索目标MaxCompute表。重要 若在数据地图中，没有找到目标表，您可进入 我的数据 我的工具 刷新表元数据，手动同步相关表。查看表详情 在...
在翻页或者加载的过程中，如果结果重复出现在第二页算一个新的曝光PV，结果不去重 如果开通数据采集功能并上传了曝光数据，则每次曝光记1否则，记每次返回的Item数 依赖开通数据采集功能，并且上传了用户曝光行为数据/也可不开通或上传，但...
通过 Quick Tracking 使用数据采集服务的流程如下：配置数据采集渠道（App、小程序、Web）接口，并获取AccessKey，具体操作请参见下文。获取 Quick Tracking 的SDK，并使用上一步中获得的AccessKey进行数据采集程序的开发与部署。SDK和程序...
该方式需要先下载一个数据采集器，并安装到一台可以访问公网的机器上。该机器可以是用户自己提供的任何服务器。请单击 下载离线采集器，并将采集器上传至一台可以访问公网的服务器或虚拟机上。解压后，您将可以看到三个文件：cadt-...
名称 类型 描述 示例值 object 元数据采集器类型 Type string 类型标识，当前支持的元数据采集器类型，取值有 maxcompute dlf hms（使用 HMS 管理元数据的 EMR 集群或 CDH_HIVE 集群）holo mysql oracle postgresql sqlserver analyticdb_...
问题数据采集最终将基于您的规则生成数据采集SQL，并在MaxCompute引擎侧执行，此过程将产生MaxCompute计算引擎费用。问题数据采集结果将存储于MaxCompute临时表中，此过程将产生MaxCompute计算引擎存储费用。保留问题数据配置入口 您可在按...
5 全局属性 全局属性的生命周期为首次设置全局属性API开始，到浏览器tab页面关闭、或者浏览器关闭、或者多页应用浏览器URL发生变化。5.1 设置追加全局属性（aplus.appendMetaInfo）使用aplus.appendMetaInfo进行全局属性上报时，如果和已经...
时序数据采集 进程时序数据 计算资源包括：CPU使用率。存储资源包括：IO吞吐、IOUtil、IOPS、存储空间使用量、存储空间使用率。服务时序数据 在服务级别根据进程的角色不同，对各类时序数据进行了采集。业务相关的时序数据主要包括：QPS、...
Intel Mac OS X 10_15_7)AppleWebKit/537.36(KHTML,like Gecko)Chrome/126.0.x.x Safari/537.36'`,page_name:"ManIndex",/唤起页面的页面编码，可选，建议配置 url:"pages/Index"/唤起页面的页面路径，可选，建议配置 },{ man_app_p1:111,/...
查询数据地图支持的元数据采集器类型列表，其中包含元数据采集器类型，及给定类型支持的子类型和子类型之间的层级关系信息。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去...
调用DescribeCollector，获取采集器实例的详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求头 该接口使用公共请求头，无特殊请求头。请参见...
新一代智能数据采集与分析工具，简单采集、轻松分析。在大数据与AI时代，丰富、准确的数据对于提升用户体验、促进业务增长至关重要。Quick Tracking 智能采集分析助手基于先进的大模型技术，智能理解页面信息并推荐埋点方案，生成埋点代码...
数据采集层 数据采集层采用DataWorks数据集成 作为统一的数据入口，用于接入三类核心数据源：业务系统数据库（如商品中心、交易中心、品牌库）。埋点数据。日志数据。选型理由：支持多种异构数据源，高兼容性与扩展性。提供可视化调度能力...
Beats数据采集中心 Beats是轻量级的数据采集工具，集合了多种单一用途的数据采集器。它们从成百上千或成千上万台机器和系统向Logstash或Elasticsearch发送数据。阿里云Elasticsearch的Beats采集中心支持Filebeat、Metricbeat、Auditbeat和...
采集Open-Falcon数据 Open-Falcon是一款企业级、高可用、可扩展的开源监控解决方案，用于监控服务器的状态，例如磁盘空间、端口存活、网络流量等。采集ping和tcping数据 介绍通过Logtail采集ping和tcping数据到日志服务Metricstore的操作...
客户简介 上海市新能源汽车公共数据采集与监测研究中心（以下简称“数据中心”）是2014年底由上海市社会团体管理局批准注册成立，由上海市经济和信息化委员会负责业务指导，是上海市的新能源汽车市级监管平台，其主要职责是对上海市推广的...
产品简介 全域采集与增长分析(Quick Tracking)提供APP/小程序/H5/Web/IoT等数字应用终端的行为采集分析、私域标签画像、性能体验监控、隐私采集授权管理 等数据采集与洞察服务，助力企业实现全域数据采集、用户增长和体验提升。同时原始...
1 打开埋点验证 打开产品首页，点击顶部导航“数据采集”进入数据采集模块，点击顶部导航“埋点验证”在埋点验证模块内，选择“服务端验证”2 生成DebugKey 3 将DebugKey设置在代码中 将第2步生成的DebugKey配置在上报的日志中，注意代码...
当您为Logstore关联了数据写入处理器后，可以通过处理器对日志数据进行处理。例如将某网站的访问日志（单行文本）采集到Logstore，您可以创建一个写入处理器，解析原始日志，提取出有效的日志字段，进行查询和分析。操作视频 前提条件 已有...
CloudLens for PolarDB支持一键开启数据采集功能，用于采集PolarDB MySQL集群的审计日志、慢查询日志、错误日志和性能指标。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建PolarDB MySQL集群。具体操作，请参见 购买按量...
PolarDB-X输入组件用于读取PolarDB-X数据源的数据。同步PolarDB-X数据源的数据至其他数据源的场景中，您需要先配置PolarDB-X输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置PolarDB-X输入组件。前提条件 在...
单击 前往采集中心查看，返回 Beats数据采集中心 页面，在 采集器管理 区域中，查看启动成功的Filebeat采集器。等待 采集器状态 变为 已生效1/1 后，单击右侧 操作 栏下的 查看运行实例。在 查看运行实例 页面，查看 采集器安装情况，当...
CloudLens for EBS 支持手动或自动化开启数据采集功能。手动开启采集功能针对单个或当前所有的云盘，自动化开启采集功能支持设置采集条件，并自动采集符合条件的云盘（包括未来创建的）的秒级监控数据。本文介绍开启数据采集功能的操作步骤...
数据地图 API 标题 API概述 元数据采集器类型 元数据采集器类型 ListCrawlerTypes 获取数据地图元数据采集器类型列表 查询数据地图支持的元数据采集器类型列表，其中包含元数据采集器类型，及给定类型支持的子类型和子类型之间的层级关系...
CloudLens for CLB 支持一键开启数据采集功能，用于采集CLB访问日志、配置审计日志和云监控事件。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建CLB实例。具体操作，请参见 创建实例。已为CLB实例配置7层监听，即配置HTTP...
Beats Beats是轻量级的数据采集工具，支持一键部署采集器，可视化采集与配置日志文件、网络数据、容器指标等多种类型数据，并集中管理多个采集器。入门操作，请参见 入门概述。高级监控报警 基于Elasticsearch开发的，具备采集、监控、报警...
日志服务的数据采集支持多种采集方式与数据类型。本文将介绍如何选择不同来源数据的采集方式。数据采集方式 数据采集作为使用日志服务功能的第一步，目的是将目标数据传输并保存到日志服务中，以便后续使用日志服务的其他功能。例如对数据...
PolarDB 控制台提供了丰富的性能监控项和秒级监控频率...DescribeDBClusterMonitor-查询集群监控数据采集频率 查询 PolarDB 集群的监控数据采集频率。ModifyDBClusterMonitor-修改集群监控数据采集频率 修改 PolarDB 集群的监控数据采集频率。
在DataV-Board（数据看板）中使用PolarDB-X数据源之前，需要先将PolarDB-X数据源实例添加为DataV-Board的数据源。本文为您介绍如何添加PolarDB-X数据源。前提条件 添加数据库前请先参见 创建PolarDB-X实例，开通对应的数据库服务。说明 ...
支持选择业务系统、数据采集层、数据加工层、数据应用层、数据服务（API）、报表应用。业务系统：源数据层，是组织中各个业务系统（如ERP系统、CRM系统、生产系统等）产生和存储数据的地方。数据采集层：负责从多个业务系统或外部数据源中...
支持选择业务系统、数据采集层、数据加工层、数据应用层、数据服务（API）、报表应用。业务系统：源数据层，是组织中各个业务系统（如ERP系统、CRM系统、生产系统等）产生和存储数据的地方。数据采集层：负责从多个业务系统或外部数据源中...