方法 POST URI/v3/openapi/app-groups/{appName}/data-collections/{dataCollectionName}/data-collection-type/{dataCollectionType}/actions/bulk appName 指的是 opensearch 应⽤名称 dataCollectionName 指的是数据采集名称，...
嵌入式开发需求主要有以下几点：数据采集：如何实时采集分散在全球各地的百万/千万级设备上的数据？调试：如何使用一套方案既满足线上数据采集又满足开发时的实时调试？线上诊断：某个线上设备出现错误，如何快速定位设备，查看引起该设备...
本文档主要为您说明阿里云数据库存储DBFS的主要应用场景。云上自建数据库 DBFS为数据库场景量身打造的特性，非常适合云上用户自建数据库（例如：MySQL，PostgreSQL等），实现存储计算...基于SAN的数据复制技术，需额外支出成本，价格昂贵。
数据采集 功能权限 功能权限名称 权限说明 数据采集_埋点验证访问 可以访问「数据采集-埋点验证」，使用埋点验证功能并可以查看验证报告 注意：必须要有至少一个「数据采集」的“数据权限”才能正常访问。数据权限 数据权限名称 权限说明 ...
售前常见问题 产品计费常见问题 数据采集常见问题 数据存储常见问题 查询与分析常见问题 数据加工常见问题 消费与投递常见问题 售前常见问题 什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据...
具体操作，请参见 数据采集。已开通目标Logtail配置所在Project的重要日志采集功能。具体操作，请参见 开通服务日志。背景信息 Logtail诊断包括高级版诊断和基础版诊断，具体说明如下：高级版诊断（推荐）：提供异常诊断仪表盘，清晰展示...
同时日志服务根据不同业务环境支持内网+VPC、公网+全球加速等多种数据传输方式，能够很好地适应沙盒网络全球化的业务数据采集场景。在多元化数据统一管理方面，日志服务提供可托管、高可用、可扩展的数据加工服务，广泛适用于数据的规整、...
表 1.2022年02月 功能名称 功能概述 发布时间 支持地域 相关文档 支持Oracle RAC使用场景 版本新增对Oracle RAC使用场景的支持，可取代OCFS2/GFS2/ASM(ACFS)，为基于SAN的数据库/中间件/SaaS应用集群提供高可用、高性能的存储服务。...
您可以通过控制台设置云数据库MongoDB版的监控采集粒度。监控信息 页面展示的监控数据默认的采集粒度60秒，无法进行更改。
云原生数据库PolarDB 提供以下相关API接口。地域 API 描述 DescribeRegions 该接口...DescribeDBClusterMonitor 该接口用于查询 PolarDB 集群的监控数据采集频率。ModifyDBClusterMonitor 该接口用于修改 PolarDB 集群的监控数据采集频率。
可观测监控 Prometheus 版 支持通过node-exporter采集ECS Linux或Windows主机操作系统相关指标，也支持process-exporter采集进程相关监控数据，另外基于textfile的方式也支持采集用户写到文件中自定义监控指标。前提条件 已创建ECS实例。...
可观测监控 Prometheus 版 支持通过node-exporter采集ECS Linux或Windows主机操作系统相关指标，也支持process-exporter采集进程相关监控数据，另外基于textfile的方式也支持采集用户写到文件中自定义监控指标。前提条件 已开通可观测监控...
云原生数据库PolarDB 提供以下相关API接口。地域 API 描述 DescribeRegions 该接口...DescribeDBClusterMonitor 该接口用于查询 PolarDB 集群的监控数据采集频率。ModifyDBClusterMonitor 该接口用于修改 PolarDB 集群的监控数据采集频率。
入仓解决方案包括：实时同步任务：基于离线数据集成的数据传输服务。新建实时同步任务，请参见 新建实时同步任务。实时迁移任务：基于数据传输服务DTS的数据传输服务。新建实时迁移任务，请参见 新建实时迁移任务。说明 基于DTS的数据同步...
DescribeDBClusterMonitor 查询集群监控数据采集频率 查询PolarDB集群的监控数据采集频率。ModifyDBClusterMonitor 修改集群监控数据采集频率 修改PolarDB集群的监控数据采集频率。PolarDB for AI API 标题 API概述 DescribeAITaskStatus ...
元数据采集完成后，您可以在数据总览页面查看当前地域下，配置了数据采集器的Hologres数据库统计信息和表信息，详情请参见 数据总览。如果需要查找表，可参见 通用数据查询与管理。查看血缘详情。查找到目标表后，您可以单击目标表名称进入...
基本介绍 基于典型的数据集、图表、仪表盘或大屏三层模型，将数据库表中的数据以各种形式的可视化方式展现出来。您可以将单条SQL数据以折线图、饼图、柱状图、环形图、表格、双轴图、漏斗图等常见图表的形式展现出来。再通过仪表盘或大屏，...
其他操作 数据总览 您可以在数据总览页面查看当前地域（Region）下配置了数据采集器的Hologres数据库统计信息和表信息，进入数据总览详细步骤请参见 数据总览。查找表 数据地图支持通过表名，表描述、字段名及字段描述等搜索表，同时还可以...
日志服务提供基于规则的数据实时消费功能，通过SPL可以实现在服务端的数据处理后进行消费。本文介绍基于规则消费功能的概念、功能优势、应用场景、计费规则、消费目标等信息。工作原理 基于规则消费是指第三方软件、多语言应用、云产品、...
修改PolarDB集群的监控数据采集频率。接口说明 若监控频率为 5 秒/次：当查询时间范围小于等于 1 小时，显示粒度为 5 秒。当查询时间范围小于等于 1 天，显示粒度为 1 分钟。当查询时间范围小于等于 7 天，显示粒度为 10 分钟。当查询时间...
此方式可以简化日志采集的配置和管理，提高了日志管理的灵活性和效率。使用Logtail采集日志的基本流程和架构如下所示。整个流程包括：部署Logtail。具体操作，请参见 安装Logtail组件（阿里云Kubernetes集群）。安装Logtail组件时，默认...
用户可以创建Relational Cache对数据进行预计算，在执行用户查询时，Spark Optimizer自动发现合适的Cache，并改写SQL执行计划，基于Cache的数据继续计算，从而提升查询速度，适用于报表、Dashboard、数据同步和多维分析等场景。通过DDL，...
PolarDB-X 结合云原生数据仓库AnalyticDB MySQL版提供了库仓一站式的能力，基于“Zero-ETL”的设计理念，采用共享同一份列存索引的数据，基于云原生数据仓库AnalyticDB MySQL版的数据仓库能力可以满足多方的数据汇总和数据关联查询，提供...
DataV的BI分析功能是基于DataV6.0迭代更新后的数据映射能力，通过简便实用的数据模型构建、视觉绑定和交互式动态数据查询，向用户提供探索数据间关系的能力，可以丰富可视化视图的创作模式，完善可视分析循环。本文介绍BI分析的基本概念。...
PolarDB-X 结合云原生数据仓库AnalyticDB MySQL版提供了库仓一站式的能力，基于“Zero-ETL”的设计理念，采用共享同一份列存索引的数据，基于云原生数据仓库AnalyticDB MySQL版的数据仓库能力可以满足多方的数据汇总和数据关联查询，提供...
2、SDK默认采集规则：1秒钟采集一次，采集6次持久化到文件记录到协议中的一条数据，聚合1分钟的数据，最长采集5分钟3、落盘逻辑：聚合10分钟数据打性能报文上报 Android：【页面采集】：1、目前版本SDK只采集页面创建的时间，页面back等非...
如果想从指定位置开始采集，可以查看当前的Binlog文件以及文件大小偏移量，并将 首次采集的Binlog文件名、首次采集的Binlog文件的偏移量 设置成对应的值，示例如下。设置首次采集的Binlog文件名为mysql-bin.000063,设置首次采集的Binlog...
阿里云流数据处理平台DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布（Publish），订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。前提条件 您已经完成了 创建RDS MySQL数据库表。操作...
DataHub是流式数据（Streaming Data）的处理平台，为您提供发布、订阅和分发流式数据的功能，让您可以轻松构建基于流式数据的分析和应用。前提条件 配置DataHub输出节点前，您需要先配置好相应的输入或转换数据源，实时同步支持的数据源。...
您可以通过创建Prometheus的数据接入任务，将Prometheus数据接入云监控。Prometheus数据接入云监控后，您可以创建监控大盘，通过监控大盘查看指定监控指标的监控图表。前提条件 请确保您已创建指标仓库。具体操作，请参见 创建指标仓库。...
工业物联服务支持多种工业协议与现场生产设备和仪器仪表的数据采集，用户可以根据业务灵活定义实时数据的处理规则（包括数据预加工和告警触发），并支持海量数据的高效存储，对外提供被动订阅、主动分发以及反向控制的数据服务；...
Fleet Agent 轻量级数据采集代理，负责采集源端数据。Fleet Agent可以在多个操作系统上运行，并且可以收集多种类型的数据。Fleet Server 负责将Agent采集的源端数据传输到Elasticsearch。准备环境 创建阿里云Elasticsearch实例，具体操作请...
数据投递 您可以将采集到的数据投递到OSS、MaxCompute、AnalyticDB 等云产品中进行存储或计算分析。具体操作，请参见 数据投递。RAM用户授权 如果您要使用RAM用户操作云产品日志，您需要使用阿里云主账号为RAM用户授权。您可以使用权限助手...
基于数据自动分区+分区多副本+Lucene的结构设计，具备全文检索、聚合计算、复杂多维查询等能力，支持水平扩展、一写多读、跨机房容灾、TTL等，满足海量数据下的高效检索需求，具体如下：LindormSearch 的数据持久化存储在LDFS中，...
分数越高，说明采集的源数据库规模越大。负载：衡量数据库运行性能的情况。分数越高，说明数据库运行负载使用率高。主要对象分布 统计源库画像中对象类型的分布情况。说明 您还可以单击页面下方的 下载报告，下载ADAM源库画像分析报告。...
背景信息 Hive是基于Hadoop的数据仓库工具，用于解决海量结构化日志的数据统计。Hive可以将结构化的数据文件映射为一张表，并提供SQL查询功能。Hive的本质是一个SQL解析引擎，其底层通过MapReduce实现数据分析，使用HDFS存储处理的数据，将...
DataWorks支持StarRocks数据源，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、开发、分析、数据服务等功能。本文为您介绍EMR Serverless StarRocks在DataWorks上的操作流程。背景信息 了解EMR ...
宕机时的处理 由于CheckPoint是定期保存，因此宕机恢复时将从上一个完整保存的CheckPoint开始恢复，可能导致数据采集重复。调整Checkpoint保存策略以减少数据被重复采集。Logtail采集配置 限制项 限制说明 配置更新生效的延时 从通过控制台...
宕机时的处理 由于CheckPoint是定期保存，因此宕机恢复时将从上一个完整保存的CheckPoint开始恢复，可能导致数据采集重复。调整Checkpoint保存策略以减少数据被重复采集。Logtail采集配置 限制项 限制说明 配置更新生效的延时 从通过控制台...
增加隐私数据采集开关，不采集NO_IDENTIFY_DEVICE_DATA类型数据，多选使用｜进行拼接。且"(NO_IDENTIFY_DEVICE_DATA))"处输入数据不可为空。Map String,String options=new HashMap();options.put("DataType",String.valueOf(NO_IDENTIFY_...