业务数据采集

_相关内容

创建及管理来源系统

支持选择业务系统、数据采集层、数据加工层、数据应用层、数据服务(API)、报表应用。业务系统:源数据层,是组织中各个业务系统(如ERP系统、CRM系统、生产系统等)产生和存储数据的地方。数据采集层:负责从多个业务系统或外部数据源中...

创建及管理来源系统

支持选择业务系统、数据采集层、数据加工层、数据应用层、数据服务(API)、报表应用。业务系统:源数据层,是组织中各个业务系统(如ERP系统、CRM系统、生产系统等)产生和存储数据的地方。数据采集层:负责从多个业务系统或外部数据源中...

DataWorks模块使用指引

数据上云与集成:使用 数据集成 模块将源业务系统的数据采集至大数据平台。支持离线(批量)、实时(流式)、全量及增量等多种同步方式。规范模型设计:在进行大规模数据开发前,进行规范化的模型设计,以保证数据体系的有序与可维护性。此...

计费项概述

按量付费 资源包抵扣 日志监控数据 Agent 直接采集应用业务日志数据,之后对日志进行处理、计算为指标。日志监控数据计量仅针对通过自定义监控配置采集日志。按照每天总的日志摄入量进行计算。指标数据默认存储 21 天。按量付费 资源包抵扣...

资产清单概述

资产清单统一展示Dataphin数据资产和从数据采集业务系统资产,为您提供统一的搜索和浏览入口,并展示丰富的元数据信息,帮助您快速了解数据样貌。整体概述 Dataphin的数据资产功能,基于数据资产管理的规范及方法论,帮助您对数据资产...

资产清单概述

资产清单统一展示Dataphin数据资产和从数据采集业务系统资产,为您提供统一的搜索和浏览入口,并展示丰富的元数据信息,帮助您快速了解数据样貌。整体概述 Dataphin的数据资产功能,基于数据资产管理的规范及方法论,帮助您对数据资产...

SDK版本说明

版本 发布时间 发布说明 v0.2.0 2024年11月19日 新增自定义异常数据采集。新增自定义事件数据采集。新增自定义日志数据采集。新增用户扩展信息设置。新增崩溃数据捕获能力。新增CEF框架数据采集能力。v0.1.0 2024年07月29日 支持Session、...

SDK版本说明

版本 发布时间 发布说明 0.3.0 2025年11月11日 优化崩溃数据采集 0.2.1 2024年11月22日 优化自定义设备ID 优化与三方SDK的兼容性 新增支持设置用户ID v0.2.0 2024年11月19日 新增自定义异常数据采集。新增自定义事件数据采集。新增自定义...

数据采集

时序数据采集 进程时序数据 计算资源包括:CPU使用率。存储资源包括:IO吞吐、IOUtil、IOPS、存储空间使用量、存储空间使用率。服务时序数据 在服务级别根据进程的角色不同,对各类时序数据进行了采集业务相关的时序数据主要包括:QPS、...

快速入门

Beats是轻量级的数据采集工具,使用 Beats 数据采集器,您可以实时监控系统状态、分析日志并快速识别和解决问题。阿里云Elasticsearch支持Filebeat、Metricbeat、Auditbeat和Heartbeat等多种采集器。您可以根据本文介绍的具体使用场景选择...

时间序列数据库 TSDB

时间序列数据库产品系列是是广泛应用于物联网(IoT)设备监控系统,企业能源管理系统(EMS),生产安全监控系统,电力检测系统等行业场景的...解决由于设备采集点数量巨大,数据采集频率高,造成的存储成本高,写入和查询分析效率低的问题。

A/B测试报表

在翻页或者加载的过程中,如果结果重复出现在第二页算一个新的曝光PV,结果不去重 如果开通数据采集功能并上传了曝光数据,则每次曝光记1否则,记每次返回的Item数 依赖开通数据采集功能,并且上传了用户曝光行为数据/也可不开通或上传,但...

新建数据采集接口

通过 Quick Tracking 使用数据采集服务的流程如下:配置数据采集渠道(App、小程序、Web)接口,并获取AccessKey,具体操作请参见下文。获取 Quick Tracking 的SDK,并使用上一步中获得的AccessKey进行数据采集程序的开发与部署。SDK和程序...

设备协议

设备协议模块可创建的协议以及各协议的功能如下:设备采集协议:将设备数据自动推送到云控平台数据采集端口。数据转化协议:将数据采集协议推动上来的设备数据转化为交通云控平台的标准格式。数据(控制)下发协议:使交通云控平台下发的...

网络规划

本章旨在提供一个贯穿AI业务全生命周期(数据采集、模型训练、模型推理)的网络设计蓝图。我们将从VPC划分、路由设计、跨域互联到安全隔离等多个维度,系统性地阐述如何构建一个高性能、高安全、高可用且具备成本效益的AI网络基础设施,...

数据库采集

下载采集器:如果源库不能对外使用公网,或者无法从云上去访问,可以通过ADAM数据采集器采集数据库。更多信息,请参见 采集器采集。在线采集 登录 数据管理DMS 5.0。在顶部菜单栏中,选择 Data+AI 异构数据库迁移(ADAM)数据库评估。在 ...

创建元数据

列字段配置 新建列字段 字段名称:配置为业务数据中实际的字段名称,且后续需要基于该字段创建服务单元。支持多层嵌套,使用点(.)分隔。字段类型:根据业务数据的字段类型选择对应的字段类型。支持选择的字段类型包括Double、Float、...

创建元数据

列字段配置 新建列字段 字段名称:配置为业务数据中实际的字段名称,且后续需要基于该字段创建服务单元。支持多层嵌套,使用点(.)分隔。字段类型:根据业务数据的字段类型选择对应的字段类型。支持选择的字段类型包括Double、Float、...

产品概述

数据采集:采集设备实时数据,集成信息系统业务数据 提供标准化设备数据接入流程,快速采集设备数据 广泛设备协议接入能力,支持OPC、Modbus和多种三方驱动协议 支持API、WebService、消息队列、FTP文件多种业务数据集成方式 根据业务规则...

服务端埋点验证

1 打开埋点验证 打开产品首页,点击顶部导航“数据采集”进入数据采集模块,点击顶部导航“埋点验证”在埋点验证模块内,选择“服务端验证”2 生成DebugKey 3 将DebugKey设置在代码中 将第2步生成的DebugKey配置在上报的日志中,注意代码...

开启数据采集功能

CloudLens for ALB支持一键开启数据采集功能,用于采集ALB访问日志。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建应用型负载均衡实例。具体操作,请参见 创建应用型负载均衡。已创建日志服务Project和Logstore。具体...

阿里云Elasticsearch数据采集解决方案

本文提供了将数据采集到阿里云Elasticsearch服务中的几种解决方案。背景信息 对于数据搜索和分析来说,Elasticsearch无处不在。开发人员和社区可使用Elasticsearch寻找各种各样的使用场景,从 应用程序搜索 和 网站搜索,到日志、基础架构...

开启数据采集功能

CloudLens for EBS 支持手动或自动化开启数据采集功能。手动开启采集功能针对单个或当前所有的云盘,自动化开启采集功能支持设置采集条件,并自动采集符合条件的云盘(包括未来创建的)的秒级监控数据。本文介绍开启数据采集功能的操作步骤...

什么是LoongCollector

LoongCollector 是日志服务推出的一款集性能、稳定性和可编程性于一身的新一代数据采集器,专为构建下一代可观测 Pipeline 设计。LoongCollector扩展融合了可观测性技术栈,改变传统日志采集器的单一场景限制,支持Logs、Metrics、Traces、...

开启数据采集功能

CloudLens for CLB 支持一键开启数据采集功能,用于采集CLB访问日志、配置审计日志和云监控事件。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建CLB实例。具体操作,请参见 创建实例。已为CLB实例配置7层监听,即配置HTTP...

SDK版本说明

版本 发布时间 发布说明 v2.0.2 2025年12月09日 修复 Flutter 数据采集已知问题,接入 Flutter 的推荐版本。v2.0.1 2025年12月05日 支持 Flutter 能力,需要结合 Flutter Plugin 共同使用,详情见 接入Flutter应用。丰富 Action 采集能力,...

DataV读取数据源超时

问题原因 查询超时的原因如下:使用SQL查询的业务数据表数量太大。API接口内部业务调用链路较长。解决方案 执行以下操作,通过优化查询时间的方式进行解决:使用SQL查询的业务数据表数量太大 针对查询条件所使用的字段添加索引,减少扫描行...

DescribeDBClusterMonitor

调用DescribeDBClusterMonitor接口查询PolarDB集群的监控数据采集频率。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例...

DescribeDBClusterMonitor

调用DescribeDBClusterMonitor接口查询PolarDB集群的监控数据采集频率。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例...

什么是可观测监控 Prometheus 版

什么是Prometheus实例 Prometheus实例是阿里云 可观测监控 Prometheus 版 服务提供的管理Prometheus数据采集和数据存储分析的逻辑单元,每个 Prometheus实例 提供对应的Prometheus数据采集配置、时序数据库实例、Dashboard监控大盘和报警...

什么是可观测监控 Prometheus 版

什么是Prometheus实例 Prometheus实例是阿里云 可观测监控 Prometheus 版 服务提供的管理Prometheus数据采集和数据存储分析的逻辑单元,每个 Prometheus实例 提供对应的Prometheus数据采集配置、时序数据库实例、Dashboard监控大盘和报警...

什么是可观测监控 Prometheus 版

什么是Prometheus实例 Prometheus实例是阿里云 可观测监控 Prometheus 版 服务提供的管理Prometheus数据采集和数据存储分析的逻辑单元,每个 Prometheus实例 提供对应的Prometheus数据采集配置、时序数据库实例、Dashboard监控大盘和报警...

代码模板

使用代码模板生成埋点代码的位置在「数据采集-埋点管理-事件/属性/方案管理」中。1)默认模板 该模块进入后,默认会提供7类基础模板:模板名称 技术栈 模板描述 Android PX系列预置模板 Android NATIVE 针对Android PX系列 SDK(版本号以PX...

权限管理

数据采集 功能权限 功能权限名称 权限说明 数据采集_埋点验证访问 可以访问「数据采集-埋点验证」,使用埋点验证功能并可以查看验证报告 注意:必须要有至少一个「数据采集」的“数据权限”才能正常访问。数据权限 数据权限名称 权限说明 ...

组件数据源配置

数据源配置是创建组件和展示业务数据的关键步骤,具有数据接入、数据处理和数据实时更新的功能。本文介绍如何进行配置组件数据。功能说明 DataV-Board 支持接入 各种业务数据,包括静态数据、数据库、应用网关等。通过数据源配置,将业务...

数据迁移最佳实践

本文介绍数据迁移的最佳实践,包含将其他业务平台的业务数据或日志数据迁移至MaxCompute,或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据,如果您的数据存放在传统的关系型数据库且数据量庞大时,...

数据迁移最佳实践

本文介绍数据迁移的最佳实践,包含将其他业务平台的业务数据或日志数据迁移至MaxCompute,或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据,如果您的数据存放在传统的关系型数据库且数据量庞大时,...

执行离线评估

迁移评估采集文件:您可以下载迁移评估采集器进行数据采集,采集完成后的文件将上传至云上进行评估。详情请参见 通过迁移评估采集器采集数据库对象。上传文件 单击 上传文件,选择需要评估的文件进行上传。支持上传多个文件,生成一个评估...

常见问题

售前常见问题 产品计费常见问题 数据采集常见问题 数据存储常见问题 查询与分析常见问题 数据加工常见问题 消费与投递常见问题 售前常见问题 什么是日志服务?日志服务可以做什么?日志服务能为用户带来哪些价值?日志服务支持采集哪些数据...

通过Metricbeat收集系统数据及Nginx服务数据

单击 前往采集中心查看,返回 Beats数据采集中心 页面,在 采集器管理 区域中,查看启动成功的Metricbeat采集器。等待 采集器状态 变为 已生效 后,单击右侧 操作 栏下的 查看运行实例。在 查看运行实例 页面,查看 采集器安装情况,当显示...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用