通用数据采集软件操作

_相关内容

创建及管理来源系统

支持选择业务系统、数据采集层、数据加工层、数据应用层、数据服务(API)、报表应用。业务系统:源数据层,是组织中各个业务系统(如ERP系统、CRM系统、生产系统等)产生和存储数据的地方。数据采集层:负责从多个业务系统或外部数据源中...

创建及管理来源系统

支持选择业务系统、数据采集层、数据加工层、数据应用层、数据服务(API)、报表应用。业务系统:源数据层,是组织中各个业务系统(如ERP系统、CRM系统、生产系统等)产生和存储数据的地方。数据采集层:负责从多个业务系统或外部数据源中...

Logtail发布历史

修复 修复Logtail使用历史数据采集之后进程无法优雅退出的问题。1.8.6 发布时间:2024.01.30 优化 Golang插件指标数据和上报逻辑优化,指标统一通过C++指标模块上报 修复 修复开启高精度时间戳开关后Golang模块误加载问题 1.8.5 发布时间:...

DBeaver

背景信息 DBeaver是一款免费、开源(GPL)的专门为开发人员和数据库管理员提供的通用数据库工具。DBeaver支持MySQL、PostgreSQL、Oracle、DB2、MSSQL、Sybase以及其他兼容JDBC的数据库。您可以通过DBeaver的图形界面查看数据库结构、执行...

什么是日志服务

如何关闭日志服务/停止计费 若需终止日志服务的计费,需从数据采集和资源存储两方面操作:关闭日志采集:停止采集后,采集器将不再传输新日志。清理存储资源:删除日志服务中对应的Project 和 Logstore,确保删除所有关联资源,避免因存储...

导入字段标准通用信息

当默认字段属性不满足需要时,您可以通过导入字段标准通用信息,快速批量为设计的字段标准添加自定义属性。本文介绍如何导入字段标准通用信息。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击...

管理元数据清单

元数据清单以列表形式为您展示采集到的元数据信息,您可以从不同视角出发查询数据。本文为您介绍如何管理元数据清单。权限说明 超级管理员、系统管理员和具有 元数据清单-查看 权限的自定义全局角色支持管理元数据清单、查看元数据详情。...

管理元数据清单

元数据清单以列表形式为您展示采集到的元数据信息,您可以从不同视角出发查询数据。本文为您介绍如何管理元数据清单。权限说明 超级管理员、系统管理员和具有 元数据清单-查看 权限的自定义全局角色支持管理元数据清单、查看元数据详情。...

Quick Tracking基本概念

为了能够快速上手Quick Tracking,建议先了解和学习下采集SDK和流量分析产品的基本概念,这些基本概念会贯穿数据采集到数据分析的全流程。行为采集 在行为采集中,有如下四个基本概念需要了解:系统事件 系统事件是指由采集SDK发出,用来...

LoongCollector采集异常问题汇总排查

在使用LoongCollector进行数据采集时,可能会遇到采集异常问题。本文将介绍排查采集异常问题的流程,以及一些常见场景下的处理示例。采集异常问题排查指引 采集异常问题的成因复杂多样,且不同原因可能导致相同表象,甚至有时异常无法及时...

实现原理

监控的通用逻辑 定义数据源:首先,需要建立元数据基本模型,元数据是监控系统的根基。例如:定义应用、部署实例、机房信息,单元化信息等。在 SOFAStack 场景下,这部分信息需要从 PaaS 侧自动获取。数据采集:通过安装在机器上的 Agent ...

使用SDK消费订阅数据

说明 如果数据源是PolarDB-X 1.0或DMS LogicDB,消费订阅数据操作步骤,请参见 使用SDK消费PolarDB-X 1.0订阅数据。本操作为Java语言的SDK客户端示例,Python和Go语言的示例代码,请参见 dts-subscribe-demo。前提条件 已创建订阅实例,...

应用评估

应用评估用于衡量应用与数据库整体迁移改造的情况,可以展示应用需要改造的地方,并给出改造建议。前提条件 全部应用采集包都已创建应用画像。背景信息 迁移数据库和应用的过程中存在以下几个难点问题:难以估算应用改造的工作量。难以制定...

开通日志功能

本文介绍如何在移动研发平台EMAS控制台上开通日志功能,将日志推送到日志服务中。...后续步骤 日志服务采集到移动数据分析日志后,您可以执行查询分析、下载、投递、加工、创建告警等操作。具体操作,请参见 云产品日志通用操作

开通平台操作日志功能

本文介绍如何通过日志服务控制台采集平台操作日志。前提条件 已提工单或联系您的销售经理获得平台操作日志功能(Inner-ActionTrail)使用权限。已授权ActionTrail使用AliyunActionTrailDefaultRole角色投递日志到日志服务中。单击 云资源...

数据传输与迁移概述

MaxCompute提供多种渠道,以便您从业务系统或外部数据源写入数据到MaxCompute,或者从MaxCompute写出数据到外部系统或外部数据源。数据传输渠道 SDK-Tunnel渠道 外表(湖仓一体)JDBC渠道 场景数据写入MaxCompute 离线数据批量写入(数据...

管理数据库资产

添加数据库后,您还需要在数据库服务器上部署数据库审计的Agent程序,才能开启采集审计数据。具体操作,请参见 安装Agent。添加数据库后,您需要进行以下操作:您必须在已添加的数据库服务器上部署数据库审计的Agent程序,才能使数据库审计...

不同类型的采集源支持的操作

本文为您介绍不同的采集源支持的操作数据源类型 是否支持查看DDL语句 是否支持数据预览 是否支持数据探查 是否支持NoteBook分析 是否支持Quick BI消费 MySQL 是 是 是 是 是 Amazon RDS for MySQL 是 否 否 否 否 Oracle 是 是 是 是 是 ...

通过迁移评估采集采集数据库对象

您可以自行采集数据库对象定义,也可以下载迁移评估采集器完成数据库对象的采集。本文为您介绍如何通过迁移评估采集采集数据库对象。背景信息 迁移评估采集器是用于在公有云环境采集用户 Schema 数据的工具。您在公有云环境下不可以使用...

App内H5数据上报

场景举例:一个“春日”活动H5嵌入在多个App端,按照当前方式操作,可以满足下述分析诉求:App运营需要看到客户在App内参加H5活动前后的完整链路数据。H5活动运营需要看到H5在所有App端内的活动数据操作说明:创建两个应用:一个App应用...

通用批量导入服务

功能特性 批量快速导入数据功能支持数据文件旁路加载,不需要经过数据API写入链路并且不需要占用实例计算资源,批量快速导入数据与通过API导入数据相比有以下优势:导入数据更快,速度可以提升10倍以上。在线服务更稳定,不占用在线服务资源...

pg_profile(资源监控)

连接到profile数据库再次进行数据采集:SELECT take_sample();查看采集数据:SELECT*FROM show_samples('server');示例结果如下:sample|sample_time|sizes_collected|dbstats_reset|bgwrstats_reset|archstats_reset-+-+-+-+-+-1|2024-02-...

添加Modbus协议设备

数据上报方式 有两种数据上报方式:按时上报:选择按时上报后,根据步骤10中为子设备设置的数据采集间隔,采集数据并上报。变更上报:采集后的值发生变化后才会上报。返回 边缘计算控制台 的 节点管理 终端设备管理 页面。在 添加设备 ...

数据源表详情

不同数据源支持的操作(如数据预览、查看DDL)差异请参见 不同类型的采集源支持的操作数据源表详情入口 在Dataphin首页的顶部菜单栏,选择 治理 资产清单。选择 其他系统资产,单击目标元数据的名称或 操作 列下的 图标,进入对象详情...

日志服务概述

本文介绍KMS日志服务功能支持采集数据、资产详情、计费说明及使用限制等。什么是日志服务 KMS日志服务功能基于阿里云日志服务,在KMS控制台为您提供KMS实例的日志查询与分析,同时支持存储180天内的访问日志,满足《网络安全法》和《密码...

数据源表详情

不同数据源支持的操作(如数据预览、查看DDL)差异请参见 不同类型的采集源支持的操作数据源表详情入口 在Dataphin首页的顶部菜单栏,选择 治理 资产清单。选择 其他系统资产,单击目标元数据的名称或 操作 列下的 图标,进入对象详情...

应用内H5数据上报

1.H5桥接使用场景 场景1:如何将H5数据同时上报至H5应用和APP应用 一个“春日”活动H5嵌入在多个App端,按照当前方式操作,可以满足下述分析诉求:App运营需要看到客户在App内参加H5活动前后的完整链路数据。H5活动运营需要看到H5在所有App...

使用Kafka客户端消费订阅数据

若您使用原生的Kafka客户端消费订阅数据,则可能会在DTS发生增量数据采集模块切换行为,从而使subscribe模式下订阅客户端保存在服务端的消费位点被清除,您需要手动调整订阅的消费位点以实现按需消费数据。若您需要使用subscribe模式建议...

采集Systemd Journal日志

采集软件(Unit)的输出日志,用于分析或告警。采集所有Journal日志,可以从所有日志中快速检索关键词或日志,相比Journalctl的查询效率大幅提升。操作步骤 登录 日志服务控制台。在 接入数据 区域,选择 自定义数据插件。选择目标Project...

pg_profile(资源监控)

连接到profile数据库再次进行数据采集:SELECT take_sample();查看采集数据:SELECT*FROM show_samples('server');示例结果如下:sample|sample_time|sizes_collected|dbstats_reset|bgwrstats_reset|archstats_reset-+-+-+-+-+-1|2024-02-...

配置世界地图

前提条件 已采集数据。具体操作,请参见 采集主机文本日志。已创建索引。具体操作,请参见 创建索引。已创建仪表盘。具体操作,请参见 快速创建仪表盘。步骤一:查询和分析 登录 日志服务控制台。在Project列表区域,单击目标Project。在...

App内H5数据上报

说明 文档说明:本文档内容为介绍当App内存在H5页面时,H5数据应该如何上报?1 H5桥接使用场景 1.1 如何将H5数据同时上报至H5应用和App应用?场景举例:一个“春日”活动H5嵌入在多个App端,按照当前方式操作,可以满足下述分析诉求:App...

应用场景

互联网公开平台的自动化操作 在企业的营销、运营、客服过程中,可能会涉及一些对公开平台进行数据采集、内容发布、消息群发的相关操作,针对其中操作流程固定、重复次数多、操作时效性要求高的流程,可以通过机器人自动执行的方式,代替...

指标数据采集(Metric)

采集Open-Falcon数据 Open-Falcon是一款企业级、高可用、可扩展的开源监控解决方案,用于监控服务器的状态,例如磁盘空间、端口存活、网络流量等。采集ping和tcping数据 介绍通过Logtail采集ping和tcping数据到日志服务Metricstore的操作...

资产指纹调查

最新扫描时间:云安全中心最近一次采集软件信息的时间。计划任务 定期采集您服务器上周期性执行的任务路径信息。具体采集任务的以下信息:服务器信息:计划任务所在的服务器信息,包括服务器名称和IP地址。执行命令:计划任务执行的命令行...

基本概念

通用高级型NAS 通用高级型NAS是通用型NAS的一个细分存储规格类型,适用于容器数据持久化、AI训练数据存储、工业仿真、基因计算等时延敏感型且对时延响应要求较高的文件共享业务。通用高级型NAS使用容量支持自动扩容,最大存储容量为1 PiB。...

配置中国地图

前提条件 已采集数据。具体操作,请参见 采集主机文本日志。已创建索引。具体操作,请参见 创建索引。已创建仪表盘。具体操作,请参见 快速创建仪表盘。步骤一:查询和分析 登录 日志服务控制台。在Project列表区域,单击目标Project。在...

配置说明

EMR Doctor的基本配置在安装过程中已设置,主要控制集群元数据和任务元数据的采集行为,通常情况下不需要修改和下发配置。本文为您介绍EMR Doctor的基本配置信息以及如何修改基本配置。重要 本文为您列出了EMR Doctor中可以修改的配置。...

SPL语法

工作原理 日志服务SPL支持在 Logtail采集、写入处理器、基于规则消费、数据加工(新版)、扫描模式查询与分析(Scan)等日志服务功能中使用,工作原理如下图:说明 关于SPL在各个场景中的功能定义,请参见 通用参考。使用限制 类别 限制项 ...

配置南丁玫瑰图

南丁格尔玫瑰图是在极坐标系下绘制的柱状图,每一个分类数据被圆弧平分,使用圆弧的半径长短表示数据的大小。本文介绍如何配置 南丁格尔玫瑰图。前提条件 已采集数据。具体操作,请参见 采集主机文本日志。已创建索引。具体操作,请参见 ...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用