说明 通过Logstore的查询的方式可能不准确，因为：数据加工是基于日志接收时间进行加工，可能正在加工历史日志，当前查询的时间范围与日志的写入时间并不一定一致。日志服务在写入历史日志时的索引可以查询，但通常会有几分钟的延迟。数据...
写入日志到日志服务或从日志服务读取日志时，多条日志被打包为一个日志组，以日志组为单元进行写入与读取。该方式可减少读写次数，提高业务效率。每个日志组最大长度为5 MB。日志服务的基本数据模型请参见 LogHub数据模型。
日志服务支持通过Web Tracking自动采集终端用户浏览器的日志。本文介绍如何使用Web Tracking JavaScript SDK自动采集浏览器的用户日志。背景信息 您可以通过Web Tracking采集各种浏览器、小程序、iOS App或Android App的用户信息，例如：...
例如，执行如下查询分析语句关联日志服务中日志的ID和OSS文件中的userid，补全日志信息。说明 采集的日志中需要包含参数userid。select*from<logstore>l join<External storage>u on l.userid=u.userid 配置项 说明 示例 Logstore 需要查询...
当您使用Logtail采集日志发生异常时，可通过Logtail自助诊断工具查看Logtail客户端是否存在异常，并根据工具提示快速定位并解决问题。重要 Logtail自动诊断工具仅支持Linux系统的服务器。Logtail只采集增量日志。如果下发Logtail采集配置后...
本文主要介绍在日志服务控制台中使用日志查询功能时，查询不到日志的排查思路。未成功采集日志 如果未成功采集日志到日志服务，则无法查询到目标日志。请在采集的预览界面查看是否有日志。如果有，说明已采集到日志，建议您排查其他原因。...
解决方案：增加判断逻辑，如果字段 a 的值不是合法的时间戳格式，则将这条日志事件输出到 target2 中。e_if_else(str_isdigit(v("a")))，e_set("b",dt_fromtimestamp(v("a")))，e_output("target2"))数值运算前未进行数据类型转换。加工...
背景信息 代理方案 传统代理方案中，应用服务器需要作为中转站，处理所有来自移动端上传的日志。如果移动端应用日志数量较大或移动设备激增时，单点的应用服务器会成为数据上传的瓶颈。直传方案 客户端直传的其中一种方式是将AK写入客户端...
本视频介绍基于数据加工分析Java异常日志的解决方案。
本文介绍监控告警与日志中的常见问题。Datastream作业TM日志中抛NullPointerException如果没有详细错误栈怎么办？如何针对单个Class设置日志级别...解决方案 参考 配置作业日志输出 重新进行配置，根据实际情况对表格中说明的参数进行修改。
解决方案 将日志数据存储到不同Logstore 不需要配置多个Logtail采集配置，可以使用日志服务数据加工功能对日志进行复制，避免对同主机的其他服务性能造成影响。具体操作，请参见 复制Logstore数据。创建多个Logtail采集配置 主机场景 创建...
例如，华东1（杭州）地域中所有可用区的 PolarDB-X 数据库审计日志都会写入日志服务的Logstore polardbx-sqlaudit-cn-hangzhou-阿里云账户ID 中。Shard 默认创建5个 分区（Shard），并开启 管理Shard 功能。索引 日志服务自动为您创建索引...
云监控可以直接消费Logstore中日志数据，提供日志监控功能。通过将日志服务与云监控结合，形成了轻量级、全面、易用的日志监控解决方案。简单、易用，相比传统ELK方案，零编码即可享有完整监控解决方案。提供日志数据实时分析、监控图表...
解决方案 您可以在 CloudLens for SLS 应用中，找到任务运行日志所在Project下的任务监控大盘，然后重置索引。如何确认任务运行日志所在Project，请参见 准备工作。登录 日志服务控制台。在 日志应用 区域的 云产品Lens 页签中，单击 ...
本文介绍通过OpenTelemetry Ruby SDK将Ruby应用的Trace数据接入到日志服务的操作步骤。前提条件 已创建Trace实例。更多信息，请参见 创建Trace实例。已安装Ruby 2.0及以上版本的开发环境。已安装OpenTelemetry Ruby SDK。如果未安装，可...
日志服务的时序数据类型遵循Prometheus的 定义规范，在时序库中所有的数据都按照时序类型存储。时序数据由时序标识和数据点组成，相同时序标识的数据组成时间线。时序标识 每条时间线都有一个唯一的时序标识，由Metric name和Labels组成。...
Microsoft Windows Server 2008 Microsoft Windows Server 2012 Microsoft Windows Server 2016 Microsoft Windows Server 2019 Microsoft Windows Server 2022 Microsoft Windows 7 Microsoft Windows 10 Microsoft Windows Server ...
阿里云全球加速服务联合日志服务提供访问日志功能，用于记录所有访问终端节点的流量信息，帮助您检查访问控制规则、排查网络故障等。本文介绍全球加速访问日志功能相关的资产、费用以及使用限制等信息。简介 您可以为全球加速实例的一个...
解决方案 您可以在 CloudLens for SLS 应用中，找到任务运行日志所在Project下的任务监控大盘，然后重置索引。如何确认任务运行日志所在Project，请参见 准备工作。登录 日志服务控制台。在 日志应用 区域，单击 云产品lens 页签，单击 ...
Logtail IIS模式插件支持根据IIS日志格式定义将日志内容结构化，解析为多个键值对形式。IIS日志简介 Windows服务器会根据您所选择的日志格式（IIS、NCSA和W3C）生成IIS日志。日志格式#Fields:date time s-sitename s-ip cs-method cs-uri-...
本文介绍通过Jaeger C++ SDK将C++应用的Trace数据接入到日志服务的操作步骤。前提条件 已创建Trace实例。更多信息，请参见 创建Trace实例。已准备相关的开发环境，该环境需支持编译及运行Jaeger C++ SDK。如果您使用的是CMake编辑器，则其...
阿里云日志服务和企业云监控联合推出日志功能，将指标仓库数据推送到日志服务中，日志服务提供实时查询、可视化分析、告警、投递、加工等功能。本文介绍企业云监控指标仓库数据相关的资产详情、费用说明、使用限制等信息。资源说明 专属...
如果无论文件是否采集完成或仍有日志写入文件，您都希望文件在删除后的可控时间内释放文件句柄，则您可通过启动参数 force_release_deleted_file_fd_timeout 设置超时时间。具体操作，请参见 设置Logtail启动参数。首次日志采集行为 ...
如果无论文件是否采集完成或仍有日志写入文件，您都希望文件在删除后的可控时间内释放文件句柄，则您可通过启动参数 force_release_deleted_file_fd_timeout 设置超时时间。具体操作，请参见 设置Logtail启动参数。首次日志采集行为 ...
当您使用Logtail采集容器（标准容器、Kubernetes）日志时，如果采集状态异常，可以根据本文进行问题排查、运行状态检查等运维操作。问题排查 排查机器组心跳是否异常 排查容器日志采集是否异常 排查机器组心跳是否异常 您可以通过检查机器...
解决方案 检查目标Logstore 是否存在，重新配置编排语法，填入正确的Logstore的名称。Ak配置错误 加工规则 e_table_map(res_log_logstore_pull(endpoint="cn-hangzhou.log.aliyuncs.com",ak_id="xx",ak_secret="xx",project="sls-test",...
解决方案 针对沙盒网络对于采集、统一管理、弹性能力的诉求，阿里云提供了日志服务作为解决方案。在数据集中采集方面，日志服务提供50+数据接入手段，其中Logtail采集方式可用于统一采集阿里云ECS、自建IDC、其他云厂商等服务器上的日志。...
日志服务联合传统型负载均衡CLB推出7层访问日志功能，用于记录所有发送到CLB的请求的详细信息，包括请求时间、客户端IP地址、延迟、请求路径和服务器响应等。您可以通过7层访问日志分析了解客户端用户行为、客户端用户地域分布和进行问题...
本文以采集分析ECS的Nginx访问日志为例，介绍开通日志服务、创建日志项目与Logstore、Logtail采集日志、查询与分析日志等步骤，帮助您快速上手使用日志服务。前提条件 已有可用的ECS。更多信息，请参见 云服务器ECS快速入门。ECS服务器持续...
解决方案 针对数据来源分散、业务量迅猛增长、数据分析能力缺乏等挑战，阿里云提供了日志服务作为解决方案。统一日志采集 Web前端日志：通过日志服务WebTracking方式采集上报到日志服务。APP前端日志：通过日志服务iOS和Android SDK采集...
倒排索引是一种数据存储结构，由关键词和指向实际数据的逻辑指针组成，记录了特定文本内容出现在哪些日志中，用于快速根据关键词定位到具体数据行，类似于数据的目录。创建索引后，您才能对日志数据进行查询和分析。本文为您介绍日志服务...
日志服务支持使用用户自定义标识动态定义机器组，本文介绍创建自定义标识机器组的操作步骤。前提条件 已创建Project和Logstore。更多信息，请参见 创建项目Project 和 创建Logstore。已安装Logtail，安装步骤请参见 安装Logtail（Linux系统...
为不同数据源产生的日志创建日志库，例如：wechat-server（存储微信服务器访问日志）wechat-app（存储微信服务器应用日志）wechat-error（错误日志）alipay-server alipay-app deliver-app（送货员App状态）deliver-error（错误日志）web-...
本文通过代码示例介绍如何使用GetHistograms接口查询某时间区间中日志的分布数量。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_ACCESS_KEY_...
调用GetLogs接口查询指定Project下某个Logstore中的原始日志数据，返回结果显示某时间区间中的原始日志。接口说明 说明 日志服务支持创建定时SQL任务。具体操作，请参见 创建定时SQL任务。请求语法中Host由Project名称和日志服务Endpoint...
Web应用防火墙（WAF）的日志服务功能帮助您采集并存储WAF防护对象（云产品实例、域名）的Web访问及攻击防护日志，并基于阿里云日志服务，提供查询分析、统计图表、报警服务、下游计算对接与投递等能力，帮助您专注于分析，远离琐碎的查询和...
操作系统 Logtail Logtail安装目录 Linux Logtail（64位程序）/usr/local/ilogtail Windows（64位操作系统）Logtail（64位程序）C:\Program Files\Alibaba\Logtail Logtail（32位程序）C:\Program Files(x86)\Alibaba\Logtail 说明 Windows...
输出事件 e_output、e_coutput 输出日志到指定的Logstore中，并可配置输出时的topic、source、tag和shard hash信息。e_output：执行到e_output函数时，输出日志到指定的Logstore中，且对应的日志不再执行后面的加工规则。e_coutput：执行到...
本文介绍使用日志服务前的常见问题。什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据？日志服务支持哪些数据接入方式？阿里云会使用我在日志服务上存储的数据吗？阿里云是否会将自己的数据...
调用GetContextLogs接口查询指定日志前（上文）后（下文）的若干条日志。接口说明 上下文查询的时间范围为起始日志的前后一天。Host 由 Project 名称和日志服务 Endpoint 构成，您需要在 Host 中指定 Project。已创建并获取 AccessKey。更...