日志服务(原SLS)2017-12 月功能发布

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: 日志服务12月功能已上线,包括美东Region、嵌入式客户端(C-Producer)、Flink Connector、 CLI、API网关打通、告警优化、控制台快速分析等功能,欢迎试用

[新地域] 美东(弗吉尼亚)访问入口

[新功能] 嵌入式/物联网IoT日志客户端(C-Producer)文档, 使用案例

面向嵌入式、物联网(IoT)客户端C-Producer Library定位为一个“轻量级Logtail”,虽没有实时配置管理机制,但具备除此之外70%功能,包括:

  • 多租户支持:可以对多种日志(例如Metric,DebugLog,ErrorLog)进行优先级
  • 分级处理:同时配置多个客户端,每个客户端可独立配置采集优先级、目的project/logstore等
  • 支持上下文查询:同一个客户端产生的日志在同一上下文中,支持查看某条日志前后相关日志
  • 并发发送/断点续传:支持缓存上线可设置,超过上限后日志写入失败

还有一些专门为IoT准备功能,大大降低数据采集门槛:

  • 本地调试:支持将日志内容输出到本地,并支持轮转、日志数、轮转大小设置
  • 细粒度资源控制:支持针对不同类型数据/日志设置不同的缓存上线、聚合方式
  • 日志压缩缓存:支持将未发送成功的数据压缩缓存,减少设备内存占用

[新功能] Flink Connector 文档, 使用案例

可以方便、快捷Flink开发环境中进行日志服务LogHub中数据开发,包括消费者(Consumer)和生产者(Producer)两个部分。Flink Connector支持如下特性:

  • 设置消费起始位置,方便用户进行消费点的设置
  • 监控,实时获取当前数据消费状态,并通过设置告警知晓延迟的任务
  • 支持消费实例弹性伸缩、容灾、异常恢复,无需关心细节
  • 提供消费级exactly once语义支持,保证数据精确性

[新功能] 命令行工具(CLI)发布 工具地址, 文档

跨平台命令行工具,支持常见所有API操作,并提供日志查询结果导出、批量创建、批量复制等功能:

  • 支持几乎所有50多个日志服务的REST接口
  • 支持多账号, 方便测试与跨域操作
  • 日志查询完整性查询与自动分页.
  • 支持多种方式存储和配置秘钥, 适用于各种情况
  • 支持通过命令行或者文件的形式输入复杂参数, 并校验参数内容格式
  • 支持JMES过滤器对结果进行进一步处理, 方便选择特定信息

[新功能] Nginx日志向导 使用案例

新增Nginx日志向导:在控制台上根据Nginx配置文件一键生成索引、视图、导入(OSS/MaxCompute)等选项,方便用户进行一站式配置

[新功能] API网关日志向导 文档 , 使用案例

推出API网关日志一键打通功能,方便开发者进行日志分析,包括:

  • 秒级实时采集能力,99.9%情况下10秒内即可消费
  • 通过LogHub功能实时计算、流计算对接
  • 通过LogShipper与数据仓库对接
  • 利用LogSearch/Analytics功能进行实时日志查询、分析
  • 通过仪表盘、告警等功能进行线上监控

[新功能] 告警功能升级 文档

  • 新增新增钉钉,自定义WebHook两种新通知渠道:用户可以在通知内容和方式上进行自定义配置并推送自定义地址。
  • 对告警内容进行优化:新增上下文、账号归属人的信息,方便进行问题定位

[控制台] 查询页面新增快速分析功能

提供命中结果1W条数据Top10统计与分布,示例如下:

image.png

[控制台] 新增数据接入向导(Wizard)

数据接⼊向导(Wizard)功能,快速完成数据的采集、存储、分析、离线投递, 降低⽤户使⽤⽇志服务⻔槛,⽬前⽀持的数据源以及⽀持配置如下:

image.png

[控制台] 自动刷新功能

⽀持定时刷新功能,设置时⻓定期刷新所有图表时间范围
image.png

[控制台] 过滤功能

可以指定过滤条件进行视图生成逻辑

image.png

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
22天前
|
Java
使用Java代码打印log日志
使用Java代码打印log日志
77 1
|
24天前
|
Linux Shell
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
78 1
|
27天前
|
SQL 关系型数据库 MySQL
MySQL数据库,可以使用二进制日志(binary log)进行时间点恢复
对于MySQL数据库,可以使用二进制日志(binary log)进行时间点恢复。二进制日志是MySQL中记录所有数据库更改操作的日志文件。要进行时间点恢复,您需要执行以下步骤: 1. 确保MySQL配置文件中启用了二进制日志功能。在配置文件(通常是my.cnf或my.ini)中找到以下行,并确保没有被注释掉: Copy code log_bin = /path/to/binary/log/file 2. 在需要进行恢复的时间点之前创建一个数据库备份。这将作为恢复的基准。 3. 找到您要恢复到的时间点的二进制日志文件和位置。可以通过执行以下命令来查看当前的二进制日志文件和位
|
1月前
|
监控 Shell Linux
【Shell 命令集合 系统管理 】Linux 自动轮转(log rotation)日志文件 logrotate命令 使用指南
【Shell 命令集合 系统管理 】Linux 自动轮转(log rotation)日志文件 logrotate命令 使用指南
50 0
|
1月前
|
存储 数据库
ALTER MATERIALIZED VIEW LOG :语句来更改现有物化视图日志的存储特征或类型。
`ALTER MATERIALIZED VIEW LOG` 语句用于修改已有的物化视图日志的存储属性或类型。配合示例中的动画图像(由于格式限制无法显示),该语句帮助优化数据库的性能和管理。
44 0
|
2天前
|
Java
log4j异常日志过滤规则配置
log4j异常日志过滤规则配置
11 0
|
15天前
|
运维 安全 Ubuntu
`/var/log/syslog` 和 `/var/log/messages` 日志详解
`/var/log/syslog` 和 `/var/log/messages` 是Linux系统的日志文件,分别在Debian和Red Hat系发行版中记录系统事件和错误。它们包含时间戳、日志级别、PID及消息内容,由`rsyslog`等守护进程管理。常用命令如`tail`和`grep`用于查看和搜索日志。日志级别从低到高包括`debug`到`emerg`,表示不同严重程度的信息。注意保护日志文件的安全,防止未授权访问,并定期使用`logrotate`进行文件轮转以管理磁盘空间。
19 1
|
15天前
|
网络协议 应用服务中间件 Linux
centos7 Nginx Log日志统计分析 常用命令
centos7 Nginx Log日志统计分析 常用命令
27 2
|
16天前
|
Ubuntu Linux 网络安全
/var/log/auth.log日志详解
`/var/log/auth.log`是Linux(尤其是Debian系如Ubuntu)记录身份验证和授权事件的日志文件,包括登录尝试(成功或失败)、SSH活动、sudo使用和PAM模块的操作。登录失败、SSH连接、sudo命令及其它认证活动都会在此记录。查看此日志通常需root权限,可使用`tail`、`less`或`grep`命令。文件内容可能因发行版和配置而异。例如,`sudo tail /var/log/auth.log`显示最后几行,`sudo grep "failed password" /var/log/auth.log`搜索失败密码尝试。
63 8
|
28天前
|
监控 Java 测试技术
日志框架到底是Logback 还是 Log4j2
日志框架到底是Logback 还是 Log4j2
20 0

相关产品

  • 日志服务