日志服务数据加工最佳实践: 特定格式文本的加工

成喆 2019-08-02

python etl 函数 日志 日志服务 Json 工单 request aliyun 数据加工


本部分实践案例主要是根据在实际工作中的工单需求产生。接下来将从工单需求,加工编排(解决方案)等几个方面给读者解答如何使用LOG DSL编排解决任务需求。

场景:非标准JSON对象转JSON展开

需要对收集的dict数据进行二次嵌套展开操作。解决方案是先将dict数据转成json数据,然后使用e_json函数进行展开即可。

原始日志

在控制台收集到的日志格式是dict格式,如下所示:

content: {
    'referer': '-',
    'request': 'GET /phpMyAdmin',
    'status': 404,
    'data-1': {
        'aaa': 'Mozilla',
        'bbb': 'asde'
    },
    'data-2': {
        'up
登录 后评论
下一篇
corcosa
12061人浏览
2019-10-08
相关推荐
日志服务数据加工:功能概述
11851人浏览
2019-06-10 05:47:16
日志服务数据加工:概念篇
1579人浏览
2019-07-18 23:21:46
0
0
0
829