Fluentd插件：解析插件概述

“ 解析插件用于适配各种源数据”

我们知道，Fluentd是一个通用的日志采集框架，一个很重要的原因就在于它可以处理各种各样的源数据。

处理数据的第一步就是要识别这些数据的格式。

有些输入插件（如in_tail、in_syslog、in_tcp和in_udp）不能解析用户自定义格式的日志。比如，某些基于上下文环境的日志记录，无法使用用正则来解析。

这时候就要用到解析插件了。

Fluentd提供了可插拔的解析系统，用户可自己创建解析插件，来识别自定义的数据格式。

【使用方法】

对于支持<parser>指令的输入插件，可以直接通过名称来引用解析插件。

比如：

<source>
  @type tail
  path /path/to/input/file
  <parse>
    @type nginx
    keep_time_key true
  </parse>
</source>

这个配置片段通过在in_tail中引用parser_nginx来解析nginx的access日志。

支持<parser>的输入插件有：

• in_tail
• in_tcp
• in_udp
• in_syslog
• in_http

【解析插件列表】

1. 内置解析插件
   • regexp
   • apache2
   • apache_error
   • nginx
   • syslog
   • csv
   • tsv
   • ltsv
   • json
   • msgpack
   • multiline
   • none
2. 第三方解析插件
   • grok
   • multi-format-parser
   • protobuf
   • avro

后续，我们会一起了解一下常见解析插件的用法。