Filebeat Output配置简介

filebeat Input配置简介

beats output

Filebeat Filter 举例

Filebeat Filter 配置

Input 时处理

 Include_lines 达到条件读入这些行

 exclude_lines  达到条件不读

 exclude_files 文件名符合条件时不读取文件

Output 前处理--Processor

 drop_event 满足条件时不输出扔掉

 drop_fields 扔掉某个字段

 Decode_json_fields 整条数据中符合json的字段做json解析

Include_fields 取某个字段

Filebeat Output 配置

Filebeat Input配置

Filebeat Filter配置

filebeat filter 的处理能力

input 时处理：

include_lines : 达到某些条件的时候，读入这一行

exclude_lines ：达到某些条件的时候，不读入这一行

exclude_files：当文件名符合某些条件的时候，不读取这个文件

output 前处理 --Processor

drop_event ：读取到某一条，满足了某个条件，不输出

drop_fields ：读取到某一条，满足了某个条件，不输出这个字段

Decode_json_fields ：把这条数据里面符合json格式的字段，去做json的解析

Include_fields ：加入一些字段，或者是只想取数据里面的某一些字段

Filebeat 输出配置

Filebeat配置

Filebeat Filter配置简介02

Filebeat Filter配置简介

Filebeat Output配置简介

filebeat filter 的处理能力

input 时处理

include_lines : 达到某些条件的时候，读入这一行

exclude_lines ：达到某些条件的时候，不读入这一行

exclude_files：当文件名符合某些条件的时候，不读取这个文件

output 前处理 --Processor

drop_event ：读取到某一条，满足了某个条件，不输出

drop_fields ：读取到某一条，满足了某个条件，不输出这个字段

Decode_json_fields ：把这条数据里面符合json格式的字段，去做json的解析

Include_fields ：加入一些字段，或者是只想取数据里面的某一些字段

filebeat  output 配置

有哪些output 对象？

console ：标准输出 ；

elasticsearch

logstash

kafka

redis

file --把一个日志文件输出到另一个日志文件中

Filebeat 配置简介

input 配置

yaml语法

filebeat 其中的一个组成是 ：prospector ；在配置文件里就会有一个 prospectors的配置文件，而且 filebeat 不止有一个 prospector ，可以有多个；在yaml语法里，数组的形式是由 “-”来实现的 。

每一个prospector 都有一个输入的类型 input_type ；他目前有两个类型 log 和stdin(标准输入---标准输入把日志文件传给filebeat，然后进行处理) ； 

log 下会有一个 paths ,他也是一个数组的形式，所以也需要 ”-”来实现。

filter配置