配置文件位於/etc/filebeat/filebeat.yml,就是filebeat的主配置文件
打開文件filebeat.yml,搜索multiline:,默認是注釋的,常用的有如下三個配置:
multiline.pattern: '^\<|^[[:space:]]|^[[:space:]]+(at|\.{3})\b|^Caused by:' #正則,自己定義,一個表示可以匹配多種模式使用or 命令也就是“|” multiline.negate: false #默認是false,匹配pattern的行合並到上一行;true,不匹配pattern的行合並到上一行 multiline.match: after #合並到上一行的末尾或開頭 #優化參數 multiline.max_lines: 500 #最多合並500行 multiline.timeout: 5s #5s無響應則取消合並
總的來說,multline 是模塊名,filebeat爬取的日志滿足pattern的條件則開始多行匹配,negate 設置為false 是需要的,因為我們的多行語句都需要連着上一行,match 合並到末尾。
由於正則表達是你需要實際匹配你自己想要滿足的條件,如果直接fillebet 調試,會非常麻煩,可以參考下面這個地址
多行合並的正則表達式測試地址:http://play.flysnow.org/
附上我的調試腳本,看着一下pattern和content就可以
package main
import (
"fmt"
"regexp"
"strings"
)
var pattern = `^[[:space:]]`
var
var negate = false
var content = `放入自己的內容`
func main() {
regex, err := regexp.Compile(pattern)
if err !=nil {
fmt.Println("Failed to compile pattern: ", err)
return
}
lines := strings.Split(content, "\n")
fmt.Printf("matches\tline\n")
for _, line := range lines{
matches := regex.MatchString(line)
if negate {
matches = !matches
}
fmt.Printf("%v\t%v\n", matches, line)
}
}
最后附上官網地址:https://www.elastic.co/guide/en/beats/filebeat/current/multiline-examples.html
多調試,肯定不會立刻成功的。
