如何使用logstash设置cumul过滤器?
我现在发现弹性搜索,kibana和docker的logstash。(版本7.1.1)三个容器运行良好 我有一些数据文件,其中包含以下行:如何使用logstash设置cumul过滤器?,logstash,logstash-configuration,Logstash,Logstash Configuration,我现在发现弹性搜索,kibana和docker的logstash。(版本7.1.1)三个容器运行良好 我有一些数据文件,其中包含以下行: foo=bar type=alpha T=20180306174204527 我的logstash.conf包含: input { file { path => "/tmp/data/*.txt" start_position => "beginning" } } filter { kv { fi
foo=bar type=alpha T=20180306174204527
我的logstash.conf包含:
input {
file {
path => "/tmp/data/*.txt"
start_position => "beginning"
}
}
filter {
kv {
field_split => "\t"
value_split => "="
}
}
output {
elasticsearch { hosts => ["elasticsearch:9200"] }
stdout {
codec => rubydebug
}
}
我处理这些数据:
{
"host" => "07f3051a3bec",
"foo" => "bar",
"message" => "foo=bar\ttype=alpha\tT=20180306174204527",
"T" => "20180306174204527",
"@timestamp" => 2019-06-17T13:47:14.589Z,
"path" => "/tmp/data/ucL12018_03_06.txt",
"type" => "alpha"
"@version" => "1",
}
工作的第一步完成了。
现在我想添加一个过滤器,将keyT
的值转换为时间戳
{
...
"T" => "2018-03-06T17:42:04.527Z",
"@timestamp" => 2019-06-17T13:47:14.589Z,
...
}
我不知道怎么做。我试图在
kv
过滤器之后添加第二个过滤器,但在添加新文件时没有任何变化。在kv
过滤器之后添加此过滤器:
date {
match => [ "T", "yyyyMMddHHmmssSSS" ]
target => "T"
}
过滤器将尝试使用提供的模式解析字段
T
,以创建一个日期,该日期将写入T
字段(默认情况下,它将覆盖@timestamp
字段)。也许这会起作用:date{match=>[“T”,“yyyymmddhhmmssss”]target=>“T”}
谢谢@baudsp!当我在kv滤波器的闭合支架后添加您的线路时,它会起作用。如果你愿意,你可以回答我验证你的答案。