kibana的field的类型转换
匿名 | 发布于2017年11月27日 | 阅读数:9248
问题描述:我从message中截取一段日志,是一串数字,但是类型是string,我想转换成integer or float。根据官网的资料进行配置,但是没有用,kibana里面显示的还是string类型的。
日志类型:截取RT:2中的2这个数字
2017-11-27 14:04:40,941|nioEventLoopGroup-3-247|9762e6fcad4c43f29d476d153827e7bb|dispatch,ME:sendVerifyMessage|RT:2|ET:T|INPUT:{bussinessType=******, limitCode=**********, name=WAP***注册, terminalType=02, msgRemark=CODESIGN, instID=******, mobile=**********}|OUTPUT:{surplusOnceSend=0, responseCode=9551, surplusDaySend=0, surplusDeviceSend=0, responseMsg=达到当天短信发送最大量, bussinessNo=null}
ELK版本号:
logstash(agent):1.5.0
logstash(index):5.5.0
elasticsearch:5.5.0
kibana:5.5.0
logstash(agent)端配置文件(部分配置)
mutate {
split => {"message" => "RT:"}
add_field => { "RT_time" => "%{[message][1]}" }
}
mutate {
split => {"RT_time" => "|"}
add_field => {"time" => "%{[RT_time][0]}"}
convert => {"time" => "integer"}
remove_field => ["RT_time"]
}
求教了各位,或者有没有其他办法进行类型转换,谢谢了。
日志类型:截取RT:2中的2这个数字
2017-11-27 14:04:40,941|nioEventLoopGroup-3-247|9762e6fcad4c43f29d476d153827e7bb|dispatch,ME:sendVerifyMessage|RT:2|ET:T|INPUT:{bussinessType=******, limitCode=**********, name=WAP***注册, terminalType=02, msgRemark=CODESIGN, instID=******, mobile=**********}|OUTPUT:{surplusOnceSend=0, responseCode=9551, surplusDaySend=0, surplusDeviceSend=0, responseMsg=达到当天短信发送最大量, bussinessNo=null}
ELK版本号:
logstash(agent):1.5.0
logstash(index):5.5.0
elasticsearch:5.5.0
kibana:5.5.0
logstash(agent)端配置文件(部分配置)
mutate {
split => {"message" => "RT:"}
add_field => { "RT_time" => "%{[message][1]}" }
}
mutate {
split => {"RT_time" => "|"}
add_field => {"time" => "%{[RT_time][0]}"}
convert => {"time" => "integer"}
remove_field => ["RT_time"]
}
求教了各位,或者有没有其他办法进行类型转换,谢谢了。
2 个回复
chenzilong444
赞同来自:
liguobao
赞同来自:
如果是的话,把es自动生成的index中你的字段改一下拿到新的mapping index json,然后用这个json创建一个新的mapping index,
然后logstash 指定成上面创建的index,重启一下logstash,新的数据就好了.
如:
创建mapping index
PUT /logstash-kube
{
"mappings": {
"kube-logs": {
"properties": {
"@timestamp": {
"type": "date"
},
"response_time": {
"type": "integer"
},
"size": {
"type": "integer"
}
}
}
}
}