日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪(fǎng)問(wèn) 生活随笔!

生活随笔

當(dāng)前位置: 首頁(yè) > 编程资源 > 编程问答 >内容正文

编程问答

elk-logstash时区问题

發(fā)布時(shí)間:2025/3/14 编程问答 22 豆豆
生活随笔 收集整理的這篇文章主要介紹了 elk-logstash时区问题 小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

http://www.cnblogs.com/wangpei886/p/8043021.html

使用版本:elk6.0

配置文件:logstash.confg

output {elasticsearch {id => "logstash-%{+YYYY.MM.dd}"} }

?

問(wèn)題:如圖14號(hào)的數(shù)據(jù),結(jié)果采集到了15號(hào),慢了8小時(shí),希望得到的結(jié)果,是凌晨0點(diǎn)索引自動(dòng)切換

?

原因: 原來(lái)Logstash用的UTC時(shí)間,?logstash在按每天輸出到elasticsearch時(shí),因?yàn)闀r(shí)區(qū)使用utc,造成每天8:00才創(chuàng)建當(dāng)天索引,而8:00以前數(shù)據(jù)則輸出到昨天的索引

? ? ? ? ?查看一些論壇,不建議更改源碼,因?yàn)閘ogstash和elasticsearch是按照UTC時(shí)間的,kibana卻是按照正常你所在的時(shí)區(qū)顯示的

解決:修改logstash配置

? ? ? ? ??

logstash在按每天輸出到elasticsearch時(shí),因?yàn)闀r(shí)區(qū)使用utc,造成每天8:00才創(chuàng)建當(dāng)天索引,而8:00以前數(shù)據(jù)則輸出到昨天的索引
在logstash filter 解決
  1. 增加一個(gè)字段,計(jì)算timestamap+8小時(shí)
  

ruby {# 新增索引日期,解決地區(qū)時(shí)差問(wèn)題code => "event.set('index_date', event.get('@timestamp').time.localtime + 8*60*60)"}

?


  2. 用mutate插件先轉(zhuǎn)換為string類(lèi)型,gsub只處理string類(lèi)型的數(shù)據(jù),在用正則匹配,最終得到想要的日期
  # 定義索引名時(shí)間

mutate {convert => ["index_date", "string"]gsub => ["index_date", "T([\S\s]*?)Z", ""]gsub => ["index_date", "-", "."]}

? ? ? 3.output配置

??

elasticsearch {hosts => ["localhost:9200"]index => "log1-%{index_date}"}

?

?

* 這里是取系統(tǒng)時(shí)間,你可以取你日志里面的時(shí)間戳來(lái)做索引名

或許有其他更好的方案!請(qǐng)留言告知

轉(zhuǎn)載于:https://www.cnblogs.com/wangpei886/p/8043021.html

總結(jié)

以上是生活随笔為你收集整理的elk-logstash时区问题的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。