logstash使用date處理時間有幾種方式？

logstash使用date處理時間有幾種方式？針對這個問題，今天小編總結了這篇文章，希望能幫助更多想解決這個問題的朋友找到更加簡單易行的辦法。

創(chuàng)新互聯(lián)是一家集網(wǎng)站建設,川匯企業(yè)網(wǎng)站建設,川匯品牌網(wǎng)站建設,網(wǎng)站定制,川匯網(wǎng)站建設報價,網(wǎng)絡營銷,網(wǎng)絡優(yōu)化,川匯網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè)，幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強企業(yè)競爭力?？沙浞譂M足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時我們時刻保持專業(yè)、時尚、前沿，時刻以成就客戶成長自我，堅持不斷學習、思考、沉淀、凈化自己，讓我們?yōu)楦嗟钠髽I(yè)打造出實用型網(wǎng)站。

1、第一種，直接在配置文件中自定義時間格式

這是tomcat配置文件中的一段日志時間配置，按照這樣的配置，那么輸出的日志是這樣子的：

然后你繼續(xù)在logstash中這樣子配置

此時logstash就不會報"_dateparsefailed"錯誤了。

這種形式在nginx、apache等web服務器中配置是最好的，也比較方便分析。

2、第二種，帶有中括號的（其實跟上面是一回事）

日志本身輸出是這樣子的

[07/Feb/2018:16:24:19 +0800]

帶有一對中括號

那么在grok插件中這樣子定義就行：

\[%{HTTPDATE:timestamp}\]

date插件可以直接轉換，如下：

最后的效果是這樣子的

這樣子也不會報錯

3、ISO8601形式

在日志文件中原生日志是這樣子的：

2019-03-19 13:08:07.782

重點是后面的”.782“，后面附加以毫秒為單位的。

 那么grok插件中可以這樣子定義匹配的規(guī)則：

此時date插件可以這樣子定義：

 date {
                match => [ "access_time","MMM  d HH:mm:ss", "MMM dd HH:mm:ss", "ISO8601"]
        }

上面的形式?jīng)]有寫錯，直接復制粘貼到配置文件即可

最后匹配如下：

這樣子也不會報”_dateparsefailed“錯誤。

最后附加一張時間匹配規(guī)則表，平時可做參考

4、根據(jù)時間戳來轉換數(shù)據(jù)。

在MySQL的慢查詢日志中收集時，由于某些情況下只能根據(jù)時間戳來確定時間，那么我們就必須使用轉換的方案了。主要是將時間戳轉換成UNIX風格的時間，比如：

mysql慢查詢日志的時間是這樣子的：

那么我們在logstash的配置文件中使用的date插件這樣子來寫：

這樣子就可以匹配成功了。

上面的“timestamp_mysql”是我在grok插件中的匹配后的時間賦值，比如：

%{NUMBER:timestamp_mysql};

4、ISO8601形式

時間日志：

2018-02-09T10:57:42+08:00

此時在grok中可以這么寫：

grok {
        match => { "message" ; "{TIMESTAMP_ISO8601:localtime}
}

而在時間轉存到@timestamp有兩種寫法可以供使用

date {
        match => ["localtime", "yyyy-MM-dd'T'HH:mm:ssZZ"]
        target => "@timestamp"
}

或者是

date {
        match => ["localtime", "ISO8601"]
    }

都可以實現(xiàn)ISO8601時間的匹配格式

 看完上述內容，你們掌握logstash使用date處理時間的方法了嗎？如果還想學到更多技能或想了解更多相關內容，歡迎關注創(chuàng)新互聯(lián)行業(yè)資訊頻道，感謝各位的閱讀！

當前文章：logstash使用date處理時間有幾種方式？
分享URL：http://muchs.cn/article44/pphghe.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站導航、虛擬主機、、App設計、微信公眾號、建站公司

廣告

聲明：本網(wǎng)站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經(jīng)允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)