Kubernetes日志收集的解決方案是什么

這期內容當中小編將會給大家?guī)碛嘘PKubernetes日志收集的解決方案是什么,文章內容豐富且以專業(yè)的角度為大家分析和敘述,閱讀完這篇文章希望大家可以有所收獲。

創(chuàng)新互聯(lián)公司擁有網站維護技術和項目管理團隊,建立的售前、實施和售后服務體系,為客戶提供定制化的成都做網站、成都網站設計、網站維護、服務器托管機柜解決方案。為客戶網站安全和日常運維提供整體管家式外包優(yōu)質服務。我們的網站維護服務覆蓋集團企業(yè)、上市公司、外企網站、商城建設、政府網站等各類型客戶群體,為全球上千家企業(yè)提供全方位網站維護、服務器維護解決方案。

在kubernetes集群環(huán)境下日志收集組件選型及方案

1、需求來源

在大規(guī)模集群部署的場景下,容器實例會部署到多個節(jié)點上,節(jié)點以及節(jié)點上的應用產生的日志會隨之分散在各個容器的主機上,傳統(tǒng)的集群應用大多在本地持久化,這給整個應用系統(tǒng)的日志監(jiān)控和故障排除帶來了很大的挑戰(zhàn),而在Kubernetes大規(guī)模集群環(huán)境下,需要考慮把分散在各個節(jié)點上的日志統(tǒng)一采集,統(tǒng)一管理,統(tǒng)一展示。

2、日志來源

  • 主機內核日志

主機內核產生的錯誤日志通??梢詭椭_發(fā)者診斷因為主機或者OS異常而帶來的服務異常,比如網絡異常,文件系統(tǒng)異常等。

  • 核心組件日志

docker的日志幫助用戶查看pod內部容器的運行狀態(tài)、APIServer的日志,Scheduler產生的日志能夠幫助用戶查看Kubernetes本身運行產生的日志。

  • 應用自身日志

通常業(yè)務升級或者在某種場景下出現(xiàn)異常,可以通過日志進行排查。

3、日志收集方式

  • 宿主機文件

Pod應用的數據存儲在宿主機文件系統(tǒng)中,比如我們通過hostpath聲明把業(yè)務日志存儲在某個目錄下,通常會在每個節(jié)點上以DaemonSet形式部署fluentd或者filebeat,將宿主機的文件系統(tǒng)掛載到fluentd或者filebeat Pod中內進行采集,當然我們也可以采集其它日志(操作系統(tǒng)產生日志,Kubernetes組件產生日志等)如下圖所示:

Kubernetes日志收集的解決方案是什么

  • 容器內的文件

一種sidecar的日志收集模式,將日志收集容器和應用容器部署在同一個pod中,通過共享volume的形式實現(xiàn)對容器日志的收集,然后輸出到節(jié)點上,這種收集一般針對日志準確性要求比較高的應用,通過這種方式我們可以定制當前容器內的文件名、pod的ip等。如下圖所示:

Kubernetes日志收集的解決方案是什么

  • 容器內直接輸出

Pod應用直接將數據存儲在共享文件系統(tǒng)中(NFS、hdfs、ceph、GlusterFS等)。nfs日志存儲使用介紹 這種情況下我們可以直接在當前文件系統(tǒng)中查看日志,或者在存儲日志所在節(jié)點部署日志收集pod,把日志傳輸到日志系統(tǒng)。如下圖所示:

Kubernetes日志收集的解決方案是什么

4、日志收集存儲實例

日志存儲和查詢方面比較建議使用ELK(logstash耗費資源較多,建議換成filebeat或者fluentd進行日志收集傳遞)成熟解決方案,因為ES原生支持多租戶的使用場景,支持通過建立不同的索引方式來區(qū)分不同用戶,不同業(yè)務類型的數據; fluentd在啟動后會根據配置文件中的logstash_prefix,在ES中生成指定前綴的索引,在Kibana界面創(chuàng)建顯示索引時,可以根據之前日志前綴設定匹配和監(jiān)控產生日志數據,如下圖所示:

Kubernetes日志收集的解決方案是什么

針對大規(guī)模的持續(xù)增長的應用業(yè)務日志,在傳統(tǒng)單機業(yè)務模式下會存儲固定幾天的數據,在萬物互聯(lián)的今天,我們不但需要快速實時的監(jiān)控集群中的日志數據,更需要將這些數據進行持久化存儲,方便我們基于這些數據進行數據挖掘、統(tǒng)計、分析建?;蛘吒鶕脩舻男袨槿罩咀鲱A測工作,當然這些工作我們可以使用大數據分析解決方案(hadoop+spark)對數據進行具體分析管理。

本次主要介紹了Kubernetes集群模式下三種日志收集模式,結合實際使用場景采用不同的日志收集方案滿足具體需求。

上述就是小編為大家分享的Kubernetes日志收集的解決方案是什么了,如果剛好有類似的疑惑,不妨參照上述分析進行理解。如果想知道更多相關知識,歡迎關注創(chuàng)新互聯(lián)行業(yè)資訊頻道。

網頁名稱:Kubernetes日志收集的解決方案是什么
文章源于:http://muchs.cn/article48/iidoep.html

成都網站建設公司_創(chuàng)新互聯(lián),為您提供建站公司、電子商務、軟件開發(fā)網站設計公司、標簽優(yōu)化、定制網站

廣告

聲明:本網站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯(lián)

外貿網站建設