k8s&docker空間使用分析與清理-創(chuàng)新互聯(lián)

目錄

創(chuàng)新互聯(lián)建站長(zhǎng)期為超過(guò)千家客戶(hù)提供的網(wǎng)站建設(shè)服務(wù)，團(tuán)隊(duì)從業(yè)經(jīng)驗(yàn)10年，關(guān)注不同地域、不同群體，并針對(duì)不同對(duì)象提供差異化的產(chǎn)品和服務(wù)；打造開(kāi)放共贏平臺(tái)，與合作伙伴共同營(yíng)造健康的互聯(lián)網(wǎng)生態(tài)環(huán)境。為湛河企業(yè)提供專(zhuān)業(yè)的網(wǎng)站建設(shè)、成都網(wǎng)站建設(shè)，湛河網(wǎng)站改版等技術(shù)服務(wù)。擁有10年豐富建站經(jīng)驗(yàn)和眾多成功案例,為您定制開(kāi)發(fā)。

1. 前言

2. 常見(jiàn)問(wèn)題場(chǎng)景

3. docker 磁盤(pán)空間使用分析及處理

4. 總結(jié)

1. 前言

使用 Docker 運(yùn)行業(yè)務(wù)一段時(shí)間后，可能會(huì)出現(xiàn)宿主節(jié)點(diǎn)的磁盤(pán)容量占用高，導(dǎo)致宿主機(jī)磁盤(pán)空間不足等異常，對(duì)業(yè)務(wù)造成影響。本文對(duì) Docker 的空間占用進(jìn)行匯總分析，以及對(duì)應(yīng)的清理操作進(jìn)行說(shuō)明，希望能幫到大家~

2. 常見(jiàn)問(wèn)題場(chǎng)景

一般來(lái)說(shuō)，docker包括鏡像（image）、容器（container）和數(shù)據(jù)卷（volumn）三部分，日常遇到的docker空間占用問(wèn)題，基本也是從這三方面入手。典型的場(chǎng)景有：

  • json.log文件過(guò)大
  • 鏡像較多占用空間大
  • local volumn占用空間大
    基本上來(lái)說(shuō)，docker 空間占用大，都是圍繞上面幾方面來(lái)開(kāi)展分析的。下面說(shuō)說(shuō)空間分析及處理應(yīng)對(duì)措施
3. docker 磁盤(pán)空間使用分析及處理
  • 排查命令： docker system df
    命令可以查詢(xún)鏡像(Images)、容器(Containers)和本地卷(Local Volumes)等空間占用情況，如下效果
docker system df 
TYPE            TOTAL     ACTIVE    SIZE      RECLAIMABLE
Images          17        15        6.016GB   1.001GB (16%)
Containers      29        26        4.444MB   0B (0%)
Local Volumes   7         4         465.5MB   232.7MB (50%)
Build Cache     0         0         0B        0B

3.1 image鏡像占用分析及解決

通過(guò) docker system df命令，查看Images鏡像占用的空間大小，可以看到總的鏡像數(shù)以及在用的鏡像數(shù)?？梢酝ㄟ^(guò)以下命令進(jìn)行清理，從而達(dá)到釋放空間占用的作用

# 通過(guò)命令清除無(wú)用的鏡像，停止的容器和Volumes
docker system prune -a 
# 也可以通過(guò)命令手動(dòng)刪除指定鏡像
docker rmi 鏡像ID

3.2 json.log占用分析及解決

容器鏡像數(shù)較多導(dǎo)致的空間占用是最常見(jiàn)也最容易處理的場(chǎng)景，除通過(guò)docker system prune清理外，也可通過(guò)docker rmi的命令進(jìn)行清理。除此之外 ，還有常見(jiàn)的空間占用場(chǎng)景，如json.log文件過(guò)大。當(dāng)容器運(yùn)行一段時(shí)間后，容器的控制臺(tái)日志輸出過(guò)大的時(shí)候，會(huì)導(dǎo)致一個(gè)以容器ID-json命名的Log文件，持續(xù)增大，一般是在/var/lib/docker/containers/目錄下，可以通過(guò)如下命令查看json.log占用

ls -lh $(find /var/lib/docker/containers/ -name *-json.log)
-rw-r----- 1 root root    0 Dec 27 14:22 /var/lib/docker/containers/021451de5bbaf2ac68839d4b9f3a4605be673d4286b3963ee2bddb1a3d01b6d2/021451de5bbaf2ac68839d4b9f3a4605be673d4286b3963ee2bddb1a3d01b6d2-json.log
-rw-r----- 1 root root  81K Dec 27 16:27 /var/lib/docker/containers/0413a938fff4603b9d898b680ba16b11b02a7cac25ddfaea318c15f1398668fd/0413a938fff4603b9d898b680ba16b11b02a7cac25ddfaea318c15f1398668fd-json.log
-rw-r----- 1 root root  113 Dec 21 21:44 /var/lib/docker/containers/1e6fb2c4f4bc9afeff1406c2c7f4a48e162c3b8075aef6e67871c942232b2fbe/1e6fb2c4f4bc9afeff1406c2c7f4a48e162c3b8075aef6e67871c942232b2fbe-json.log
-rw-r----- 1 root root  26K Dec 27 14:21 /var/lib/docker/containers/283e6cfc3f9e52ffb5dfd26386d910010a6f14e2304d28c244c9010b3396f2aa/283e6cfc3f9e52ffb5dfd26386d910010a6f14e2304d28c244c9010b3396f2aa-json.log
-rw-r----- 1 root root 7.6K Dec 27 16:27 /var/lib/docker/containers/338ee505e76965f6636c229f437fe30018acd24c94e3aab9eec2fd3dffe67d29/338ee505e76965f6636c229f437fe30018acd24c94e3aab9eec2fd3dffe67d29-json.log

解決方案有3種

簡(jiǎn)單處理：

echo '' >/var/lib/docker/containers/容器id-json.log

運(yùn)行服務(wù)時(shí)指定json log大小及數(shù)量

# 參數(shù)：--log-opt max-size=200m --log-opt max-file=3 
docker run -it --log-opt max-size=200m --log-opt max-file=3 nginx

全局配置

vim  /etc/docker/daemon.json
{
    "log-driver":"json-file",
    "log-opts":{
        "max-size" :"200m","max-file":"3"
    }
}

systemctl daemon-reload
systemctl restart docker

3.3 Local Volumnes占用分析及解決

Local Volumnes占用空間大，相對(duì)來(lái)說(shuō)比較少遇到的一種場(chǎng)景，像鏡像和json.log占用的情況，比較常見(jiàn)。

docker system df 
TYPE            TOTAL     ACTIVE    SIZE      RECLAIMABLE
Images          42        20        10.81GB   4.265GB (39%)
Containers      64        39        1.358GB   200.3MB (14%)
Local Volumes   7         4         64.9GB   232.7MB (0.3%)
Build Cache     0         0         0B        0B

從命令可以看出，Local Volumnes占用超過(guò)60GB，可釋放空間只有232MB，因此通過(guò)命令：docker system prune清理也只能釋放232MB的空間占用。
解決方案
思路：
查看Local Volumes占用明細(xì)->查找關(guān)聯(lián)的容器ID->清理對(duì)應(yīng)容器->完成空間占用清理

# 通過(guò)參數(shù)-v查看詳細(xì)的空間占用
docker system df -v
*** ***
Local Volumes space usage:

VOLUME NAME                                                        LINKS     SIZE
13cb48964bd5f5b2154687cd2ec9d948c03183c778a131021d7a078251e327fc   1         77.58MB
0c6f791c44f9e18c414df127effeb03bcd4e3d3f00a1da9520b1f79308d5d4b4   0         77.58MB
7995d23375e56221438cca64ddd9f0a799c6492cf28ea4cf8689fa3f6ca6d0b2   2         77.58MB
c742d23648db19b93a731d6861864f7fc90ec22bfd3aeaa73c811fe587126777   1         77.58MB
b60f3956f0d502f163e47806b2bfe6d8e1ad3fe555d1a01c86541708ec5277ff   1         0B
fc52cd72fa393c8cbe92b90de2d5e555d5a7cee725871ff729a1941fadfe942d   1         62.22GB
86cff21c7b3690e94548a94e5e87428761d3887f0a62abbd85ddf1b15684dbd8   0         77.58MB
0ebc98b7d24962a968acb73ae65abd9b1e846098ba4f7d68f09c8d163cedd12e   0         77.58MB

Build cache usage: 0B

CACHE ID   CACHE TYPE   SIZE      CREATED   LAST USED   USAGE     SHARED

可以看出磁盤(pán)占用主要是：fc52cd72fa393c8cbe92b90de2d5e555d5a7cee725871ff729a1941fadfe942d，因此，要查看此卷相關(guān)聯(lián)的容器ID

# 編寫(xiě)py腳本
import os
volumn = "fc52cd72fa393c8cbe92b90de2d5e555d5a7cee725871ff729a1941fadfe942d"
names = [line.split(" ")[-1] for line in os.popen("docker ps -a").read().split("\n") if line ]
print([name for name in names[1:] if volumn in os.popen("docker inspect %s"%name).read()])

# 執(zhí)行腳本
python volumn.py
# 返回結(jié)果如下
['collection-687df56967-z5t6f']
找到相關(guān)聯(lián)的容器后，判斷容器運(yùn)行著什么，內(nèi)容是否可清理
4. 總結(jié)

在日常使用中，安裝docker后做好優(yōu)化配置工作，如配置json log大小及文件限制，定期清理無(wú)用的容器和鏡像，可以減少docker 空間占用導(dǎo)致宿主機(jī)磁盤(pán)空間不夠?qū)е碌母鞣N問(wèn)題。當(dāng)遇到以上措施無(wú)法處理的情況的時(shí)候，要靈活使用docker system df -v的命令進(jìn)行故障排查分析。希望這個(gè)能幫到各位，有用就點(diǎn)個(gè)關(guān)注和收藏吧~

你是否還在尋找穩(wěn)定的海外服務(wù)器提供商？創(chuàng)新互聯(lián)www.cdcxhl.cn海外機(jī)房具備T級(jí)流量清洗系統(tǒng)配攻擊溯源，準(zhǔn)確流量調(diào)度確保服務(wù)器高可用性，企業(yè)級(jí)服務(wù)器適合批量采購(gòu)，新人活動(dòng)首月15元起，快前往官網(wǎng)查看詳情吧

網(wǎng)站欄目：k8s&docker空間使用分析與清理-創(chuàng)新互聯(lián)
路徑分享：http://muchs.cn/article26/cedccg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供移動(dòng)網(wǎng)站建設(shè)、網(wǎng)站收錄、建站公司、Google、網(wǎng)站營(yíng)銷(xiāo)、面包屑導(dǎo)航

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話(huà)：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)

外貿(mào)網(wǎng)站建設(shè)