有哪些Shell常用命令和例子-創(chuàng)新互聯(lián)

本篇內(nèi)容主要講解“有哪些Shell常用命令和例子”，感興趣的朋友不妨來(lái)看看。本文介紹的方法操作簡(jiǎn)單快捷，實(shí)用性強(qiáng)。下面就讓小編來(lái)帶大家學(xué)習(xí)“有哪些Shell常用命令和例子”吧!

超過(guò)10余年行業(yè)經(jīng)驗(yàn)，技術(shù)領(lǐng)先，服務(wù)至上的經(jīng)營(yíng)模式，全靠網(wǎng)絡(luò)和口碑獲得客戶，為自己降低成本，也就是為客戶降低成本。到目前業(yè)務(wù)范圍包括了：成都做網(wǎng)站、網(wǎng)站設(shè)計(jì)，成都網(wǎng)站推廣，成都網(wǎng)站優(yōu)化，整體網(wǎng)絡(luò)托管，重慶小程序開(kāi)發(fā)，微信開(kāi)發(fā)，手機(jī)APP定制開(kāi)發(fā)，同時(shí)也可以讓客戶的網(wǎng)站和網(wǎng)絡(luò)營(yíng)銷(xiāo)和我們一樣獲得訂單和生意！

1、在Windows下的用戶要使用shell命令符的話請(qǐng)先安裝cygwin，安裝方法自行Google（搜技術(shù)問(wèn)題請(qǐng)使用google，百度搜不到活該）

2、下面粗略介紹下SEO日志分析常用的命令符用法，需要詳細(xì)了解每個(gè)命令符請(qǐng)使用Google。

less 文件名 查看文件內(nèi)容 按“q” 退出

cat 文件名 打開(kāi)文件，可以多次打開(kāi)幾個(gè)文件 | cat 1.log 2.log |cat *.cat
grep -參數(shù) 文件名
-i 不區(qū)分大小寫(xiě)
-v 顯示不符合條件的所有行
-c 顯示符合條件的所有行數(shù)（符合條件的數(shù)量）

egrep 屬于grep的升級(jí)版，在正則這一塊的支持更完善，使用正則的時(shí)候建議使用egrep

head -2 文件名 顯示2行
head -100 文件名 | tail -10 >>a.log 提取文件第91-100行數(shù)據(jù)

wc -參數(shù) 文件名 統(tǒng)計(jì)文本大小，字符多少，行數(shù)
-c 統(tǒng)計(jì)文本字節(jié)數(shù)
-m 統(tǒng)計(jì)文本字符數(shù)
-l 統(tǒng)計(jì)文本有多少行

sort – 參數(shù) 文件名 對(duì)文件進(jìn)行排序
-n 對(duì)文件按照數(shù)字排序
-r 反向排序

uniq -參數(shù) 文件名 對(duì)文件去重，去重前需要使用排序

sort
-c 顯示數(shù)據(jù)重復(fù)的次數(shù)

split -參數(shù) 文件名 對(duì)文件進(jìn)行切割
-100 （每100行切割成一個(gè)文件）
-C 25m/b/k (每25兆/字節(jié)/K 分割成一個(gè)文件)

| 管道，把上一條命令的結(jié)果傳輸給下一條命令

“>” 和“>> ” 重定向?qū)懭胛募?“>”相當(dāng)于“w”清空并寫(xiě)入 “>>”相當(dāng)于“a” 追加進(jìn)文件

 awk -F ‘分割符'  Pattern ｛action｝ 文件名 使用指定的字符對(duì)每一行數(shù)據(jù)進(jìn)行分段，默認(rèn)是空格（網(wǎng)站日志就是空格分開(kāi)）
-F后面跟的是分隔符
pattern 就是action執(zhí)行的條件，這里可以使用正則表達(dá)式
$n 即時(shí)第幾段數(shù)據(jù) $0表示整行數(shù)據(jù)
NF表示當(dāng)前記錄的字段數(shù)
$NF 表示最后一個(gè)字段
BEGIN和END，這兩者都可用于pattern中，提供BEGIN和END的作用是給程序賦予初始狀態(tài)和在程序結(jié)束之后執(zhí)行一些掃尾的工作

bash shell.sh 運(yùn)行shell.sh腳本

dos2unix xxoo.sh 將“\r\n”轉(zhuǎn)換成“\n” Windows——>linux （由于Windows和Linux下的換行符不同，所以我們?cè)赪indows下面下的代碼需要使用dos2unix 轉(zhuǎn)換成Linux下的換行符，否則運(yùn)行shell腳本會(huì)報(bào)錯(cuò)）

unix2dos xxoo.sh 將“\n”轉(zhuǎn)換成“\r\n” linux——>Windows
rm xx.txt 刪除xx.txt文件

3、一些簡(jiǎn)單的命令符介紹到這里，需要了解shell，建議大家查看相關(guān)的書(shū)籍.

下面我們開(kāi)始使用shell分析日志

1、切割百度的抓取數(shù)據(jù)（將文件切割出來(lái)對(duì)專(zhuān)門(mén)的爬蟲(chóng)數(shù)據(jù)進(jìn)行處理能提高效率）

代碼如下:

cat log.log |grep -i ‘baiduspider' >baidu.log

2、網(wǎng)站狀態(tài)碼個(gè)數(shù)查詢

代碼如下:

awk ‘{print $9}' baidu.log|sort|uniq -c|sort -nr

3、百度總抓取量

代碼如下:

wc -l baidu.log

4、百度不重復(fù)抓取量

代碼如下:

awk ‘{print $7}' baidu.log|sort|uniq|wc -l

5、百度平均每次抓取的數(shù)據(jù)大?。ńY(jié)果是KB）

代碼如下:

awk ‘{print $10}' baidu.log|awk ‘BEGIN{a=0}{a+=$1}END{ print a/NR/1024}'

6、首頁(yè)抓取量

代碼如下:

awk ‘$7~/\.com\/$/' baidu.log|wc -l

7、某目錄抓取量

代碼如下:

grep ‘/news/' baidu.log|wc -l

8、抓取最多的10個(gè)頁(yè)面

代碼如下:

awk ‘{print $7}' baidu.log|sort|uniq -c|sort -nr|head -10

9、找出抓取的404錯(cuò)誤頁(yè)面

代碼如下:

awk ‘$9~ /^404$/ {print $7}' baidu.log|sort|uniq|sort -nr

10、找出抓取了多少js文件和文件抓取的次數(shù)

代碼如下:

awk ‘$7~ /.js$/ {print $7}' baidu.log|sort|uniq -c |sort -nr

到此，相信大家對(duì)“有哪些Shell常用命令和例子”有了更深的了解，不妨來(lái)實(shí)際操作一番吧！這里是創(chuàng)新互聯(lián)建站，更多相關(guān)內(nèi)容可以進(jìn)入相關(guān)頻道進(jìn)行查詢，關(guān)注我們，繼續(xù)學(xué)習(xí)！

當(dāng)前標(biāo)題：有哪些Shell常用命令和例子-創(chuàng)新互聯(lián)
URL鏈接：http://muchs.cn/article14/djjcge.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供面包屑導(dǎo)航、小程序開(kāi)發(fā)、全網(wǎng)營(yíng)銷(xiāo)推廣、軟件開(kāi)發(fā)、搜索引擎優(yōu)化、網(wǎng)站排名

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)