Nginx日志分析及性能排查的方法是什么

本篇內(nèi)容介紹了“Nginx日志分析及性能排查的方法是什么”的有關(guān)知識，在實(shí)際案例的操作過程中，不少人都會(huì)遇到這樣的困境，接下來就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧！希望大家仔細(xì)閱讀，能夠?qū)W有所成！

創(chuàng)新互聯(lián)公司是一家專業(yè)的成都網(wǎng)站建設(shè)公司，我們專注成都網(wǎng)站制作、做網(wǎng)站、外貿(mào)營銷網(wǎng)站建設(shè)、網(wǎng)絡(luò)營銷、企業(yè)網(wǎng)站建設(shè)，賣友情鏈接，1元廣告為企業(yè)客戶提供一站式建站解決方案，能帶給客戶新的互聯(lián)網(wǎng)理念。從網(wǎng)站結(jié)構(gòu)的規(guī)劃UI設(shè)計(jì)到用戶體驗(yàn)提高，創(chuàng)新互聯(lián)力求做到盡善盡美。

如果需要得到請求處理的時(shí)間，需要在nginx log 里面加上$request_time，下面是我的log_format

nginx.conf

log_format main '$remote_addr - $remote_user [$time_local] "$request" '
'$status $body_bytes_sent $request_body "$http_referer" '
'"$http_user_agent" "$http_x_forwarded_for" "$request_time"';

修改之后重啟nginx，查看nginx log的時(shí)候，就能看到nginx處理請求所花的時(shí)間了，這個(gè)時(shí)間基本就是后端所花的時(shí)間，所以可以根據(jù)這個(gè)字段來得到響應(yīng)慢的請求

以下是就是我用到的一些命令了

獲取pv數(shù)

$ cat /usr/local/nginx/logs/access.log | wc -l

獲取ip數(shù)

$ cat /usr/local/nginx/logs/access.log | awk '{print $1}' | sort -k1 -r | uniq | wc -l

獲取最耗時(shí)的請求時(shí)間、url、耗時(shí)，前10名, 可以修改后面的數(shù)字獲取更多，不加則獲取全部

$ cat /usr/local/class/logs/access.log | awk '{print $4,$7,$NF}' | awk -F '"' '{print $1,$2,$3}' | sort -k3 -rn | head -10

獲取某一時(shí)刻的請求數(shù)量，可以把秒去掉得到分鐘的數(shù)據(jù)，把分鐘去掉得到小時(shí)的數(shù)據(jù)，以此類推

$ cat /usr/local/class/logs/access.log | grep 2017:13:28:55 | wc -l

獲取每分鐘的請求數(shù)量，輸出成csv文件，然后用excel打開，可以生成柱狀圖

$ cat /usr/local/class/logs/access.log | awk '{print substr($4,14,5)}' | uniq -c | awk '{print $2","$1}' > access.csv

上面的圖是用excel生成的，也可以用命令行工具gnuplot生成png，我也試了一下，沒什么問題，直接以編程的形式得到報(bào)表，去掉人工操作部分，很方便，但是有一點(diǎn)就是x軸數(shù)據(jù)比較多的時(shí)候，不能像excel一樣自動(dòng)稀釋數(shù)據(jù)，所以我還是喜歡用excel來生成

其實(shí)用來用去也就是那么幾個(gè)命令:

cat：輸入文件內(nèi)容

grep：過濾文本

'sort'：排序

'uniq'：去重

'awk'：文本處理

命令組合使用，單個(gè)命令可以使用多次，來達(dá)到多重過濾的效果，前面一個(gè)命令的輸出就是后一個(gè)命令的輸入，流式處理，只要學(xué)會(huì)這個(gè)命令，有多看似復(fù)雜的東西，都變得異常簡單。

上面介紹的都是命令，下面再介紹一個(gè)直接輸出html的，其實(shí)就是利用go-access來分析nginx日志

cat /usr/local/nginx/logs/access.log | docker run --rm -i diyan/goaccess --time-format='%H:%M:%S' --date-format='%d/%b/%Y' --log-format='%h %^[%d:%t %^] "%r" %s %b "%R" "%u"' > index.html

go-access是以docker容器的形式運(yùn)行的，只要你安裝了docker，就能直接運(yùn)行，免安裝很方便

以上腳本，配合日志每天的日志分割，然后在crontab里面配置一下自動(dòng)運(yùn)行腳本，可生成每一天的nginx報(bào)表，網(wǎng)站情況一幕了然，當(dāng)然這里也有缺點(diǎn)，因?yàn)椴粚?shí)時(shí)

想要統(tǒng)計(jì)實(shí)時(shí)數(shù)據(jù)，可以使用ngxtop 來查看，安裝起來也很簡單

$ pip install ngxtop

運(yùn)行的話，先進(jìn)到nginx目錄，然后再運(yùn)行，-c 指定配置文件，-t 刷新頻率，單位為秒

$ cd /usr/local/nginx
$ ngxtop -c conf/nginx.conf -t 1

但是這種實(shí)時(shí)的方式，還需要ssh遠(yuǎn)程登錄，不太方便，還可以使用lua來進(jìn)行實(shí)時(shí)統(tǒng)計(jì)，然后寫一個(gè)界面把數(shù)據(jù)展示出來，通過lua-nginx-module，nginx/tengine 都可以用，如果直接安裝openresty的話，就方便了，內(nèi)嵌了lua，不需要重新編譯nginx了

“Nginx日志分析及性能排查的方法是什么”的內(nèi)容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識可以關(guān)注創(chuàng)新互聯(lián)網(wǎng)站，小編將為大家輸出更多高質(zhì)量的實(shí)用文章！

分享題目：Nginx日志分析及性能排查的方法是什么
文章地址：http://bm7419.com/article14/iiphde.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供商城網(wǎng)站、電子商務(wù)、定制開發(fā)、做網(wǎng)站、軟件開發(fā)、自適應(yīng)網(wǎng)站

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源：創(chuàng)新互聯(lián)

猜你還喜歡下面的內(nèi)容