一、前言

Go程序像C/C++一樣，如果開(kāi)發(fā)編碼考慮不當(dāng)，會(huì)出現(xiàn)cpu負(fù)載過(guò)高的性能問(wèn)題。如果程序是線(xiàn)上環(huán)境或者特定場(chǎng)景下出現(xiàn)負(fù)載過(guò)高，問(wèn)題不好復(fù)現(xiàn)，則需要利用當(dāng)前負(fù)載過(guò)高的進(jìn)程進(jìn)行調(diào)用棧分析。

C/C++中一般先通過(guò)top -d 1 -p $pid -H 命令查看負(fù)載過(guò)高的線(xiàn)程號(hào)(TID)，然后使用gdb attach到該進(jìn)程，通過(guò)thread info獲取線(xiàn)程信息，然后切換到對(duì)應(yīng)負(fù)載高的線(xiàn)程，輸入bt查看調(diào)用棧。

結(jié)合對(duì)應(yīng)代碼中的函數(shù)，進(jìn)一步分析。Go語(yǔ)言中方法也類(lèi)似，我們將通過(guò)dlv來(lái)分析負(fù)載高的協(xié)程調(diào)用棧。

二、問(wèn)題排查過(guò)程

2.1 通過(guò)top查看高cpu的進(jìn)程pid

通過(guò)top -d 1，可以發(fā)現(xiàn)進(jìn)程cava_smu(pid=11205)的cpu過(guò)高。

2.2 通過(guò)top查看高cpu的線(xiàn)程tid

通過(guò)上一步，我們確定了是pid=11205的cava_smu進(jìn)程cpu過(guò)高，那么可以通過(guò)top -d 1 -p 11205 -H 來(lái)確認(rèn)cpu過(guò)載的線(xiàn)程tid，如下圖所示：

通過(guò)以上操作，可以確認(rèn)tid=11208,11212,11213三個(gè)線(xiàn)程的cpu過(guò)高。

2.3 通過(guò)dlv附加到進(jìn)程，分析線(xiàn)程/協(xié)程cpu過(guò)載的堆棧

首先，如果生產(chǎn)環(huán)境沒(méi)有dlv，則可以拷貝對(duì)應(yīng)的dlv到/usr/local/bin下。

接著 dlv attach 11205，確認(rèn)tid=11208的goroutine 序號(hào)，如下圖所示：

2.4 在dlv中切換到對(duì)應(yīng)高cpu協(xié)程，并查看堆棧

如下圖所示：

通過(guò)以上操作，可以確認(rèn)業(yè)務(wù)底層的棧幀是第6→5幀，business.go:18行的disPatchTask ->business.go:168 行的dispatchIdleTeu方法相關(guān)，查看對(duì)應(yīng)版本代碼如下：

代碼執(zhí)行到下圖中，dispatchIdleTeu返回了錯(cuò)誤qferror.ErrNoTeu。

代碼執(zhí)行到下圖中，189行dispatchIdleTeu返回了錯(cuò)誤qferror.ErrNoTeu，所以189 if的執(zhí)行語(yǔ)句192~212無(wú)法進(jìn)入進(jìn)行，而外層是一個(gè)for死循環(huán)，則會(huì)造成該協(xié)程一直占用cpu，導(dǎo)致cpu過(guò)載。

修復(fù)方法可以是在for 循環(huán)內(nèi)增加sleep休眠，例如在214行處增加time.Sleep(200 * time.Millisecond)，效果請(qǐng)自行驗(yàn)證。

總結(jié)

到此這篇關(guān)于go語(yǔ)言程序cpu過(guò)高問(wèn)題排查的文章就介紹到這了,更多相關(guān)go程序cpu過(guò)高排查內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！