grpool?goroutine池協(xié)程管理
前言
goroutine協(xié)程非常輕量級(jí),這也是為什么go支持高并發(fā),但是goroutine頻繁創(chuàng)建銷毀對(duì)GC的壓力比較大。
grpool的作用就是復(fù)用goroutine,減少頻繁創(chuàng)建銷毀的性能消耗。
名詞概念
Pool: goroutine池,用于管理若干可復(fù)用的goroutine協(xié)程資源
Worker: 池對(duì)象中參與任務(wù)執(zhí)行的goroutine,一個(gè)worker可以執(zhí)行若干個(gè)job,直到隊(duì)列中再無(wú)等待的job
Job:添加到池對(duì)象的任務(wù)隊(duì)列中等待執(zhí)行的任務(wù),是一個(gè)func()方法,一個(gè)job同時(shí)只能被一個(gè)worker獲取并執(zhí)行。
使用示例
使用默認(rèn)的協(xié)程池,限制100個(gè)協(xié)程執(zhí)行1000個(gè)任務(wù)
pool.Size() 獲得當(dāng)前工作的協(xié)程數(shù)量
pool.Jobs() 獲得當(dāng)前池中待處理的任務(wù)數(shù)量
package main
import (
"fmt"
"github.com/gogf/gf/os/grpool"
"github.com/gogf/gf/os/gtimer"
"sync"
"time"
)
func main() {
pool := grpool.New(100)
//添加1千個(gè)任務(wù)
for i := 0; i < 1000; i++ {
_ = pool.Add(job)
}
fmt.Println("worker:", pool.Size()) //當(dāng)前工作的協(xié)程數(shù)量
fmt.Println("jobs:", pool.Jobs()) //當(dāng)前池中待處理的任務(wù)數(shù)量
gtimer.SetInterval(time.Second, func() {
fmt.Println("worker:", pool.Size()) //當(dāng)前工作的協(xié)程數(shù)
fmt.Println("jobs:", pool.Jobs()) //當(dāng)前池中待處理的任務(wù)數(shù)
})
//阻止進(jìn)程結(jié)束
select {}
}
//任務(wù)方法
func job() {
time.Sleep(time.Second)
}打印結(jié)果:

是不是灰常簡(jiǎn)單~
踩坑之旅
一個(gè)簡(jiǎn)單的場(chǎng)景,請(qǐng)使用協(xié)程打印0~9。
常犯的錯(cuò)誤
大家看下面的代碼有沒(méi)有問(wèn)題,請(qǐng)預(yù)測(cè)一下打印結(jié)果。
wg := sync.WaitGroup{}
for i := 0; i < 9; i++ {
wg.Add(1)
go func() {
fmt.Println(i)
wg.Done()
}()
}
wg.Wait()不用著急看答案
猜一下打印結(jié)果是什么
打印結(jié)果:

分析原因
對(duì)于異步線程/協(xié)程來(lái)講,函數(shù)進(jìn)行異步執(zhí)行注冊(cè)時(shí),該函數(shù)并未真正開(kāi)始執(zhí)行(注冊(cè)時(shí)只在goroutine的棧中保存了變量i的內(nèi)存地址),而一旦開(kāi)始執(zhí)行時(shí)函數(shù)才會(huì)去讀取變量i的值,而這個(gè)時(shí)候變量i的值已經(jīng)自增到了9。
正確寫法:
wg := sync.WaitGroup{}
for i := 0; i < 9; i++ {
wg.Add(1)
go func(v int) {
fmt.Println(v)
wg.Done()
}(i)
}
wg.Wait()打印結(jié)果:

使用grpool
使用grpool和使用go一樣,都需要把當(dāng)前變量i的值賦值給一個(gè)不會(huì)改變的臨時(shí)變量,在函數(shù)中使用該臨時(shí)變量而不是直接使用變量i。
錯(cuò)誤代碼
wg := sync.WaitGroup{}
for i := 0; i < 9; i++ {
wg.Add(1)
_ = grpool.Add(func() {
fmt.Println(i) //打印結(jié)果都是9
wg.Done()
})
}
wg.Wait()打印結(jié)果:

正確代碼
wg := sync.WaitGroup{}
for i := 0; i < 9; i++ {
wg.Add(1)
v := i //grpoll.add() 的參數(shù)只能是不帶參數(shù)的匿名函數(shù) 因此只能以設(shè)置臨時(shí)變量的方式賦值
_ = grpool.Add(func() {
fmt.Println(v)
wg.Done()
})
}
wg.Wait()打印結(jié)果:

總結(jié)
通過(guò)這篇文章我們了解到:grpool的作用就是復(fù)用goroutine,減少頻繁創(chuàng)建銷毀的性能消耗。也了解到使用協(xié)程容易犯的錯(cuò)誤,以及用臨時(shí)變量的方式來(lái)解決問(wèn)題。
說(shuō)句題外話:grpool的基礎(chǔ)概念:Pool、Worke、Job 和我之前設(shè)計(jì)的派單系統(tǒng)簡(jiǎn)直一模一樣。
到此這篇關(guān)于grpool goroutine池協(xié)程管理的文章就介紹到這了,更多相關(guān)grpool goroutine池 內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
golang中sync.Map并發(fā)創(chuàng)建、讀取問(wèn)題實(shí)戰(zhàn)記錄
這篇文章主要給大家介紹了關(guān)于golang中sync.Map并發(fā)創(chuàng)建、讀取問(wèn)題的相關(guān)資料,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2018-07-07
Go的os/exec執(zhí)行超時(shí)導(dǎo)致程序死機(jī)的解決方案
這篇文章主要介紹了Go的os/exec執(zhí)行超時(shí)導(dǎo)致程序死機(jī)的幾種解決方案,文中通過(guò)代碼示例給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作有一定的幫助,需要的朋友可以參考下2024-04-04
Go標(biāo)準(zhǔn)庫(kù)之Requests的介紹與基本使用
Python中的Requests庫(kù)非常強(qiáng)大,所以Go開(kāi)發(fā)者模仿Python的Requests庫(kù),由此誕生了Grequests庫(kù),本文主要介紹了Requests的基本使用,有需要的可以參考下2024-04-04
Go 語(yǔ)言中的 http.FileSystem詳細(xì)解析
在本文中,我們深入探討了 Go 語(yǔ)言中的 http.FileSystem 接口,并介紹了它的基本原理、使用方法以及實(shí)際應(yīng)用場(chǎng)景,感興趣的朋友跟隨小編一起看看吧2024-03-03
golang進(jìn)行簡(jiǎn)單權(quán)限認(rèn)證的實(shí)現(xiàn)
本文主要介紹了golang簡(jiǎn)單權(quán)限認(rèn)證的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2021-09-09
go?doudou開(kāi)發(fā)gRPC服務(wù)快速上手實(shí)現(xiàn)詳解
這篇文章主要為大家介紹了go?doudou開(kāi)發(fā)gRPC服務(wù)快速上手實(shí)現(xiàn)過(guò)程詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2022-12-12

