Golang如何編寫內(nèi)存高效及CPU調(diào)優(yōu)的Go結(jié)構(gòu)體
前言
結(jié)構(gòu)體是包含多個(gè)字段的集合類型,用于將數(shù)據(jù)組合為記錄。這樣可以將與同一實(shí)體相關(guān)聯(lián)的數(shù)據(jù)利落地封裝到一個(gè)輕量的類型定義中,然后通過對(duì)該結(jié)構(gòu)體類型定義方法來(lái)實(shí)現(xiàn)不同的行為。
本文會(huì)嘗試從內(nèi)存利用和CPU周期的角度講解如何高效編寫struct。

我們來(lái)看下面這一結(jié)構(gòu)體,這是我們一個(gè)奇怪用例所定義的terraform資源類型:
type TerraformResource struct {
Cloud string // 16字節(jié)
Name string // 16字節(jié)
HaveDSL bool // 1字節(jié)
PluginVersion string // 16字節(jié)
IsVersionControlled bool // 1字節(jié)
TerraformVersion string // 16字節(jié)
ModuleVersionMajor int32 // 4字節(jié)
}使用如下代碼來(lái)了解TerraformResource結(jié)構(gòu)體需要分配多少內(nèi)存:
package main
import (
"fmt"
"unsafe"
)
type TerraformResource struct {
Cloud string // 16字節(jié)
Name string // 16字節(jié)
HaveDSL bool // 1字節(jié)
PluginVersion string // 16字節(jié)
IsVersionControlled bool // 1字節(jié)
TerraformVersion string // 16字節(jié)
ModuleVersionMajor int32 // 4字節(jié)
}
func main() {
var d TerraformResource
d.Cloud = "aws"
d.Name = "ec2"
d.HaveDSL = true
d.PluginVersion = "3.64"
d.TerraformVersion = "1.1"
d.ModuleVersionMajor = 1
d.IsVersionControlled = true
fmt.Println("==============================================================")
fmt.Printf("結(jié)構(gòu)體使用的總內(nèi)存:d %T => [%d]\n", d, unsafe.Sizeof(d))
fmt.Println("==============================================================")
fmt.Printf("結(jié)構(gòu)體中的Cloud字段:d.Cloud %T => [%d]\n", d.Cloud, unsafe.Sizeof(d.Cloud))
fmt.Printf("結(jié)構(gòu)體中的Name字段:d.Name %T => [%d]\n", d.Name, unsafe.Sizeof(d.Name))
fmt.Printf("結(jié)構(gòu)體中的HaveDSL字段:d.HaveDSL %T => [%d]\n", d.HaveDSL, unsafe.Sizeof(d.HaveDSL))
fmt.Printf("結(jié)構(gòu)體中的PluginVersion字段:d.PluginVersion %T => [%d]\n", d.PluginVersion, unsafe.Sizeof(d.PluginVersion))
fmt.Printf("結(jié)構(gòu)體中的ModuleVersionMajor字段:d.IsVersionControlled %T => [%d]\n", d.IsVersionControlled, unsafe.Sizeof(d.IsVersionControlled))
fmt.Printf("結(jié)構(gòu)體中的TerraformVersion字段:d.TerraformVersion %T => [%d]\n", d.TerraformVersion, unsafe.Sizeof(d.TerraformVersion))
fmt.Printf("結(jié)構(gòu)體中的ModuleVersionMajor字段:d.ModuleVersionMajor %T => [%d]\n", d.ModuleVersionMajor, unsafe.Sizeof(d.ModuleVersionMajor))
}輸出結(jié)果
$ go run golang-struct-memory-allocation.go
==============================================================
結(jié)構(gòu)體使用的總內(nèi)存:d main.TerraformResource => [88]
==============================================================
結(jié)構(gòu)體中的Cloud字段:d.Cloud string => [16]
結(jié)構(gòu)體中的Name字段:d.Name string => [16]
結(jié)構(gòu)體中的HaveDSL字段:d.HaveDSL bool => [1]
結(jié)構(gòu)體中的PluginVersion字段:d.PluginVersion string => [16]
結(jié)構(gòu)體中的ModuleVersionMajor字段:d.IsVersionControlled bool => [1]
結(jié)構(gòu)體中的TerraformVersion字段:d.TerraformVersion string => [16]
結(jié)構(gòu)體中的ModuleVersionMajor字段:d.ModuleVersionMajor int32 => [4]
因此結(jié)構(gòu)體TerraformResource所需分配的總內(nèi)存是88字節(jié)。TerraformResource類型內(nèi)存分配
如下圖所示:

為什么是88字節(jié)呢?16 +16 + 1 + 16 + 1+ 16 + 4 = 70 bytes,多出來(lái)的18字節(jié)是從哪來(lái)的?
涉及到結(jié)構(gòu)體的內(nèi)存分配時(shí),總是會(huì)分配連續(xù)、字節(jié)對(duì)齊的內(nèi)存志,字段按所定義的順序進(jìn)行內(nèi)存分配和存儲(chǔ)。這里的字節(jié)對(duì)齊表示連續(xù)的內(nèi)存塊按平臺(tái)的字大小進(jìn)行偏移排列。

可以很清楚地看到TerraformResource.HaveDSL、TerraformResource.isVersionControlled和TerraformResource.ModuleVersionMajor分別僅占用1字節(jié)、1字節(jié)和4字節(jié)。剩余的空間使用空白字節(jié)進(jìn)行填充。
所以重新計(jì)算一下:
數(shù)據(jù)占用字節(jié) = 16字節(jié) + 16字節(jié) + 1字節(jié) + 16字節(jié) + 1字節(jié) + 16字節(jié) + 4字節(jié) = 70字節(jié)
空白字節(jié) = 7字節(jié) + 7字節(jié) + 4字節(jié) = 18字節(jié)
總字節(jié)數(shù) = 數(shù)據(jù)占用字節(jié) + 空白字節(jié) = 70字節(jié) + 18字節(jié) = 88字節(jié)
那如何修復(fù)這個(gè)問題呢?通過恰當(dāng)?shù)氐?strong>數(shù)據(jù)結(jié)構(gòu)對(duì)齊,我們可以這樣來(lái)定義結(jié)構(gòu)體:
type TerraformResource struct {
Cloud string // 16字節(jié)
Name string // 16字節(jié)
PluginVersion string // 16字節(jié)
TerraformVersion string // 16字節(jié)
ModuleVersionMajor int32 // 4字節(jié)
HaveDSL bool // 1字節(jié)
IsVersionControlled bool // 1字節(jié)
}使用優(yōu)化后的結(jié)構(gòu)體來(lái)運(yùn)行同一段代碼:
輸出結(jié)果
$ go run golang-struct-memory-allocation.go
==============================================================
結(jié)構(gòu)體使用的總內(nèi)存:d main.TerraformResource => [72]
==============================================================
結(jié)構(gòu)體中的Cloud字段:d.Cloud string => [16]
結(jié)構(gòu)體中的Name字段:d.Name string => [16]
結(jié)構(gòu)體中的HaveDSL字段:d.HaveDSL bool => [1]
結(jié)構(gòu)體中的PluginVersion字段:d.PluginVersion string => [16]
結(jié)構(gòu)體中的ModuleVersionMajor字段:d.IsVersionControlled bool => [1]
結(jié)構(gòu)體中的TerraformVersion字段:d.TerraformVersion string => [16]
結(jié)構(gòu)體中的ModuleVersionMajor字段:d.ModuleVersionMajor int32 => [4]
現(xiàn)在TerraformResource類型總的內(nèi)存占用是72字節(jié)。
我們來(lái)看下在內(nèi)存中是如何排列的:

僅僅是通過對(duì)結(jié)構(gòu)體元素進(jìn)行了一輪數(shù)據(jù)結(jié)構(gòu)對(duì)齊我們就將所占用的內(nèi)存由88字節(jié)降到了72字節(jié),真是太棒了?。。?/p>
我們?cè)賮?lái)算一下
數(shù)據(jù)占用字節(jié) = 16字節(jié) + 16字節(jié) + 16字節(jié) + 16字節(jié) +4字節(jié) + 1 byte + 1字節(jié) = 70字節(jié)
空白字節(jié) = 2字節(jié)
總字節(jié)數(shù) = 數(shù)據(jù)占用字節(jié) + 空白字節(jié) = 70字節(jié) + 2字節(jié) = 72字節(jié)
通過恰當(dāng)?shù)?strong>數(shù)據(jù)結(jié)構(gòu)對(duì)齊不僅優(yōu)化了內(nèi)存占用,還優(yōu)化了CPU讀取周期,怎么做到的呢?
CPU以字為單位從內(nèi)存中進(jìn)行讀取,一個(gè)字在32位系統(tǒng)中占用4字節(jié)、64位系統(tǒng)中占用8字節(jié)。我們聲明的第一個(gè)結(jié)構(gòu)體類型TerraformResourceCPU需要讀取11個(gè)字才能讀完:

但對(duì)優(yōu)化后的結(jié)構(gòu)體只需要讀取9個(gè)字:

通過恰當(dāng)?shù)貙?duì)結(jié)構(gòu)體進(jìn)行數(shù)據(jù)結(jié)構(gòu)排序我們可以讓內(nèi)存分配和CPU 讀取都變得高效。
到此這篇關(guān)于Golang如何編寫內(nèi)存高效及CPU調(diào)優(yōu)的Go結(jié)構(gòu)體的文章就介紹到這了,更多相關(guān)Go CPU調(diào)優(yōu)內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Goland使用Go Modules創(chuàng)建/管理項(xiàng)目的操作
這篇文章主要介紹了Goland使用Go Modules創(chuàng)建/管理項(xiàng)目的操作,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來(lái)看看吧2021-05-05
Golang測(cè)試func?TestXX(t?*testing.T)的使用詳解
一般Golang中的測(cè)試代碼都以xxx_test.go的樣式,在命名測(cè)試函數(shù)的時(shí)候以Testxx開頭,下面給大家介紹Golang測(cè)試func?TestXX(t?*testing.T)的使用,感興趣的朋友跟隨小編一起看看吧2024-08-08
對(duì)Golang中的FORM相關(guān)字段理解
這篇文章主要介紹了對(duì)Golang中的FORM相關(guān)字段理解,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來(lái)看看吧2021-05-05
Golang中context庫(kù)的高級(jí)應(yīng)用
context庫(kù)不僅對(duì)于提升代碼的效率和性能至關(guān)重要,而且還幫助開發(fā)者在復(fù)雜的系統(tǒng)中保持代碼的清晰和可維護(hù)性,下面我們就來(lái)看看context庫(kù)的高級(jí)應(yīng)用吧2024-01-01
golang sql語(yǔ)句超時(shí)控制方案及原理
一般應(yīng)用程序在執(zhí)行一條sql語(yǔ)句時(shí),都會(huì)給這條sql設(shè)置一個(gè)超時(shí)時(shí)間,本文主要介紹了golang sql語(yǔ)句超時(shí)控制方案及原理,具有一定的參考價(jià)值,感興趣的可以了解一下2023-12-12
詳解Golang如何監(jiān)聽某個(gè)函數(shù)的開始執(zhí)行和執(zhí)行結(jié)束
這篇文章主要為大家詳細(xì)介紹了Golang如何監(jiān)聽某個(gè)函數(shù)的開始執(zhí)行和執(zhí)行結(jié)束,文中的示例代碼講解詳細(xì),有需要的小伙伴可以參考一下2024-02-02

