go語言處理TCP拆包/粘包的具體實現(xiàn)
part 1
最近在學(xué)習(xí)go自帶的rpc,看完了一遍想著自己實現(xiàn)一個codec,也就是自定義消息的序列化和反序列化。消息的序列化和反序列化涉及到兩步:
1、從網(wǎng)絡(luò)中讀取數(shù)據(jù)和將數(shù)據(jù)寫到網(wǎng)絡(luò)中;
2、根據(jù)拿到的二進制數(shù)據(jù)反序列化以及把現(xiàn)有的對象序列化成二進制數(shù)據(jù)。而這個過程中就需要處理TCP的拆包粘包了。
TCP的拆包/粘包也算是網(wǎng)絡(luò)編程中一個比較基礎(chǔ)的問題了,具體的問題含義和解決方式也不再詳細描述了。雖然作為實現(xiàn)應(yīng)用層邏輯的程序員可能根本不需要關(guān)心這個,作為中間件的開發(fā),同時也出于學(xué)習(xí)go語言的目的,還是稍微進行一下練習(xí)。
part 2
TCP拆包粘包的解決思路:在讀取數(shù)據(jù)時,將讀取到的二進制數(shù)據(jù)在正確的位置進行分割即可。這里直接使用head+body的方式,也就是在發(fā)送數(shù)據(jù)時先將整個數(shù)據(jù)的大小附加在數(shù)據(jù)前,就像這樣:
+++++++++++++++++++++++++++++++++++++
size (2 bytes)? | body (size bytes)
+++++++++++++++++++++++++++++++++++++
這里將數(shù)據(jù)包的size作為head
注:這里舉的例子里,size占2個byte;size具體占用的byte數(shù)可以根據(jù)實際情況決定
part 3
server具體實現(xiàn):
func doConn(conn net.Conn) {
var (
buffer = bytes.NewBuffer(make([]byte, 0, BUF_SIZE)) //buffer用來緩存讀取到的數(shù)據(jù)
readBytes = make([]byte, BUF_SIZE) //readBytes用來接收每次讀取的數(shù)據(jù),每次讀取完成之后將readBytes添加到buffer中
isHead = true //用來標(biāo)識當(dāng)前的狀態(tài):正在處理size部分還是body部分
bodyLen = 0 //表示body的長度
)
for {
//首先讀取數(shù)據(jù)
readByteNum, err := conn.Read(readBytes)
if err != nil {
log.Fatal(err)
return
}
buffer.Write(readBytes[0:readByteNum])//將讀取到的數(shù)據(jù)放到buffer中
// 然后處理數(shù)據(jù)
for {
if isHead {
if buffer.Len() >= HEAD_SIZE {
isHead = false
head := make([]byte, HEAD_SIZE)
_, err = buffer.Read(head)
if err != nil {
log.Fatal(err)
return
}
bodyLen = int(binary.BigEndian.Uint16(head))
} else {
break;
}
}
if !isHead {
if buffer.Len() >= bodyLen {
body := make([]byte, bodyLen)
_, err = buffer.Read(body[:bodyLen])
if err != nil {
log.Fatal(err)
return
}
fmt.Println("received body: " + string(body[:bodyLen]))
isHead = true
} else {
break;
}
}
}
}
func HandleTcp() {
listener, err := net.Listen("tcp", ":1234")
if err != nil {
log.Fatal(err)
return
}
log.Println("start listening on 1234")
for {
conn, err := listener.Accept()
if err != nil {
log.Fatal(err)
return
}
go doConn(conn)
}
}
client具體實現(xiàn):
func SendStringwithTcp(arg string) error {
conn, err := net.Dial("tcp", ":1234")
if err != nil {
log.Fatal(err)
return err
}
head := make([]byte, server.HEAD_SIZE)
content := []byte(arg)
headSize := len(content)
binary.BigEndian.PutUint16(head, uint16(headSize))
//先寫入head部分,再寫入body部分
_, err = conn.Write(head)
if err != nil {
log.Fatal(err)
return err
}
_, err = conn.Write(content)
if err != nil {
log.Fatal(err)
return err
}
return nil
}
到此這篇關(guān)于go語言處理TCP拆包/粘包的文章就介紹到這了,更多相關(guān)go語言 TCP拆包/粘包內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Go語言學(xué)習(xí)之new函數(shù)的用法詳解
這篇文章主要為大家詳細介紹了Go語言中new()函數(shù)的相關(guān)知識以及具體用法,文中的示例代碼講解詳細,具有一定的學(xué)習(xí)價值,感興趣的小伙伴可以了解一下2023-05-05
Redis?BloomFilter布隆過濾器原理與實現(xiàn)
你在開發(fā)或者面試過程中,有沒有遇到過?海量數(shù)據(jù)需要查重,緩存穿透怎么避免等等這樣的問題呢?下面這個東西超棒,好好了解下,面試過關(guān)斬將,凸顯你的不一樣2022-10-10

