第一部分 一個普通網(wǎng)絡(luò)模塊接法圖解ab的網(wǎng)絡(luò)模塊
大部分項(xiàng)目對網(wǎng)絡(luò)的需求都比較簡單。主要需要滿足登錄、購買、顯示背包物品等低頻的協(xié)議請求。面對這部分需求,只要一個普通的網(wǎng)絡(luò)模塊就可以搞定。
我們就先從這一部分開始,編寫一個普通的網(wǎng)絡(luò)模塊。
1
模塊設(shè)計
1.1
重要
網(wǎng)絡(luò)模塊的重要性,無須多言。
1.2
神秘
一個項(xiàng)目的模塊很多,但是網(wǎng)絡(luò)模塊只有一個。再結(jié)合網(wǎng)絡(luò)模塊的重要性,所以,大部分新來的同學(xué),都沒有機(jī)會做網(wǎng)絡(luò)模塊。
兩個項(xiàng)目的背包模塊幾乎無法相同,但是網(wǎng)絡(luò)模塊卻幾乎通用。繼續(xù)結(jié)合網(wǎng)絡(luò)模塊的重要性,所以一個項(xiàng)目的網(wǎng)絡(luò)模塊大概只會在——曾經(jīng)做過網(wǎng)絡(luò)模塊的同學(xué)——手里不斷重構(gòu)和完善,最后幾乎可以與業(yè)務(wù)無關(guān)。于是,大部分已經(jīng)工作一段時間的同學(xué),再也沒有機(jī)會做網(wǎng)絡(luò)模塊。
我遇到很多新老同學(xué)過來打聽網(wǎng)絡(luò)模塊的情況。大家覺得它很神秘,躍躍欲試,卻不知從何入手。
現(xiàn)在就有一個機(jī)會,我們一起來設(shè)計和實(shí)現(xiàn)一個網(wǎng)絡(luò)模塊。
1.3
簡單
其實(shí)網(wǎng)絡(luò)模塊沒有什么神秘。它的一般性框架是這樣的(火影手游的PVP網(wǎng)絡(luò)模塊是專用的網(wǎng)絡(luò)模塊,詳見我之前的文章,以及后續(xù)的教程):
圖1 網(wǎng)絡(luò)模塊的一般性框架
看起來好像很簡單,大致就分為兩大部分:連接管理器和協(xié)議管理器。而且這兩個管理器的實(shí)現(xiàn)也相當(dāng)簡單。大致如下:
圖2 連接管理器與協(xié)議管理器的實(shí)現(xiàn)
ConnectManager。它維護(hù)一個Connection實(shí)例列表。這些實(shí)例根據(jù)底層通訊接口的不同,有多種類型。Connection封裝網(wǎng)絡(luò)模塊接法圖解ab了數(shù)據(jù)的收發(fā)邏輯,它分別為Send和Receive提供Buffer。它主要實(shí)現(xiàn)以下功能:
創(chuàng)建連接。
這部分功能主要在XXConnection類實(shí)現(xiàn),不同的通訊接口,連接方式不同。比如Apollo的通訊接口,需要提供公司的一攬子參數(shù)。而Bluetooth接口而需要提供BluetoothMacAddress。而采用底層的Socket實(shí)現(xiàn)的UDP通訊接口,則無須Connect過程,那么我們就給它虛擬一個假的Connect過程,以保持IConnection接口的統(tǒng)一性。等等等等。
收發(fā)數(shù)據(jù)。
大部分通訊接口對數(shù)據(jù)的Recv是通過輪詢實(shí)現(xiàn)的,在ConnectManager里將輪詢操作統(tǒng)一轉(zhuǎn)換為事件方式。
斷線重連。
Connection分別為Send和Recv提供了Buffer,以便支持靜默重連,使上層邏輯在大部分情況下無須關(guān)心網(wǎng)絡(luò)是否斷開,也可以發(fā)送數(shù)據(jù)。比如,網(wǎng)絡(luò)突然斷開了,假設(shè)A模塊不負(fù)責(zé)維護(hù)在線狀態(tài),那么在它看來,它依然可以正常發(fā)送數(shù)據(jù)。假設(shè)B模塊負(fù)責(zé)維護(hù)在線狀態(tài),那么它應(yīng)該監(jiān)聽到網(wǎng)絡(luò)斷開,然后進(jìn)行重連,最后重連成功。在網(wǎng)絡(luò)重連成功后,緩存在Connection的數(shù)據(jù),就可以發(fā)送出去了。整個過程,對A模塊是不可感知的。(是不是覺得斷線靜默重連也沒有想像中那么復(fù)雜了?)
ProtocolManager。相對ConnectManager,它簡單得多。它維護(hù)一個從協(xié)議ID到協(xié)議類的映射(對于C#這種具有反射機(jī)制的語言,可以直接映射到協(xié)議類,但是對于C++則可以用其它方法來實(shí)現(xiàn)映射)。并且定義了協(xié)議格式。
到此為止,一個幾乎通用的網(wǎng)絡(luò)模塊框架基本上搭完了。是不是很簡單?
1.4
模塊糖
模塊糖,這是我杜撰的一個詞。就像語法糖一樣。對于不同的項(xiàng)目,可以給ConnectManager和ProtocolManager加一些糖,讓它用起來更甜。比如將SendProtocol(pid, PTLObj, connId)包裝成SendDirProtocol(pid,PTLObj)和SendZoneProtocol(pid,PTLObj)等;將CreateConnection(connId,type,ip,port)包裝成CreateDirConnection(ip,port)和CreateZoneConnection(ip,port)等。Dir和Zone在網(wǎng)絡(luò)模塊中的含義大家應(yīng)該都知道。
等等等等。
2
連接層實(shí)現(xiàn)
上面聊了一下網(wǎng)絡(luò)模塊的一般性框架。下面從具體實(shí)現(xiàn)來聊聊相關(guān)技術(shù)。掌握了這些技術(shù)點(diǎn),便可以輕松實(shí)現(xiàn)一個網(wǎng)絡(luò)模塊的連接層。
2.1
關(guān)于Socket
Socket就是常說的套接字。說實(shí)話我對這個翻譯是很懵逼的。Socket就是我們正常網(wǎng)絡(luò)編程中能夠接觸到的最底層的通訊接口。對于它的原理,在這篇文章中,我們只意會,不言傳。
對于Socket,我們最需要關(guān)注的是它的工作方式。在客戶端Socket主要有2種工作方式:
同步方式。無論是UDP還是TCP,在用Socket進(jìn)行連接、發(fā)送、接收的時候,在未完成工作前代碼不再繼續(xù)往下執(zhí)行,處于等待狀態(tài),直到該語句完成對應(yīng)個工作后才繼續(xù)執(zhí)行下一條語句。值得注意的是,UDP和TCP對于一件工作是否完成的定義不同,以Send為例,如下圖。
對于TCP來說,未完成工作就是:
緩沖區(qū)滿了,數(shù)據(jù)無法寫入,
或者數(shù)據(jù)寫入了但是還沒輪到它發(fā)送,
或者數(shù)據(jù)發(fā)送了,但是未收到ACK確認(rèn)。
對于UDP來說,未完成工作就是:緩沖區(qū)滿了,數(shù)據(jù)無法寫入。
圖3 Socket同步方式時序圖
異步方式。即不論對應(yīng)工作是否完成,都會繼續(xù)往下執(zhí)行。當(dāng)工作完成后,是通過一個回調(diào)來通知調(diào)用者(千萬注意:這個回調(diào)是在一個Socket內(nèi)部創(chuàng)建的子線程上下文中)。參照上圖,不需要單獨(dú)用時序圖來說明了。
在同步方式中,可以理解為有一個Loop在不停地輪詢是否完成工作,直到工作完成才結(jié)束Loop。為了避免UI以及主邏輯被卡住,一般需要將以同步方式工作的操作都放在自制的子線程中。而在異步方式中,實(shí)質(zhì)上是Socket內(nèi)部創(chuàng)建了一個子線程。
那么綜合以上情況,在實(shí)際使用中,我們應(yīng)該選擇“同步方式”還是“異步方式”呢?我做的不完全性能測試的結(jié)論是,同步方式的性能大概是異步方式的4倍。這是很容易理解的,因?yàn)檫@里所謂的異步方式其實(shí)就是Socket內(nèi)部幫我們做了一個線程,而且它為了考慮到基礎(chǔ)組件的通用性,肯定在性能方面會有所損耗。
看看下表的對比:
對比
同步方式
異步方式
性能
高
低
復(fù)雜度
自制線程
內(nèi)置線程
靈活性
高
低
所以,如果對網(wǎng)絡(luò)連接沒有特別要求的情況下,比如獨(dú)立小游戲,可優(yōu)先考慮異步方式,省心省事。但是,我更愿意使用同步方式+
自制線程
,對于系列性能更加可控。
2.2
關(guān)于多線程
當(dāng)我們不得不使用子線程時,就要面對一個令很多新同學(xué)都感到陌生神秘的東西:線程。由于使用多線程的情況并不多,所以主要掌握以下幾點(diǎn)大概便可以在網(wǎng)絡(luò)編程中使用多線程了。
線程函數(shù)。
如果說主線程是從Main函數(shù)開始的(在Unity+C#里,你是看不到Main函數(shù)的。),那么子線程也是從一個函數(shù)開始。為了防止主線程與子線程的代碼邏輯搞混,建議將線程函數(shù)定義在一個單獨(dú)的類里。由這個函數(shù)所調(diào)用的所有被調(diào)用函數(shù)都在這個類里。
前臺線程和后臺線程。
切記,系統(tǒng)默認(rèn)創(chuàng)建的子線程是前臺線程,它將帶來一個問題,就是當(dāng)主線程已經(jīng)結(jié)束時,程序還會運(yùn)行。如果將它設(shè)置為后臺線程,則當(dāng)主線程結(jié)束時,所有后臺線程都會無異常中止。
線程同步。
當(dāng)主線程和子線程存在共用數(shù)據(jù)時,為了避免多線程同時操作同一數(shù)據(jù),需要使用“鎖”。C#有多種鎖定方式,比較常用的是lock語句。建議不要直接lock需要操作的數(shù)據(jù),而是為這個數(shù)據(jù)定義一個對應(yīng)的object,lock這個object。因?yàn)橛行╊愋偷臄?shù)據(jù),比如int,是無法直接lock的。
異常處理。
使用Try/Catch進(jìn)行異常處理時,不要在線程的創(chuàng)建處TryCatch。一旦線程創(chuàng)建成功,線程執(zhí)行過程中的異常,是無法在其它線程中被捕獲的。正確的做法是在線程函數(shù)里TryCatch。
當(dāng)然關(guān)于多線程的其它知識,有很多專門的文章介紹。
2.3
關(guān)于TryCatch
對于C#來講,你使用或者不使用TryCatch,對于性能的消耗是一樣的。甚至你在離Exception最近的地方使用了TryCatch,還會提高性能。因?yàn)槿绻划?dāng)發(fā)生Exception,運(yùn)行時會依次向上遞歸尋找TryCatch代碼,最終會找到運(yùn)行時那一層去,然后成功被運(yùn)行時Catch到。與其如此,為什么不自己去Catch呢?所以,應(yīng)該積極地在適當(dāng)?shù)牡胤绞褂肨ryCatch,但是一定要在Catch后進(jìn)行處理并且輸出日志,否則就隱藏了問題!
2.4
關(guān)于連接
Connection是對底層或者基礎(chǔ)通訊接口以及可能使用的線程相關(guān)邏輯進(jìn)行封裝。一般情況下,按照所使用的通訊接口類型進(jìn)行封裝。
如果使用Apollo的通訊組件,可以封裝成ApolloConnection。
如果使用Socket,則封裝成TCPConnection/UDPConnection。
如果使用Bluetooth,則封裝一個BluetoothConnection。
如果使用RS232串口通訊,則封裝一個RS232Connection。
這個世界上有很多種通訊方式,你都可以封裝成對應(yīng)的Connection,以便統(tǒng)一它的通訊接口。除此之外,它主要還將提供Send和Recv的數(shù)據(jù)緩存。
2.5
關(guān)于數(shù)據(jù)包/數(shù)據(jù)流
從圖1中,我們看到,一個“協(xié)議實(shí)例”將轉(zhuǎn)換為一個“協(xié)議數(shù)據(jù)包”,然后“協(xié)議數(shù)據(jù)包”將以“數(shù)據(jù)流/數(shù)據(jù)包”的形式發(fā)送出去。
在不同的傳輸協(xié)議中,數(shù)據(jù)的發(fā)送形式是不同的。在TCP傳輸中,數(shù)據(jù)是以流的形式發(fā)送。而在UDP傳輸中,數(shù)據(jù)是以包的形式發(fā)送。
它們的區(qū)別在于,一個數(shù)據(jù)包里包含一個協(xié)議的完整數(shù)據(jù)。而一段數(shù)據(jù)流里可能包含的是多個協(xié)議的數(shù)據(jù),或者一個不完整的協(xié)議數(shù)據(jù)。
2.6
關(guān)于輪詢
無論是使用同步方式還是異步方式,都會發(fā)生——主線程從子線程讀取數(shù)據(jù)——操作。有些同學(xué)喜歡采用拋事件的方式,但是,那樣只會使子線程的上下文擴(kuò)散得更廣泛更亂。如果有一天你發(fā)生在一個事件的回調(diào)函數(shù)里調(diào)用Time.realtimeSinceStartup一直莫名其妙報錯,那么,這個回調(diào)函數(shù)一定是從一個子線程里調(diào)出來的。但是,你完全懵逼。
所以,建議采用輪詢這種古老的方式,將子線程的上下文限制在一個輪小的范圍里。
除了以上主要原因外,還有一個原因:
異常隔離。防止業(yè)務(wù)層模塊異常導(dǎo)致整個Connection的異常。因?yàn)镃onnection作為基礎(chǔ)功能,還有其它模塊在使用。
3
協(xié)議層實(shí)現(xiàn)
協(xié)議層相對連接層簡單得多。它的主要相關(guān)技術(shù)如下。
3.1
協(xié)議格式
最基本的協(xié)議格式如下:
協(xié)議頭
PID: 協(xié)議ID
Index: 協(xié)議發(fā)送序列號
DataBuffSize: 協(xié)議體的數(shù)據(jù)長度
CheckSum: 校驗(yàn)和
協(xié)議體
DataBuff: 協(xié)議數(shù)據(jù)Buffer。
以上協(xié)議格式定義了一個協(xié)議數(shù)據(jù)包。其中DataBuff來自對協(xié)議實(shí)例的序列化。
為了實(shí)現(xiàn)對協(xié)議實(shí)例的序列化,我們可以自定義一個IProtocolBase接口,讓具體協(xié)議來實(shí)現(xiàn)這個接口。
但是,在實(shí)際應(yīng)用中,我們都是直接使用Google的ProtoBuf作為協(xié)議的基類。它已經(jīng)提供了非常高效的序列化和反序列化功能。
3.2
協(xié)議流
在章節(jié)2.4中得知,有些情況下,協(xié)議層收到來自連接層的數(shù)據(jù),并不一定是一個恰好完整的協(xié)議數(shù)據(jù)包,而有可能一段數(shù)據(jù)流。于是,為了統(tǒng)一邏輯,不管收到的是數(shù)據(jù)包,還是數(shù)據(jù)流,我都將它們統(tǒng)一為協(xié)議流。
在ProtocolManager中,需要對協(xié)議流進(jìn)行合并或分割處理。其實(shí)很簡單,它的邏輯流程如下所示。(需要注意的是,如果系統(tǒng)中同時存在多個Connection,需要為每一個Connection定義一個協(xié)議流。)
圖4 協(xié)議流處理邏輯
3.3
協(xié)議分類
一般情況下,協(xié)議可以分為這幾類:
只發(fā)送,不需要監(jiān)聽回包。用于向服務(wù)器上報數(shù)值。
無發(fā)送,只需要監(jiān)聽回包。用于服務(wù)器Push數(shù)值,或者觸發(fā)邏輯。
一處發(fā)送,多處監(jiān)聽回包。用于基礎(chǔ)功能協(xié)議。
一處發(fā)送,一處監(jiān)聽回包。用于具體功能協(xié)議。
ProtocolManager應(yīng)該對上面4種協(xié)議都能提供支持。
3.4
協(xié)議ID規(guī)則
后臺喜歡把協(xié)議ID叫CMD,或者CmdID。我一般直譯為PID。PID的規(guī)則一般有兩種:
同一條協(xié)議,發(fā)包和回包時,PID相同。因?yàn)榘l(fā)包和回包時,雖然協(xié)議體內(nèi)容不同,但卻是一回一答,是為同一個功能服務(wù)的。
同一條協(xié)議,發(fā)包和回包時,PID不同。因?yàn)榘l(fā)包和回包時,協(xié)議體的內(nèi)容不同。目前比較流行這種方式。為了使編程更方便,以及代碼容易理解,一般將回包的PID定義為發(fā)包的PID+1。
4
調(diào)試
無論做什么模塊開發(fā),都離不開調(diào)試。而網(wǎng)絡(luò)模塊對于調(diào)試的要求更高。可以這么說,你編寫一個網(wǎng)絡(luò)模塊可能需要2天,但是將來花在調(diào)試它的時間可能是直到項(xiàng)目結(jié)束。
所以,在你完成網(wǎng)絡(luò)模塊的代碼編寫之后,一定不要忘記,為了能夠高效地調(diào)試,做好一切準(zhǔn)備。
4.1
網(wǎng)絡(luò)日志系統(tǒng)
我相信,你的項(xiàng)目中一定已經(jīng)有了現(xiàn)成的日志系統(tǒng)。但是那遠(yuǎn)遠(yuǎn)不夠。建議在其基礎(chǔ)上封裝一個網(wǎng)絡(luò)日志系統(tǒng),并且為它提供一個專用面板。它會比在總?cè)罩疚谋纠锟淳W(wǎng)絡(luò)日志要高效得多,性能也可控得多。它應(yīng)該提供如下功能:
單獨(dú)輸出網(wǎng)絡(luò)模塊的日志。
以16進(jìn)制顯示每一個Connection的Send和Recv緩沖區(qū)數(shù)據(jù)。這是你能夠接觸到的最底層接口的數(shù)據(jù),后臺會經(jīng)常和你Check這些數(shù)據(jù)。
列出每一條被注冊的協(xié)議。
記錄發(fā)送和接收到的每一條協(xié)議的內(nèi)容。如果該協(xié)議是注冊的,則可以反序列化為結(jié)構(gòu)性信息,如果未注冊,則提示未注冊,并且顯示16進(jìn)制數(shù)據(jù)。
統(tǒng)計斷線重連次數(shù),斷線時長,網(wǎng)絡(luò)延時等。
4.2
網(wǎng)絡(luò)狀況模擬
在研發(fā)階段,這個功能是非常有用的。可以幫助你高效測試網(wǎng)絡(luò)模塊在各種網(wǎng)絡(luò)情況下,是否正常工作。也可以為業(yè)務(wù)模塊提供網(wǎng)絡(luò)相關(guān)的測試手段。比如,測試在線模塊,斷線重連邏輯(再也不需要撥網(wǎng)線了)等。
4.3
抓包工具
一般使用Wireshark和Fiddler。網(wǎng)絡(luò)編程必備工具。
點(diǎn)擊一下
立即閱讀相關(guān)好文章
《貪婪洞窟》談貪婪設(shè)計丨騰訊GAD游戲創(chuàng)新大賽丨
游戲美術(shù)3D設(shè)計干貨回顧丨為VR優(yōu)化UE4渲染器丨
這么做設(shè)計才好玩丨Unity教程
MOBA類游戲核心設(shè)計分析
......
近期熱文
工作效率UP!Unity3D 手游版本構(gòu)建之路
新年送什么禮物給程序員男朋友,才能又走心又實(shí)用?
評論列表
還沒有評論,快來說點(diǎn)什么吧~