上篇介紹了一個簡單的UDP服務框架,但是面對海量的請求,同步框架顯然有點力不從心。于是在我接手好友系統(tǒng)的接口服務的時候,就采用了一個強大的異步框架——MCP框架。
MCP框架是一個多進程異步框架,支持UDP、TCP和http,結(jié)構(gòu)很靈活,可以根據(jù)需要將各組件像搭積木一樣組裝。下面是MCP最基礎的進程結(jié)構(gòu)。分為3種進程:CCD、MCD和DCC。
CCD是面向客戶端的進程,是服務的入口,負責處理前端的請求,維護連接,收發(fā)數(shù)據(jù),并向MCD轉(zhuǎn)發(fā)。其內(nèi)部使用線程池實現(xiàn)對TCP請求的listen和accept。服務器內(nèi)部進程之間使用flow(實際上是一個數(shù)字)來表示連接,因此CCD負責維護前端請求句柄和flow之間的映射關(guān)系。CCD一般根據(jù)端口和協(xié)議設置多個。
DCC是面向后端的進程,負責向其他服務發(fā)出請求。使用跟CCD類似實現(xiàn)方法,只是面向的是服務器。在經(jīng)過協(xié)程改造的MCP框架中,DCC被去掉了,因為MCD通過協(xié)程就可以實現(xiàn)與后端的交互了。DCC跟后端的連接一般采用長連接,避免頻繁創(chuàng)建和釋放連接導致大量TIME_WAIT的情況。
MCD是服務器的核心進程,負責處理業(yè)務邏輯,通過epoll和回調(diào)函數(shù)實現(xiàn)異步。
進程之間通過MQ進行通信,MQ采用共享內(nèi)存隊列傳輸數(shù)據(jù),而通過管道傳輸讀寫信號。如下圖所示,進程首先把數(shù)據(jù)寫入隊列,當隊列中的數(shù)據(jù)達到一定長度(避免每個請求都讀取數(shù)據(jù))時,MQ會通過管道傳輸一個字符。MQ的使用者只要通過epoll監(jiān)聽管道句柄,就可以及時地獲得讀寫信號。
了解了MCP的基本原理,就可以根據(jù)業(yè)務的需要進程個性化的定制。例如因為MCD單進程可能有性能瓶頸,我們對其進行了擴展,改造成多MCD進程版本。如圖所示,MCD后端派生出多個SUBMCD進程,SUBMCD進程負責處理真正的業(yè)務邏輯;而MCD進程退化成一個業(yè)務分發(fā)的程序,同時負責一些公共的業(yè)務邏輯,例如負責管理全局哈希表數(shù)據(jù)的超時清理(定期掃描超時節(jié)點,表太大的情況可以分次掃描,只要保持好掃描位置信息即可)。
SUBMCD直接跟CCD和DCC通信(圖中省略了SUBMCD和CCD之間的MQ),通過配置文件設置,在服務初始化的時候就在各個需要通信的進程間創(chuàng)建好共享內(nèi)存MQ。這樣可以避免MCD成為通信瓶頸。
另外還派生出一個MONITOR進程,負責日志的收集和輸出,還可以做其他一些耗時的操作,避免業(yè)務進程阻塞。
MCP框架兼有功能強大和性能卓越的優(yōu)點。具體壓測數(shù)據(jù)不太記得,在一個數(shù)據(jù)包轉(zhuǎn)發(fā)服務中,QPS也在30W+。在使用上,有一定的學習成本,但是適用面非常廣,可以說一個框架走天下。
另外有需要云服務器可以了解下創(chuàng)新互聯(lián)建站jinyejixie.com,海內(nèi)外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
網(wǎng)站欄目:后臺服務器框架中的瑞士軍刀——MCP-創(chuàng)新互聯(lián)
網(wǎng)址分享:http://jinyejixie.com/article18/dijgdp.html
成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站設計公司、商城網(wǎng)站、外貿(mào)網(wǎng)站建設、ChatGPT、網(wǎng)站改版、做網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)