• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            xiaoxiaoling

            C++博客 首頁 新隨筆 聯(lián)系 聚合 管理
              17 Posts :: 2 Stories :: 9 Comments :: 0 Trackbacks


            dpdk是通過許多不同的緯度來加速包處理的,其中主要包括:

             

            hugepage大頁內(nèi)存(進程使用的是虛擬地址,一般頁表(4k)能映射的虛擬地址空間有限,使用大頁能減少換頁次數(shù)提高cache命中,通過mmap把大頁映射到用戶態(tài)的虛擬地址空間有用過mmap的都知道這是實現(xiàn)共享內(nèi)存的手段,所以dpdk還支持多進程共享內(nèi)存)

             

            cache預取 (每次預讀當前數(shù)據(jù)相鄰前后的數(shù)據(jù)),批量操作數(shù)據(jù),cache line對齊(通過浪費一點內(nèi)存將要操作的數(shù)據(jù)對齊)

             

            接管了網(wǎng)卡用戶態(tài)驅(qū)動使用輪詢而不是網(wǎng)卡中斷

             

            將網(wǎng)卡rx tx隊列映射到用戶態(tài)空間實現(xiàn)真正的零拷貝(傳統(tǒng)堆棧至少也得一次拷貝,因為隊列空間在內(nèi)核而內(nèi)核和用戶態(tài)使用不同的地址空間)(傳統(tǒng)堆棧為了支持通用性,例如ipx等其他網(wǎng)絡,將包處理過程分了很多層次,層之間的接口標準統(tǒng)一數(shù)據(jù)結(jié)構(gòu)就需要轉(zhuǎn)換,無形中帶來了巨大的成本,如osi七層模型而實用的就是tcp/ip四層模型)

             

            線程綁定cpu

             

            支持NUMA,不同的core屬于不同的node,每個node有自己的mempool減少沖突

             

            無鎖環(huán)形隊列(沖突發(fā)生時也是一次cas的開銷)

             

            dpdk通過tools/dpdk-setup.sh的腳本,通過編譯、掛載內(nèi)核模塊, 綁定網(wǎng)卡(先把網(wǎng)卡ifconfig down),設置hugepage后就可以使用了。

             

             

            在內(nèi)核模塊igb加載時,會注冊pci設備驅(qū)動

            static struct pci_driver igbuio_pci_driver = {

            .name = "igb_uio",

            .id_table = NULL,

            .probe = igbuio_pci_probe,

            .remove = igbuio_pci_remove,

            };

             

            在綁定網(wǎng)卡時,會調(diào)用igbuio_pci_probe,使用用戶態(tài)驅(qū)動uio接管網(wǎng)卡(中斷處理、mmap映射設備內(nèi)存到用戶空間)

            系統(tǒng)啟動時,bios會將設備總線地址信息記錄在/sys/bus/pci/devices,dpdk程序啟動時會去這里掃描pci設備,根據(jù)不同類型的NIC有對應的初始化流程。在后面配置隊列的時候會把用戶態(tài)的隊列內(nèi)存地址通過硬件指令交給NIC,從而實現(xiàn)零拷貝。


             

            如果NIC收到包,會做標記,輪詢的時候通過標記取數(shù)據(jù)包

            while (nb_rx < nb_pkts) {

            /*

             * The order of operations here is important as the DD status

             * bit must not be read after any other descriptor fields.

             * rx_ring and rxdp are pointing to volatile data so the order

             * of accesses cannot be reordered by the compiler. If they were

             * not volatile, they could be reordered which could lead to

             * using invalid descriptor fields when read from rxd.

             */

            rxdp = &rx_ring[rx_id];

            staterr = rxdp->wb.upper.status_error;

            if (! (staterr & rte_cpu_to_le_32(E1000_RXD_STAT_DD)))

            break;

            rxd = *rxdp;

            發(fā)包的輪詢就是輪詢發(fā)包結(jié)束的硬件標志位,硬件發(fā)包完成會寫回標志位,驅(qū)動發(fā)現(xiàn)后再釋放對應的描述符和緩沖塊。

             

            KNI

            通過創(chuàng)建一個虛擬網(wǎng)卡,將收到的包丟給協(xié)議棧

             /* 發(fā)送skb到協(xié)議棧 */

                        /* Call netif interface */

                        netif_receive_skb(skb);

             

            POWER

            在負載小的時候沒有必要使用輪詢模式,這時可以打開網(wǎng)卡中斷 使用eventfd  epoll通知用戶層

             

            Ring

            無鎖環(huán)形隊列的核心就是操作頭尾索引,先將頭尾索引賦給臨時變量,再把尾索引往后跳n個位置,利用cas判斷頭如果還是在原來的位置就指向尾否則就重復這個過程,然后在操作中間跳過的n個元素就是安全的了,此時頭尾索引應該指向同一個位置,如果不同應該是有別的線程也在操作,重復等待即可。(這里有個細節(jié),索引是只加不減的,因為是環(huán)形隊列索引又是unsigned 32bits,所以每次取數(shù)據(jù)前把索引模隊列長度-1, uint32_t mask;           /**< Mask (size-1) of ring. */即可)

             

            Windows下使用vmware虛擬機的時候出現(xiàn)EAL: Error reading from file descriptor,根據(jù)網(wǎng)上的說法打了patch還是不行,后來嘗試掛載內(nèi)核模塊的時候不加載vfio模塊就可以了

             

            posted on 2017-02-05 14:08 clcl 閱讀(882) 評論(0)  編輯 收藏 引用
            国产一久久香蕉国产线看观看| 久久久久国产精品三级网| 国产午夜福利精品久久| 精品一区二区久久| 99久久精品国产高清一区二区 | 99久久国产热无码精品免费| 久久久久免费精品国产| 久久精品国产男包| 无码人妻精品一区二区三区久久| 国产精品久久久久影院色| 久久99亚洲综合精品首页| 久久香蕉国产线看观看精品yw| 99久久国产主播综合精品| 欧美一区二区三区久久综合| 久久久免费观成人影院| 精品午夜久久福利大片| 久久婷婷五月综合色高清| 亚洲精品高清一二区久久| 99久久婷婷国产综合精品草原| 久久久国产打桩机| 午夜精品久久久内射近拍高清| 91久久精品国产91性色也| 2021久久国自产拍精品| 97精品伊人久久大香线蕉| 久久中文字幕视频、最近更新| 91精品国产高清久久久久久国产嫩草| 欧美日韩精品久久免费| 无码8090精品久久一区| 观看 国产综合久久久久鬼色 欧美 亚洲 一区二区 | 久久国产精品成人免费| 亚洲精品乱码久久久久久中文字幕 | 欧洲国产伦久久久久久久| 97久久国产亚洲精品超碰热| 亚洲va久久久噜噜噜久久| 久久久久久久免费视频| 尹人香蕉久久99天天拍| 久久精品亚洲欧美日韩久久| 精品久久久久久无码国产| 久久伊人影视| 性做久久久久久久久浪潮| 久久久久亚洲精品日久生情|