• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            xiaoxiaoling

            C++博客 首頁 新隨筆 聯(lián)系 聚合 管理
              17 Posts :: 2 Stories :: 9 Comments :: 0 Trackbacks


            dpdk是通過許多不同的緯度來加速包處理的,其中主要包括:

             

            hugepage大頁內(nèi)存(進程使用的是虛擬地址,一般頁表(4k)能映射的虛擬地址空間有限,使用大頁能減少換頁次數(shù)提高cache命中,通過mmap把大頁映射到用戶態(tài)的虛擬地址空間有用過mmap的都知道這是實現(xiàn)共享內(nèi)存的手段,所以dpdk還支持多進程共享內(nèi)存)

             

            cache預取 (每次預讀當前數(shù)據(jù)相鄰前后的數(shù)據(jù)),批量操作數(shù)據(jù),cache line對齊(通過浪費一點內(nèi)存將要操作的數(shù)據(jù)對齊)

             

            接管了網(wǎng)卡用戶態(tài)驅(qū)動使用輪詢而不是網(wǎng)卡中斷

             

            將網(wǎng)卡rx tx隊列映射到用戶態(tài)空間實現(xiàn)真正的零拷貝(傳統(tǒng)堆棧至少也得一次拷貝,因為隊列空間在內(nèi)核而內(nèi)核和用戶態(tài)使用不同的地址空間)(傳統(tǒng)堆棧為了支持通用性,例如ipx等其他網(wǎng)絡(luò),將包處理過程分了很多層次,層之間的接口標準統(tǒng)一數(shù)據(jù)結(jié)構(gòu)就需要轉(zhuǎn)換,無形中帶來了巨大的成本,如osi七層模型而實用的就是tcp/ip四層模型)

             

            線程綁定cpu

             

            支持NUMA,不同的core屬于不同的node,每個node有自己的mempool減少沖突

             

            無鎖環(huán)形隊列(沖突發(fā)生時也是一次cas的開銷)

             

            dpdk通過tools/dpdk-setup.sh的腳本,通過編譯、掛載內(nèi)核模塊, 綁定網(wǎng)卡(先把網(wǎng)卡ifconfig down),設(shè)置hugepage后就可以使用了。

             

             

            在內(nèi)核模塊igb加載時,會注冊pci設(shè)備驅(qū)動

            static struct pci_driver igbuio_pci_driver = {

            .name = "igb_uio",

            .id_table = NULL,

            .probe = igbuio_pci_probe,

            .remove = igbuio_pci_remove,

            };

             

            在綁定網(wǎng)卡時,會調(diào)用igbuio_pci_probe,使用用戶態(tài)驅(qū)動uio接管網(wǎng)卡(中斷處理、mmap映射設(shè)備內(nèi)存到用戶空間)

            系統(tǒng)啟動時,bios會將設(shè)備總線地址信息記錄在/sys/bus/pci/devices,dpdk程序啟動時會去這里掃描pci設(shè)備,根據(jù)不同類型的NIC有對應(yīng)的初始化流程。在后面配置隊列的時候會把用戶態(tài)的隊列內(nèi)存地址通過硬件指令交給NIC,從而實現(xiàn)零拷貝。


             

            如果NIC收到包,會做標記,輪詢的時候通過標記取數(shù)據(jù)包

            while (nb_rx < nb_pkts) {

            /*

             * The order of operations here is important as the DD status

             * bit must not be read after any other descriptor fields.

             * rx_ring and rxdp are pointing to volatile data so the order

             * of accesses cannot be reordered by the compiler. If they were

             * not volatile, they could be reordered which could lead to

             * using invalid descriptor fields when read from rxd.

             */

            rxdp = &rx_ring[rx_id];

            staterr = rxdp->wb.upper.status_error;

            if (! (staterr & rte_cpu_to_le_32(E1000_RXD_STAT_DD)))

            break;

            rxd = *rxdp;

            發(fā)包的輪詢就是輪詢發(fā)包結(jié)束的硬件標志位,硬件發(fā)包完成會寫回標志位,驅(qū)動發(fā)現(xiàn)后再釋放對應(yīng)的描述符和緩沖塊。

             

            KNI

            通過創(chuàng)建一個虛擬網(wǎng)卡,將收到的包丟給協(xié)議棧

             /* 發(fā)送skb到協(xié)議棧 */

                        /* Call netif interface */

                        netif_receive_skb(skb);

             

            POWER

            在負載小的時候沒有必要使用輪詢模式,這時可以打開網(wǎng)卡中斷 使用eventfd  epoll通知用戶層

             

            Ring

            無鎖環(huán)形隊列的核心就是操作頭尾索引,先將頭尾索引賦給臨時變量,再把尾索引往后跳n個位置,利用cas判斷頭如果還是在原來的位置就指向尾否則就重復這個過程,然后在操作中間跳過的n個元素就是安全的了,此時頭尾索引應(yīng)該指向同一個位置,如果不同應(yīng)該是有別的線程也在操作,重復等待即可。(這里有個細節(jié),索引是只加不減的,因為是環(huán)形隊列索引又是unsigned 32bits,所以每次取數(shù)據(jù)前把索引模隊列長度-1, uint32_t mask;           /**< Mask (size-1) of ring. */即可)

             

            Windows下使用vmware虛擬機的時候出現(xiàn)EAL: Error reading from file descriptor,根據(jù)網(wǎng)上的說法打了patch還是不行,后來嘗試掛載內(nèi)核模塊的時候不加載vfio模塊就可以了

             

            posted on 2017-02-05 14:08 clcl 閱讀(899) 評論(0)  編輯 收藏 引用
            香蕉久久永久视频| 超级碰久久免费公开视频| 久久这里只有精品首页| 久久不见久久见免费视频7| 国内精品久久久久影院网站 | 久久久久久狠狠丁香| 国产精自产拍久久久久久蜜| 亚洲午夜久久久| 久久久国产精品网站| 久久人与动人物a级毛片| 精品午夜久久福利大片| 99久久做夜夜爱天天做精品| 99久久中文字幕| 色综合久久中文字幕无码| 狠狠精品干练久久久无码中文字幕 | 久久96国产精品久久久| 99精品久久精品一区二区| 久久性生大片免费观看性| 91精品国产91久久久久福利| 精品综合久久久久久98| 91久久国产视频| 狠狠干狠狠久久| 久久亚洲中文字幕精品有坂深雪| 精品国产乱码久久久久软件| 久久精品国产亚洲5555| 国产99久久九九精品无码| 国产精品美女久久久久久2018| 久久久久高潮综合影院| 欧美亚洲日本久久精品| 青青草国产97免久久费观看| 色综合久久中文综合网| 国产精品狼人久久久久影院| 国产精品毛片久久久久久久 | 无码专区久久综合久中文字幕| 国产精品久久久久免费a∨| 亚洲另类欧美综合久久图片区| 亚洲国产成人久久综合碰碰动漫3d| 欧美激情精品久久久久| 亚洲伊人久久大香线蕉苏妲己| 久久综合丁香激情久久| 久久e热在这里只有国产中文精品99|