• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            loop_in_codes

            低調做技術__歡迎移步我的獨立博客 codemaro.com 微博 kevinlynx

            libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)

            Author : Kevin Lynx

            前言

                可以說對于任何網絡庫(模塊)而言,一個緩沖模塊都是必不可少的。緩沖模塊主要用于緩沖從網絡接收到的數據,以及
            用戶提交的數據(用于發送)。很多時候,我們還需要將網絡模塊層(非TCP層)的這些緩沖數據拷貝到用戶層,而這些內存拷貝
            都會消耗時間。
                在這里,我簡要分析下libevent的相關代碼(event.h和buffer.c)。

            結構

                關于libevent的緩沖模塊,主要就是圍繞evbuffer結構體展開。先看下evbuffer的定義:

            /*event.h*/
            struct evbuffer {
                u_char 
            *buffer;
                u_char 
            *orig_buffer; 

                size_t misalign;
                size_t totallen;
                size_t off; 

                
            void (*cb)(struct evbuffer *, size_t, size_t, void *);
                
            void *cbarg;
            }
            ;


                libevent的緩沖是一個連續的內存區域,其處理數據的方式(寫數據和讀數據)更像一個隊列操作方式:從后寫入,從前
            讀出。evbuffer分別設置相關指針(一個指標)用于指示讀出位置和寫入位置。其大致結構如圖:

            evbuffer_str
                orig_buffer指向由realloc分配的連續內存區域,buffer指向有效數據的內存區域,totallen表示orig_buffer指向的內存
            區域的大小,misalign表示buffer相對于orig_buffer的偏移,off表示有效數據的長度。

            實際運作

                這里我將結合具體的代碼分析libevent是如何操作上面那個隊列式的evbuffer的,先看一些輔助函數:

            evbuffer_drain:
                該函數主要操作一些指標,當每次從evbuffer里讀取數據時,libevent便會將buffer指針后移,同時增大misalign,減小off,
            而該函數正是做這件事的。說白了,該函數就是用于調整緩沖隊列的前向指標。

            evbuffer_expand:
                該函數用于擴充evbuffer的容量。每次向evbuffer寫數據時,都是將數據寫到buffer+off后,buffer到buffer+off之間已被
            使用,保存的是有效數據,而orig_buffer和buffer之間則是因為讀取數據移動指標而形成的無效區域。
                evbuffer_expand的擴充策略在于,首先判斷如果讓出orig_buffer和buffer之間的空閑區域是否可以容納添加的數據,如果
            可以,則移動buffer和buffer+off之間的數據到orig_buffer和orig_buffer+off之間(有可能發生內存重疊,所以這里移動調用的
            是memmove),然后把新的數據拷貝到orig_buffer+off之后;如果不可以容納,那么重新分配更大的空間(realloc),同樣會移動
            數據。
                擴充內存的策略為:確保新的內存區域最小尺寸為256,且以乘以2的方式逐步擴大(256、512、1024、...)。

                了解了以上兩個函數,看其他函數就比較簡單了。可以看看具體的讀數據和寫數據:

            evbuffer_add:
                該函數用于添加一段用戶數據到evbuffer中。很簡單,就是先判斷是否有足夠的空閑內存,如果沒有則調用evbuffer_expand
            擴充之,然后直接memcpy,更新off指標。

            evbuffer_remove:
                該函數用于將evbuffer中的數據復制給用戶空間(讀數據)。簡單地將數據memcpy,然后調用evbuffer_drain移動相關指標。

            其他

                回過頭看看libevent的evbuffer其實是非常簡單的(跟我那個kl_net里的buffer一樣),不知道其他人有沒有更優的緩沖管理
            方案。evbuffer還提供了兩個函數:evbuffer_write和evbuffer_read,用于直接在套接字(其他文件描述符)上寫/讀數據。

                另外,關于libevent,因為官方提供的VC工程文件有問題,很多人在windows下編譯不過。金慶曾提供過一種方法。其實主要
            就是修改event-config.h文件,修改編譯相關配置。這里我也提供一個解決步驟,順便提供完整包下載:

            1. vs2005打開libevent.dsw,轉換四個工程(event_test, libevent, signal_test, time_test)
            2. 刪除libevent項目中所有的文件,重新添加文件,文件列表如下:
               buffer.c
               evbuffer.c
               evdns.c
               evdns.h
               event.c
               event.h
               event_tagging.c
               event-config.h
               event-internal.h
               evhttp.h
               evrpc.h
               evrpc.c
               evrpc-internal.h
               evsignal.h
               evutil.c
               evutil.h
               http.c
               http-internal.h
               log.c
               log.h
               min_heap.h
               strlcpy.c
               strlcpy-internal.h
               tree.h
               win32.c
               config.h
               signal.c
            3. 替換event-config.h,使用libevent-iocp中的
            4. 項目設置里添加HAVE_CONFIG_H預處理宏
            5. 修改win32.c中win32_init函數,加入WSAStartup函數,類似于:
                   WSADATA wd;   
                    int err;
                    struct win32op *winop;
                    size_t size;
                    if( ( err = WSAStartup( MAKEWORD( 2, 2 ), &wd ) ) != 0 )
                        event_err( 1, "winsock startup failed : %d", err );
            6. 修改win32.c中win32_dealloc函數,在函數末尾加上WSACleanup的調用:
                    WSACleanup();
            6. 至此libevent編譯成功;
            7. 幾個例子程序,只需要加入HAVE_CONFIG_H預處理宏,以及連接ws2_32.lib即可;
               (time_test需要修改time-test.c文件,即在包含event.h前包含windows.h)

            libevent-1.4.5-stable-vs2005.zip下載

             

            posted on 2008-07-16 14:28 Kevin Lynx 閱讀(9540) 評論(14)  編輯 收藏 引用 所屬分類: 通用編程network

            評論

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-07-16 15:09 true

            寫的好!  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-08-12 10:32 白云哥

            這個libevent的vs2005包很好,謝謝

            自己偷懶了一把 :)  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-08-25 21:25 weber

            寫得不錯,正在做基于libevent的項目, 一起交流. qq群:64559783  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-10-23 18:07 浪跡天涯

            libevent用于改造網絡模型需要了解哪些知識?  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)[未登錄] 2008-10-23 20:43 Kevin Lynx

            @浪跡天涯
            改造網絡模型?不清楚。我只知道使用別人的庫。- -|  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-12-09 18:42 vcclass

            不錯,分析的很好,很實用。libevent相對于ACE來說輕量級多了,ACE 學習曲線比較陡峭,不建議初學者學習。libevent里面還是有很多東西值得借鑒的。
            ACE用了很多設計模式的思想來封裝,如果對設計模式趕興趣的話可以研究,否則實際意義不是很大。  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)[未登錄] 2009-04-28 20:06 小馬

            新手請教 evbuffer用在什么地方了 libevent是事件響應模型 但是具體事件處理還是要使用者自己的代碼來實現的 不是么  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2009-04-28 22:41 Kevin Lynx

            @小馬
            在我印象里,evbuffer用于緩存邏輯層(即l基于libevent那一層)將要發送的數據,以及緩存從設備(fd)里讀取出的數據。
              回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)[未登錄] 2009-04-30 17:08 小馬

            @Kevin Lynx
            是不是這樣 libevent代碼里本身沒有用到evbuffer 只是我們在用libevent開發自己的應用的時候可以使用evbuffer ?  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2009-04-30 21:40 Kevin Lynx

            @小馬
            為什么你不打開libevent的源代碼搜索下evbuffer呢??  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2009-06-26 21:11 taozzee

            請問 libevent 中類型 struct event_list 在哪定義的呢??

            在VC6下編譯通不過啊。  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2010-05-24 09:09 周江濤

            寫的好,表達能力強,分析透徹!  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2011-05-07 21:49 dourgulf

            其實,這個buffer管理方法效率很差了,涉及很多內存的移動。
            其實,很多socket I/O都提供了buffer數組的發送方式,使用這種方式高效而且簡單。最新的libevent已經放棄了LZ說的這個buffer管理方法了。  回復  更多評論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2014-05-19 15:53 coderchen

            @dourgulf
            現在libevent的buffer應該是多個內存塊組成的chain,但是由于內存不連續,作為接收緩沖區反序列化的時候,還要多拷貝一次數據。  回復  更多評論   

            女人高潮久久久叫人喷水| 热re99久久精品国产99热| 精品久久久久久亚洲精品| 99久久99久久精品国产片| 久久这里的只有是精品23| 色综合久久天天综合| 亚洲精品国精品久久99热一 | 狠狠色伊人久久精品综合网| 久久人人爽人人爽人人av东京热| 777久久精品一区二区三区无码| 亚洲中文字幕久久精品无码APP | 国产精品免费看久久久香蕉| 午夜精品久久久久久中宇| 一本久道久久综合狠狠躁AV| 国产精品免费久久| 好久久免费视频高清| 亚洲AV无码久久| 久久伊人五月丁香狠狠色| 亚洲精品乱码久久久久久蜜桃| 日韩亚洲欧美久久久www综合网| 国产午夜精品久久久久免费视 | 久久五月精品中文字幕| 久久99中文字幕久久| 久久精品亚洲日本波多野结衣| 97精品伊人久久久大香线蕉 | 国产精品久久久久久影院| 久久久无码精品亚洲日韩蜜臀浪潮 | 久久久久久国产精品美女| 三级片免费观看久久| 亚洲国产精品无码久久一线| 一本色道久久综合狠狠躁篇| 久久久久久无码国产精品中文字幕| 亚洲狠狠久久综合一区77777| 91久久精品91久久性色| 996久久国产精品线观看| 国内精品久久久久影院优| 精品久久久久久无码专区不卡| 精品久久久无码人妻中文字幕豆芽| 精品综合久久久久久888蜜芽| 青青草原精品99久久精品66 | 国内精品久久国产大陆|