• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            loop_in_codes

            低調(diào)做技術(shù)__歡迎移步我的獨(dú)立博客 codemaro.com 微博 kevinlynx

            libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)

            Author : Kevin Lynx

            前言

                可以說(shuō)對(duì)于任何網(wǎng)絡(luò)庫(kù)(模塊)而言,一個(gè)緩沖模塊都是必不可少的。緩沖模塊主要用于緩沖從網(wǎng)絡(luò)接收到的數(shù)據(jù),以及
            用戶提交的數(shù)據(jù)(用于發(fā)送)。很多時(shí)候,我們還需要將網(wǎng)絡(luò)模塊層(非TCP層)的這些緩沖數(shù)據(jù)拷貝到用戶層,而這些內(nèi)存拷貝
            都會(huì)消耗時(shí)間。
                在這里,我簡(jiǎn)要分析下libevent的相關(guān)代碼(event.h和buffer.c)。

            結(jié)構(gòu)

                關(guān)于libevent的緩沖模塊,主要就是圍繞evbuffer結(jié)構(gòu)體展開(kāi)。先看下evbuffer的定義:

            /*event.h*/
            struct evbuffer {
                u_char 
            *buffer;
                u_char 
            *orig_buffer; 

                size_t misalign;
                size_t totallen;
                size_t off; 

                
            void (*cb)(struct evbuffer *, size_t, size_t, void *);
                
            void *cbarg;
            }
            ;


                libevent的緩沖是一個(gè)連續(xù)的內(nèi)存區(qū)域,其處理數(shù)據(jù)的方式(寫(xiě)數(shù)據(jù)和讀數(shù)據(jù))更像一個(gè)隊(duì)列操作方式:從后寫(xiě)入,從前
            讀出。evbuffer分別設(shè)置相關(guān)指針(一個(gè)指標(biāo))用于指示讀出位置和寫(xiě)入位置。其大致結(jié)構(gòu)如圖:

            evbuffer_str
                orig_buffer指向由realloc分配的連續(xù)內(nèi)存區(qū)域,buffer指向有效數(shù)據(jù)的內(nèi)存區(qū)域,totallen表示orig_buffer指向的內(nèi)存
            區(qū)域的大小,misalign表示buffer相對(duì)于orig_buffer的偏移,off表示有效數(shù)據(jù)的長(zhǎng)度。

            實(shí)際運(yùn)作

                這里我將結(jié)合具體的代碼分析libevent是如何操作上面那個(gè)隊(duì)列式的evbuffer的,先看一些輔助函數(shù):

            evbuffer_drain:
                該函數(shù)主要操作一些指標(biāo),當(dāng)每次從evbuffer里讀取數(shù)據(jù)時(shí),libevent便會(huì)將buffer指針后移,同時(shí)增大misalign,減小off,
            而該函數(shù)正是做這件事的。說(shuō)白了,該函數(shù)就是用于調(diào)整緩沖隊(duì)列的前向指標(biāo)。

            evbuffer_expand:
                該函數(shù)用于擴(kuò)充evbuffer的容量。每次向evbuffer寫(xiě)數(shù)據(jù)時(shí),都是將數(shù)據(jù)寫(xiě)到buffer+off后,buffer到buffer+off之間已被
            使用,保存的是有效數(shù)據(jù),而orig_buffer和buffer之間則是因?yàn)樽x取數(shù)據(jù)移動(dòng)指標(biāo)而形成的無(wú)效區(qū)域。
                evbuffer_expand的擴(kuò)充策略在于,首先判斷如果讓出orig_buffer和buffer之間的空閑區(qū)域是否可以容納添加的數(shù)據(jù),如果
            可以,則移動(dòng)buffer和buffer+off之間的數(shù)據(jù)到orig_buffer和orig_buffer+off之間(有可能發(fā)生內(nèi)存重疊,所以這里移動(dòng)調(diào)用的
            是memmove),然后把新的數(shù)據(jù)拷貝到orig_buffer+off之后;如果不可以容納,那么重新分配更大的空間(realloc),同樣會(huì)移動(dòng)
            數(shù)據(jù)。
                擴(kuò)充內(nèi)存的策略為:確保新的內(nèi)存區(qū)域最小尺寸為256,且以乘以2的方式逐步擴(kuò)大(256、512、1024、...)。

                了解了以上兩個(gè)函數(shù),看其他函數(shù)就比較簡(jiǎn)單了。可以看看具體的讀數(shù)據(jù)和寫(xiě)數(shù)據(jù):

            evbuffer_add:
                該函數(shù)用于添加一段用戶數(shù)據(jù)到evbuffer中。很簡(jiǎn)單,就是先判斷是否有足夠的空閑內(nèi)存,如果沒(méi)有則調(diào)用evbuffer_expand
            擴(kuò)充之,然后直接memcpy,更新off指標(biāo)。

            evbuffer_remove:
                該函數(shù)用于將evbuffer中的數(shù)據(jù)復(fù)制給用戶空間(讀數(shù)據(jù))。簡(jiǎn)單地將數(shù)據(jù)memcpy,然后調(diào)用evbuffer_drain移動(dòng)相關(guān)指標(biāo)。

            其他

                回過(guò)頭看看libevent的evbuffer其實(shí)是非常簡(jiǎn)單的(跟我那個(gè)kl_net里的buffer一樣),不知道其他人有沒(méi)有更優(yōu)的緩沖管理
            方案。evbuffer還提供了兩個(gè)函數(shù):evbuffer_write和evbuffer_read,用于直接在套接字(其他文件描述符)上寫(xiě)/讀數(shù)據(jù)。

                另外,關(guān)于libevent,因?yàn)楣俜教峁┑腣C工程文件有問(wèn)題,很多人在windows下編譯不過(guò)。金慶曾提供過(guò)一種方法。其實(shí)主要
            就是修改event-config.h文件,修改編譯相關(guān)配置。這里我也提供一個(gè)解決步驟,順便提供完整包下載:

            1. vs2005打開(kāi)libevent.dsw,轉(zhuǎn)換四個(gè)工程(event_test, libevent, signal_test, time_test)
            2. 刪除libevent項(xiàng)目中所有的文件,重新添加文件,文件列表如下:
               buffer.c
               evbuffer.c
               evdns.c
               evdns.h
               event.c
               event.h
               event_tagging.c
               event-config.h
               event-internal.h
               evhttp.h
               evrpc.h
               evrpc.c
               evrpc-internal.h
               evsignal.h
               evutil.c
               evutil.h
               http.c
               http-internal.h
               log.c
               log.h
               min_heap.h
               strlcpy.c
               strlcpy-internal.h
               tree.h
               win32.c
               config.h
               signal.c
            3. 替換event-config.h,使用libevent-iocp中的
            4. 項(xiàng)目設(shè)置里添加HAVE_CONFIG_H預(yù)處理宏
            5. 修改win32.c中win32_init函數(shù),加入WSAStartup函數(shù),類似于:
                   WSADATA wd;   
                    int err;
                    struct win32op *winop;
                    size_t size;
                    if( ( err = WSAStartup( MAKEWORD( 2, 2 ), &wd ) ) != 0 )
                        event_err( 1, "winsock startup failed : %d", err );
            6. 修改win32.c中win32_dealloc函數(shù),在函數(shù)末尾加上WSACleanup的調(diào)用:
                    WSACleanup();
            6. 至此libevent編譯成功;
            7. 幾個(gè)例子程序,只需要加入HAVE_CONFIG_H預(yù)處理宏,以及連接ws2_32.lib即可;
               (time_test需要修改time-test.c文件,即在包含event.h前包含windows.h)

            libevent-1.4.5-stable-vs2005.zip下載

             

            posted on 2008-07-16 14:28 Kevin Lynx 閱讀(9541) 評(píng)論(14)  編輯 收藏 引用 所屬分類: 通用編程network

            評(píng)論

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-07-16 15:09 true

            寫(xiě)的好!  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-08-12 10:32 白云哥

            這個(gè)libevent的vs2005包很好,謝謝

            自己偷懶了一把 :)  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-08-25 21:25 weber

            寫(xiě)得不錯(cuò),正在做基于libevent的項(xiàng)目, 一起交流. qq群:64559783  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-10-23 18:07 浪跡天涯

            libevent用于改造網(wǎng)絡(luò)模型需要了解哪些知識(shí)?  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)[未登錄](méi) 2008-10-23 20:43 Kevin Lynx

            @浪跡天涯
            改造網(wǎng)絡(luò)模型?不清楚。我只知道使用別人的庫(kù)。- -|  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-12-09 18:42 vcclass

            不錯(cuò),分析的很好,很實(shí)用。libevent相對(duì)于ACE來(lái)說(shuō)輕量級(jí)多了,ACE 學(xué)習(xí)曲線比較陡峭,不建議初學(xué)者學(xué)習(xí)。libevent里面還是有很多東西值得借鑒的。
            ACE用了很多設(shè)計(jì)模式的思想來(lái)封裝,如果對(duì)設(shè)計(jì)模式趕興趣的話可以研究,否則實(shí)際意義不是很大。  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)[未登錄](méi) 2009-04-28 20:06 小馬

            新手請(qǐng)教 evbuffer用在什么地方了 libevent是事件響應(yīng)模型 但是具體事件處理還是要使用者自己的代碼來(lái)實(shí)現(xiàn)的 不是么  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2009-04-28 22:41 Kevin Lynx

            @小馬
            在我印象里,evbuffer用于緩存邏輯層(即l基于libevent那一層)將要發(fā)送的數(shù)據(jù),以及緩存從設(shè)備(fd)里讀取出的數(shù)據(jù)。
              回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)[未登錄](méi) 2009-04-30 17:08 小馬

            @Kevin Lynx
            是不是這樣 libevent代碼里本身沒(méi)有用到evbuffer 只是我們?cè)谟胠ibevent開(kāi)發(fā)自己的應(yīng)用的時(shí)候可以使用evbuffer ?  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2009-04-30 21:40 Kevin Lynx

            @小馬
            為什么你不打開(kāi)libevent的源代碼搜索下evbuffer呢??  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2009-06-26 21:11 taozzee

            請(qǐng)問(wèn) libevent 中類型 struct event_list 在哪定義的呢??

            在VC6下編譯通不過(guò)啊。  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2010-05-24 09:09 周江濤

            寫(xiě)的好,表達(dá)能力強(qiáng),分析透徹!  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2011-05-07 21:49 dourgulf

            其實(shí),這個(gè)buffer管理方法效率很差了,涉及很多內(nèi)存的移動(dòng)。
            其實(shí),很多socket I/O都提供了buffer數(shù)組的發(fā)送方式,使用這種方式高效而且簡(jiǎn)單。最新的libevent已經(jīng)放棄了LZ說(shuō)的這個(gè)buffer管理方法了。  回復(fù)  更多評(píng)論   

            # re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2014-05-19 15:53 coderchen

            @dourgulf
            現(xiàn)在libevent的buffer應(yīng)該是多個(gè)內(nèi)存塊組成的chain,但是由于內(nèi)存不連續(xù),作為接收緩沖區(qū)反序列化的時(shí)候,還要多拷貝一次數(shù)據(jù)。  回復(fù)  更多評(píng)論   

            色综合色天天久久婷婷基地| 久久91精品综合国产首页| 久久综合视频网站| 亚洲国产成人精品久久久国产成人一区二区三区综 | 国内精品久久国产| 少妇熟女久久综合网色欲| 亚洲AV无码久久精品色欲| …久久精品99久久香蕉国产| 国产精品无码久久四虎| 精品久久久无码人妻中文字幕| 国产精品久久国产精麻豆99网站| 国产精品成人久久久久久久| 亚洲美日韩Av中文字幕无码久久久妻妇 | 中文字幕热久久久久久久| 国产精品久久久久无码av | 久久综合亚洲色一区二区三区| 嫩草伊人久久精品少妇AV| 久久93精品国产91久久综合| 久久久久亚洲av无码专区导航| 久久久久国产精品三级网| 久久av无码专区亚洲av桃花岛| 人妻无码精品久久亚瑟影视| 久久久久久久99精品免费观看| 色天使久久综合网天天| 国产精品无码久久四虎| 97精品久久天干天天天按摩| 精品久久久久久无码不卡| 久久国产成人午夜AV影院| 99久久精品国产麻豆| 欧美丰满熟妇BBB久久久| 伊人久久大香线蕉av一区| 97香蕉久久夜色精品国产| 欧美日韩精品久久久免费观看| 色综合久久88色综合天天| 日韩精品久久久肉伦网站| 久久精品国产99国产精品亚洲 | 亚洲国产精品无码久久久不卡| 久久亚洲av无码精品浪潮| 国产激情久久久久影院老熟女| 久久亚洲精品中文字幕| 狠狠精品久久久无码中文字幕|