青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

永遠也不完美的程序

不斷學習,不斷實踐,不斷的重構……

常用鏈接

統計

積分與排名

好友鏈接

最新評論

epoll的優點及epoll學習心得

按照man手冊的說法:epoll是為處理大批量句柄而作了改進的poll。要使用epoll只需要這三個系統調用:epoll_create(2), epoll_ctl(2), epoll_wait(2)。

<1>支持一個進程打開大數目的socket描述符(FD)
        select 最不能忍受的是一個進程所打開的FD是有一定限制的,由FD_SETSIZE設置,默認值是2048。對于那些需要支持的上萬連接數目的IM服務器來說顯然太少了。這時候你
        一是可以選擇修改這個宏然后重新編譯內核,不過資料也同時指出這樣會帶來網絡效率的下降,
        二是可以選擇多進程的解決方案(傳統的Apache方案),不過雖然linux上面創建進程的代價比較小,但仍舊是不可忽視的,加上進程間數據同步遠比不上線程間同步的高效,所以也不是一種完美的方案。
        epoll則沒有這個限制,它所支持的FD上限是最大可以打開文件的數目,這個數字一般遠大于2048,舉個例子,在1GB內存的機器上大約是10萬左右,具體數目可以cat /proc/sys/fs/file-max察看,一般來說這個數目和系統內存關系很大。

<2>IO效率不隨FD數目增加而線性下降
        傳統的select/poll另一個致命弱點就是當你擁有一個很大的socket集合,不過由于網絡延時,任一時間只有部分的socket是"活躍"的,但是select/poll每次調用都會線性掃描全部的集合,導致效率呈現線性下降。
        epoll不存在這個問題,它只會對"活躍"的socket進行操作---這是因為在內核實現中epoll是根據每個fd上面的callback函數實現的。那么,只有"活躍"的socket才會主動的去調用 callback函數,其他idle狀態socket則不會,在這點上,epoll實現了一個"偽"AIO,因為這時候推動力在os內核。在一些 benchmark中,如果所有的socket基本上都是活躍的---比如一個高速LAN環境,epoll并不比select/poll有什么效率,相反,如果過多使用epoll_ctl,效率相比還有稍微的下降。但是一旦使用idle connections模擬WAN環境,epoll的效率就遠在select/poll之上了。

<3>使用mmap加速內核與用戶空間的消息傳遞。
        這點實際上涉及到epoll的具體實現了。無論是select,poll還是epoll都需要內核把FD消息通知給用戶空間,如何避免不必要的內存拷貝就很重要,在這點上,epoll是通過內核于用戶空間mmap同一塊內存實現的。而如果你想我一樣從2.5內核就關注epoll的話,一定不會忘記手工 mmap這一步的。

<4>內核微調
這一點其實不算epoll的優點了,而是整個linux平臺的優點。也許你可以懷疑linux平臺,但是你無法回避linux平臺賦予你微調內核的能力。比如,內核TCP/IP協議棧使用內存池管理sk_buff結構,那么可以在運行時期動態調整這個內存pool(skb_head_pool)的大小--- 通過echo XXXX>/proc/sys/net/core/hot_list_length完成。再比如listen函數的第2個參數(TCP完成3次握手的數據包隊列長度),也可以根據你平臺內存大小動態調整。更甚至在一個數據包面數目巨大但同時每個數據包本身大小卻很小的特殊系統上嘗試最新的NAPI網卡驅動架構。 
//////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////
在linux的網絡編程中,很長的時間都在使用select來做事件觸發。在linux新的內核中,有了一種替換它的機制,就是epoll。
相比于select,epoll最大的好處在于它不會隨著監聽fd數目的增長而降低效率。因為在內核中的select實現中,它是采用輪詢來處理的,輪詢的fd數目越多,自然耗時越多。并且,在linux/posix_types.h頭文件有這樣的聲明:
#define __FD_SETSIZE    1024
表示select最多同時監聽1024個fd,當然,可以通過修改頭文件再重編譯內核來擴大這個數目,但這似乎并不治本。

epoll的接口非常簡單,一共就三個函數:
1. int epoll_create(int size);
創建一個epoll的句柄,size用來告訴內核這個監聽的數目一共有多大。這個參數不同于select()中的第一個參數,給出最大監聽的fd+1的值。需要注意的是,當創建好epoll句柄后,它就是會占用一個fd值,在linux下如果查看/proc/進程id/fd/,是能夠看到這個fd的,所以在使用完epoll后,必須調用close()關閉,否則可能導致fd被耗盡。


2. int epoll_ctl(int epfd, int op, int fd, struct epoll_event *event);
epoll的事件注冊函數,它不同與select()是在監聽事件時告訴內核要監聽什么類型的事件,而是在這里先注冊要監聽的事件類型。第一個參數是epoll_create()的返回值,第二個參數表示動作,用三個宏來表示:
EPOLL_CTL_ADD:注冊新的fd到epfd中;
EPOLL_CTL_MOD:修改已經注冊的fd的監聽事件;
EPOLL_CTL_DEL:從epfd中刪除一個fd;
第三個參數是需要監聽的fd,第四個參數是告訴內核需要監聽什么事,struct epoll_event結構如下:
struct epoll_event {
  __uint32_t events;  /* Epoll events */
  epoll_data_t data;  /* User data variable */
};

events可以是以下幾個宏的集合:
EPOLLIN :表示對應的文件描述符可以讀(包括對端SOCKET正常關閉);
EPOLLOUT:表示對應的文件描述符可以寫;
EPOLLPRI:表示對應的文件描述符有緊急的數據可讀(這里應該表示有帶外數據到來);
EPOLLERR:表示對應的文件描述符發生錯誤;
EPOLLHUP:表示對應的文件描述符被掛斷;
EPOLLET: 將EPOLL設為邊緣觸發(Edge Triggered)模式,這是相對于水平觸發(Level Triggered)來說的。
EPOLLONESHOT:只監聽一次事件,當監聽完這次事件之后,如果還需要繼續監聽這個socket的話,需要再次把這個socket加入到EPOLL隊列里


3. int epoll_wait(int epfd, struct epoll_event * events, int maxevents, int timeout);
等待事件的產生,類似于select()調用。參數events用來從內核得到事件的集合,maxevents告之內核這個events有多大,這個maxevents的值不能大于創建epoll_create()時的size,參數timeout是超時時間(毫秒,0會立即返回,-1將不確定,也有說法說是永久阻塞)。該函數返回需要處理的事件數目,如返回0表示已超時。

--------------------------------------------------------------------------------------------

從man手冊中,得到ET和LT的具體描述如下

EPOLL事件有兩種模型:
Edge Triggered (ET)
Level Triggered (LT)

假如有這樣一個例子:
1. 我們已經把一個用來從管道中讀取數據的文件句柄(RFD)添加到epoll描述符
2. 這個時候從管道的另一端被寫入了2KB的數據
3. 調用epoll_wait(2),并且它會返回RFD,說明它已經準備好讀取操作
4. 然后我們讀取了1KB的數據
5. 調用epoll_wait(2)......

Edge Triggered 工作模式:
如果我們在第1步將RFD添加到epoll描述符的時候使用了EPOLLET標志,那么在第5步調用epoll_wait(2)之后將有可能會掛起,因為剩余的數據還存在于文件的輸入緩沖區內,而且數據發出端還在等待一個針對已經發出數據的反饋信息。只有在監視的文件句柄上發生了某個事件的時候 ET 工作模式才會匯報事件。因此在第5步的時候,調用者可能會放棄等待仍在存在于文件輸入緩沖區內的剩余數據。在上面的例子中,會有一個事件產生在RFD句柄上,因為在第2步執行了一個寫操作,然后,事件將會在第3步被銷毀。因為第4步的讀取操作沒有讀空文件輸入緩沖區內的數據,因此我們在第5步調用 epoll_wait(2)完成后,是否掛起是不確定的。epoll工作在ET模式的時候,必須使用非阻塞套接口,以避免由于一個文件句柄的阻塞讀/阻塞寫操作把處理多個文件描述符的任務餓死。最好以下面的方式調用ET模式的epoll接口,在后面會介紹避免可能的缺陷。
   i    基于非阻塞文件句柄
   ii   只有當read(2)或者write(2)返回EAGAIN時才需要掛起,等待。但這并不是說每次read()時都需要循環讀,直到讀到產生一個EAGAIN才認為此次事件處理完成,當read()返回的讀到的數據長度小于請求的數據長度時,就可以確定此時緩沖中已沒有數據了,也就可以認為此事讀事件已處理完成。

Level Triggered 工作模式
相反的,以LT方式調用epoll接口的時候,它就相當于一個速度比較快的poll(2),并且無論后面的數據是否被使用,因此他們具有同樣的職能。因為即使使用ET模式的epoll,在收到多個chunk的數據的時候仍然會產生多個事件。調用者可以設定EPOLLONESHOT標志,在 epoll_wait(2)收到事件后epoll會與事件關聯的文件句柄從epoll描述符中禁止掉。因此當EPOLLONESHOT設定后,使用帶有 EPOLL_CTL_MOD標志的epoll_ctl(2)處理文件句柄就成為調用者必須作的事情。


然后詳細解釋ET, LT:

LT(level triggered)是缺省的工作方式,并且同時支持block和no-block socket.在這種做法中,內核告訴你一個文件描述符是否就緒了,然后你可以對這個就緒的fd進行IO操作。如果你不作任何操作,內核還是會繼續通知你的,所以,這種模式編程出錯誤可能性要小一點。傳統的select/poll都是這種模型的代表.

ET(edge-triggered)是高速工作方式,只支持no-block socket。在這種模式下,當描述符從未就緒變為就緒時,內核通過epoll告訴你。然后它會假設你知道文件描述符已經就緒,并且不會再為那個文件描述符發送更多的就緒通知,直到你做了某些操作導致那個文件描述符不再為就緒狀態了(比如,你在發送,接收或者接收請求,或者發送接收的數據少于一定量時導致了一個EWOULDBLOCK 錯誤)。但是請注意,如果一直不對這個fd作IO操作(從而導致它再次變成未就緒),內核不會發送更多的通知(only once),不過在TCP協議中,ET模式的加速效用仍需要更多的benchmark確認(這句話不理解)。

在許多測試中我們會看到如果沒有大量的idle -connection或者dead-connection,epoll的效率并不會比select/poll高很多,但是當我們遇到大量的idle- connection(例如WAN環境中存在大量的慢速連接),就會發現epoll的效率大大高于select/poll。(未測試)



另外,當使用epoll的ET模型來工作時,當產生了一個EPOLLIN事件后,
讀數據的時候需要考慮的是當recv()返回的大小如果等于請求的大小,那么很有可能是緩沖區還有數據未讀完,也意味著該次事件還沒有處理完,所以還需要再次讀取
while(rs)
{
  buflen = recv(activeevents[i].data.fd, buf, sizeof(buf), 0);
  if(buflen < 0)
  {
    // 由于是非阻塞的模式,所以當errno為EAGAIN時,表示當前緩沖區已無數據可讀
    // 在這里就當作是該次事件已處理處.
    if(errno == EAGAIN)
     break;
    else
     return;
   }
   else if(buflen == 0)
   {
     // 這里表示對端的socket已正常關閉.
   }
   if(buflen == sizeof(buf)
     rs = 1;   // 需要再次讀取
   else
     rs = 0;
}


還有,假如發送端流量大于接收端的流量(意思是epoll所在的程序讀比轉發的socket要快),由于是非阻塞的socket,那么send()函數雖然返回,但實際緩沖區的數據并未真正發給接收端,這樣不斷的讀和發,當緩沖區滿后會產生EAGAIN錯誤(參考man send),同時,不理會這次請求發送的數據.所以,需要封裝socket_send()的函數用來處理這種情況,該函數會盡量將數據寫完再返回,返回-1表示出錯。在socket_send()內部,當寫緩沖已滿(send()返回-1,且errno為EAGAIN),那么會等待后再重試.這種方式并不很完美,在理論上可能會長時間的阻塞在socket_send()內部,但暫沒有更好的辦法.

ssize_t socket_send(int sockfd, const char* buffer, size_t buflen)
{
  ssize_t tmp;
  size_t total = buflen;
  const char *p = buffer;

  while(1)
  {
    tmp = send(sockfd, p, total, 0);
    if(tmp < 0)
    {
      // 當send收到信號時,可以繼續寫,但這里返回-1.
      if(errno == EINTR)
        return -1;

      // 當socket是非阻塞時,如返回此錯誤,表示寫緩沖隊列已滿,
      // 在這里做延時后再重試.
      if(errno == EAGAIN)
      {
        usleep(1000);
        continue;
      }

      return -1;
    }

    if((size_t)tmp == total)
      return buflen;

    total -= tmp;
    p += tmp;
  }

  return tmp;
}

posted on 2008-04-09 14:18 狂爛球 閱讀(993) 評論(1)  編輯 收藏 引用

評論

# re: epoll的優點及epoll學習心得 2015-04-12 10:15 臉上有痘疤怎么辦

非常好的一篇文章,樓主有個問題想問一下,插入圖片代碼怎么寫啊  回復  更多評論   

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            亚洲一区国产视频| 99国产精品99久久久久久粉嫩| 亚洲午夜激情| 亚洲香蕉视频| 国产一区二区三区观看| 美女黄色成人网| 欧美国产日韩免费| 午夜精品视频| 久久综合色综合88| 亚洲色图综合久久| 欧美一区二区三区在线免费观看| 国内偷自视频区视频综合| 欧美成人亚洲| 国产精品一区二区久久久| 久久久国产91| 一本久道综合久久精品| 久久综合九九| 一区二区三欧美| 欧美一区二区三区免费视| 国产深夜精品| 亚洲经典三级| 国产精品嫩草99a| 亚洲国产99| 国产精品久久久久三级| 另类专区欧美制服同性| 欧美日韩在线播放| 免费观看亚洲视频大全| 国产精品毛片大码女人| 欧美.www| 国产日韩亚洲| 中文国产一区| 亚洲精品视频在线观看网站| 亚洲一区自拍| 亚洲麻豆av| 久久久久久久999| 亚洲欧美一区二区三区极速播放| 玖玖玖国产精品| 欧美一区免费| 欧美性淫爽ww久久久久无| 欧美96在线丨欧| 国产一区亚洲| 亚洲一区二区三区在线播放| 99国产一区二区三精品乱码| 久久精品一区二区国产| 欧美一区二区播放| 国产精品久久久久久久久婷婷| 欧美不卡视频| 亚洲第一二三四五区| 午夜一区在线| 新片速递亚洲合集欧美合集| 欧美精品色网| 日韩小视频在线观看| 亚洲激情一区| 免费成人av资源网| 欧美成人69av| 亚洲国产精品尤物yw在线观看| 久久精品国产清高在天天线| 先锋a资源在线看亚洲| 国产精品国色综合久久| 99av国产精品欲麻豆| 99在线视频精品| 欧美激情综合五月色丁香小说 | 欧美天堂亚洲电影院在线观看| 蜜桃av噜噜一区| 亚洲电影在线| 欧美二区乱c少妇| 亚洲国产成人精品女人久久久| 亚洲国产精品传媒在线观看 | 国产亚洲综合在线| 欧美在线观看视频在线| 久久久久国产一区二区三区四区 | 在线不卡中文字幕| 美女精品自拍一二三四| 欧美成人首页| 国产精品99久久久久久久女警 | 激情欧美丁香| 久久久国产精品一区| 久久综合色播五月| 亚洲三级影院| 欧美视频一区二| 亚洲欧美日韩在线播放| 久久久亚洲国产美女国产盗摄| 有坂深雪在线一区| 欧美黄网免费在线观看| 夜夜精品视频| 久久人体大胆视频| 亚洲美女电影在线| 国产精品久久久久久久久婷婷| 欧美中文字幕不卡| 亚洲国产日韩欧美综合久久 | 激情综合激情| 欧美精品在线免费| 午夜精品久久久久久久男人的天堂| 久久影院亚洲| 亚洲一区二区av电影| 国内成+人亚洲| 欧美激情中文字幕在线| 亚洲欧美在线视频观看| 欧美高清在线一区| 香蕉久久夜色精品| 亚洲精品中文字幕有码专区| 欧美性猛交xxxx乱大交退制版| 久久国产欧美| 一本综合久久| 欧美国产精品v| 欧美在线免费视屏| 在线视频日韩精品| 亚洲高清不卡av| 国产亚洲精品7777| 欧美日韩影院| 欧美电影美腿模特1979在线看| 亚洲欧美美女| 日韩一区二区精品| 欧美激情视频网站| 久久免费视频网站| 午夜国产精品视频| 日韩西西人体444www| 亚洲第一成人在线| 黄色av日韩| 国产亚洲激情| 国产精品网站在线| 欧美性色aⅴ视频一区日韩精品| 免费欧美日韩| 久久美女性网| 久久精品国产在热久久| 性色av一区二区三区| 亚洲视频1区2区| 国产精品99久久99久久久二8| 亚洲欧洲美洲综合色网| 欧美 日韩 国产 一区| 噜噜噜91成人网| 免费成人av在线看| 久久综合狠狠| 美女主播一区| 欧美高清在线一区| 欧美激情免费在线| 亚洲福利小视频| 亚洲福利精品| 亚洲三级观看| 亚洲美女av在线播放| 亚洲精品欧美激情| 99re6热在线精品视频播放速度| 亚洲国产另类久久精品| 欧美激情视频免费观看| 欧美激情亚洲另类| 欧美在线www| 亚洲一区二区三区精品在线| 亚洲美女在线观看| 中日韩午夜理伦电影免费| 亚洲精品中文字| 亚洲视频一区二区| 欧美在线高清视频| 久久久久久黄| 欧美成人黄色小视频| 亚洲国产成人精品女人久久久 | 亚洲国产欧美在线| 日韩一区二区电影网| 亚洲天堂男人| 久久av一区二区三区| 狼人社综合社区| 亚洲黄色成人久久久| 亚洲美女黄网| 欧美在线资源| 欧美激情在线狂野欧美精品| 欧美日韩精选| 国产一区二区看久久| 在线观看亚洲精品视频| 一本不卡影院| 久久精品日韩| 亚洲欧洲一区| 亚洲欧美三级在线| 模特精品裸拍一区| 国产精品高潮呻吟久久av黑人| 国产日韩久久| 99精品国产在热久久下载| 欧美在线免费看| 亚洲精品1234| 欧美在线观看一区二区| 欧美精品一区二区视频| 国产农村妇女精品一区二区| 亚洲国产精品激情在线观看| 亚洲午夜一区| 欧美激情免费在线| 亚洲欧美在线高清| 欧美日韩精品免费观看| 国产一区二区三区四区| 一本综合久久| 免费亚洲婷婷| 欧美一级电影久久| 欧美日韩在线观看视频| 一区二区亚洲| 欧美在线一级va免费观看| 最近看过的日韩成人| 久久国产一区二区三区| 国产精品高潮粉嫩av| 99精品视频免费观看| 免费日韩一区二区| 欧美制服丝袜| 国产亚洲一本大道中文在线| 亚洲一区二区欧美日韩|