青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

CppExplore

一切像霧像雨又像風

  C++博客 :: 首頁 :: 新隨筆 :: 聯系 :: 聚合  :: 管理 ::
  29 隨筆 :: 0 文章 :: 280 評論 :: 0 Trackbacks

作者:CppExplore 地址:http://www.shnenglu.com/CppExplore/
(2)boost::pool
系列。boost的內存池最低層是simple_segregated_storage,類似于Loki中的chunk,在其中申請釋放block(boost中把block稱為chunk,暈死,這里還是稱其為block)采用了和loki的chunk中同樣的算法,不同的是simple_segregated_storage使用void*保存block的塊序號,loki中使用char,因此boost中的simple_segregated_storage沒有255的上限限制,自然也就不需要再其上再封裝一層類似與FixedAllocator的層面。另boost沒有屏蔽塊的大小,直接提供定長的接口給用戶,省掉了SmallObjAllocator層面。因此boost的內存池申請釋放block的時間復雜度都是O(1)(object_pool和pool_allocator除外),另避免的小內存的浪費,同時boost不能象loki那樣在將block歸還給內存池的時候根據chunk的空閑數量釋放內存歸還給系統,只能顯式調用釋放內存函數或者等內存池銷毀的時候,基本上和內存池生命周期內永不釋放沒什么區別。
    boost的最低層是simple_segregated_storage,主要算法和loki中的chunk一樣,不多說了。這里說下影響上層接口的兩類實現:add_block/malloc/free、add_ordered_block/malloc/ordered_free,兩種低層實現造成boost上層設計的成功與失敗,前者效率高,和loki一樣直接增加釋放,時間復雜度O(1),后者掃描排序,時間復雜度O(n)。
    boost提供了四種內存池模型供使用:pool、object_pool、singleton_pool、pool_allocator/fast_pool_allocator。
1)pool
基本的定長內存池

#include <boost/pool/pool.hpp>
typedef struct student_st
{
   
char name[10];
   
int age;
}
CStudent;
int main()
{
   boost::pool
<> student_pool(sizeof(CStudent));
   CStudent 
* const obj=(CStudent *)student_pool.malloc();
   student_pool.free(obj);
   
return 0;
}

    pool的模版參數只有一個分配子類型,boost提供了兩種default_user_allocator_new_delete/default_user_allocator_malloc_free,指明申請釋放內存的時候使用new/delete,還是malloc/free,默認是default_user_allocator_new_delete。構造函數有2個參數:nrequested_size,nnext_size。nrequested_size是block的大小(因為void*保存序號,因此boost內置了block的最小值,nrequested_size過小則取內置值),nnext_size是simple_segregated_storage中內存不足的時候,申請的block數量,默認是32。最全面的實例化pool類似這樣:boost::pool<boost::default_user_allocator_malloc_free> student_pool(sizeof(CStudent),255);
    pool提供的函數主要有:
malloc/free  基于add_block/malloc/free實現,高效
ordered_malloc/ordered_free 基于add_ordered_block/malloc/ordered_free實現,在pool中無任何意義,切勿使用。
release_memory/purge_memory 前者釋放池中未使用內存,后者釋放池中所有內存。另池析構也會釋放內存

2)object_pool

對象內存池,這是最失敗的一個內存池設計。

#include <boost/pool/object_pool.hpp>

class A{
public:
   A():data_(
0){}
private:
   
int data_;
}
;
int main()
{
   boost::object_pool
<A> obj_pool;
   A 
*const pA=obj_pool.construct();
   obj_pool.destroy(pA);
   
return 0;
}

    object_pool繼承至pool,有兩個模版參數,第一個就是對象類型,第二個是分配子類型,默認同pool是default_user_allocator_new_delete。構造函數參數只有nnext_size,意義以及默認值同pool。最全面的實例化object_pool類似這樣:boost::pool<A,boost::default_user_allocator_malloc_free> obj_pool(255);
object_pool提供的函數主要有(繼承至父類的略):
malloc/free 復寫pool的malloc/free,add_ordered_block/malloc/ordered_free實現
construct/destroy 基于本類的malloc/free實現,額外調用默認構造函數和默認析構函數。
~object_pool 單獨拿出這個說下,若析構的時候有對象未被destroy,可以檢測到,釋放內存前對其執行destroy
    為什么boost::object_pool要設計成這樣?能調用構造函數和析構函數顯然不是boost::object_pool類設計的出發點,因為構造函數只能執行默認構造函數(首次發表錯誤:可以調用任意的構造函數,參見代碼文件:boost/pool/detail/pool_construct.inc和boost/pool/detail/pool_construct_simple.inc,感謝eXile指正),近似于無,它的重點是內存釋放時候的清理工作,這個工作默認的析構函數就足夠了。apr_pool內存池中就可以注冊內存清理函數,在釋放內存的時刻執行關閉文件描述符、關閉socket等操作。boost::object_pool也想實現同樣的功能,因此設計了destroy這個函數,而同時為了防止用戶遺漏掉這個調用,而又在內存池析構的時候進行了檢測回收。為了這個目的而又不至于析構object_pool的時間復雜度是O(n平方),boost::object_pool付出了沉重的代價,在每次的destoy都執行排序功能,時間復雜度O(n),最后析構的時間復雜度是O(n),同樣為了這個目的,從simple_segregated_storage增加了add_ordered_block/ordered_free,pool增加了ordered_malloc/ordered_free等累贅多余的功能。
    基于上面討論的原因,boost::object_pool被設計成了現在的樣子,成了一個雞肋類。類的設計者似乎忘記了內存池使用的初衷,忘記了內存池中內存申請釋放的頻率很高,遠遠大于內存池對象的析構。如果你依然想使用類似于此的內存清理功能,可以在boost::object_pool上修改,不復寫malloc/free即可,重寫object_pool的析構,簡單釋放內存就好,因此析構object_pool前不要忘記調用destroy,這也是使用placement new默認遵守的規則,或者保持以前的析構函數,犧牲析構時的性能。placement new的作用是為已經申請好的內存調用構造函數,使用流程為(1)申請內存buf(2)調用placement new:new(buf)construtor()(3)調用析構destructor()(4)釋放內存buf。#include<new>可以使用placement new。
3)singleton_pool
pool的加鎖版本。

#include <boost/pool/singleton_pool.hpp>
typedef struct student_st
{
   
char name[10];
   
int age;
}
CStudent;
typedef struct singleton_pool_tag
{}singleton_pool_tag;
int main()
{
   typedef boost::singleton_pool
<singleton_pool_tag,sizeof(CStudent)>  global;
   CStudent 
* const df=(CStudent *)global::malloc();
   global::free(df);
   
return 0;
}

    singleton_pool為單例類,是對pool的加鎖封裝,適用于多線程環境,其中所有函數都是靜態類型。它的模版參數有5個,tag:標記而已,無意義;RequestedSize:block的長度;UserAllocator:分配子,默認還是default_user_allocator_new_delete;Mutex:鎖機制,默認值最終依賴于系統環境,linux下是pthread_mutex,它是對pthread_mutex_t的封裝;NextSize:內存不足的時候,申請的block數量,默認是32。最全面的使用singleton_pool類似這樣:typedef boost::singleton_pool<singleton_pool_tag,sizeof(CStudent),default_user_allocator_new_delete,details::pool::default_mutex,200>  global;
    它暴露的函數和pool相同。
4)pool_allocator/fast_pool_allocator
    stl::allocator的替換方案。兩者都是基于singleton_pool實現,實現了stl::allocator要求的接口規范。兩者的使用相同,區別在于pool_allocator的實現調用ordered_malloc/ordered_free,fast_pool_allocator的實現調用malloc/free,因此推薦使用后者。

#include <boost/pool/pool_alloc.hpp>
#include 
<vector>
typedef struct student_st
{
 
char name[10];
 
int age;
}
CStudent;

int main()
{
  std::vector
<CStudent *,boost::fast_pool_allocator<CStudent *> > v(8);
  CStudent 
*pObj=new CStudent();
  v[
1]=pObj;
  boost::singleton_pool
<boost::fast_pool_allocator_tag,sizeof(CStudent *)>::purge_memory(); 
  
return 0;
}

    fast_pool_allocator的模版參數有四個:類型,分配子,鎖類型,內存不足時的申請的block數量,后三者都有默認值,不再說了。它使用的singleton_pool的tag是boost::fast_pool_allocator_tag。
評價:boost::pool小巧高效,多多使用,多線程環境下使用boost::singleton_pool,不要使用兩者的ordered_malloc/ordered_free函數。boost::object_pool不建議使用,可以改造后使用。pool_allocator/fast_pool_allocator推薦使用后者。


未完 待續.................... 不過這個主題暫時不寫了 等有時間了
posted on 2008-02-20 15:09 cppexplore 閱讀(6755) 評論(21)  編輯 收藏 引用

評論

# re: 【原創】系統設計之 內存管理(三) 2008-02-20 19:07 空明流轉
確實,本來打算用obj_pool的,后來一看complexity,拉倒吧。。。  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-02-20 23:15 eXile
我覺得lz對object_pool 的設計理念和如何使用都存在理解上的錯誤, 特別是以下幾點:
1) 構造函數只能執行默認構造函數
2) 設計了destroy這個函數,而同時為了防止用戶遺漏掉這個調用,而又在內存池析構的時候進行了檢測回收
3)為了這個目的而又不至于析構object_pool的時間復雜度是O(n平方)


object_pool 主要著眼于“自動析構”,在沒有gc的情況下,達到提高效率和自動管理內存的目的。而且它也特別適合于“多次申請,一次釋放”的情況.所以它甚至是鼓勵你忽略使用destroy(從它的例子就可以看出來)。

destroy函數并沒有提高復雜度,因為內部鏈表始終處于有序狀態(由于使用order_malloc,order_free),所以不論是逐個釋放,還是成批釋放,它的復雜度都是O(N)

  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-02-21 09:08 cppexplore
另:boost/pool下的6個hpp文件我是挨個讀過了。detail下的都很簡單,5個hpp,singleton.hpp有效行數就10幾行,沒看,想當然了下。mutex和guard在讀singleton_pool.hpp的時候看了下linux下的mutex,順便還測試了下,gcd_lcm的兩個也很簡單,沒看,估計大約是2者求最小值的功能。
我一貫認為,明白原理,知道如何使用就好,深入具體細節就是浪費腦細胞,如果你要實現一個當然例外。  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-02-21 10:29 cppexplore
@eXile
暈倒 在boost/pool/detail/pool_construct.inc里
只關注hpp去了
可以調用任意的構造函數
多謝指正!正文中現已標明。  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-02-21 10:48 eXile
呵呵,不當之處,敬請原諒。
“多次申請,一次釋放”的情況,比如說對于服務器而言,從收到一個包,到對這個包的處理完畢,則可視為內存的一個周期。不過有時候異步完成,再加上object_pool只能管理一種對象,又限制了這種使用。  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三)[未登錄] 2008-02-21 11:06 cppexplore
@eXile
:)
“從收到一個包,到對這個包的處理完畢,則可視為內存的一個周期。”,這時候析構object_pool不恰當,因為以后還會收到包,內存還可循環被使用,這里還是應該調用destroy,而它的時間復雜度o(n),導致了真是不太適合使用。析構object_pool更不可取,時間復雜度不說,還有內存的再次申請,背離了內存池的初衷。  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-02-21 11:12 eXile
這個倒不是問題,因為object_pool是可配置的, 它帶有一個模板參數UserAlloc, 可以自定義  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三)[未登錄] 2008-02-21 11:28 cppexplore
問題的關鍵不在UserAlloc,而是details::PODptr<size_type> 。除非你想在內存池之上實現這個內存池的UserAlloc(到底是先有雞還是先有蛋......),即便這樣,當前的object_pool析構最少也要付出o(n)的代價。  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-02-21 11:50 eXile
呵呵,正是如此,UserAlloc可以使用一個全局的boost::pool來實現,所謂大pool套小pool, 不過如果object_pool設計時完全放棄destroy, 則可以取得更大的優化。  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三)[未登錄] 2008-02-21 11:52 cppexplore
暈倒..........................  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-02-21 12:07 jazz
好久之前開始用pool,不過一直不用object_pool當時就看到order_mallc的o(n)復雜度。當時一直沒想明白 為什么用object_pool中為什么申請內存使用order_mallc來替代malloc。  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-02-21 12:12 jazz
memory pool 本來是為提高性能,但是object_pool對于destroy-o(n)的性能怎么能夠容忍?  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-02-21 14:02 空明流轉
我本來就是小塊的分配釋放,而且只需要單線程就夠了,所以一開始的時候寫了個自己的池,現在考慮用boost的環池替代。  回復  更多評論
  

# re: 【原創】系統設計之 內存管理(三) 2008-04-27 07:25 王貴陽
非常好,仔細研究。  回復  更多評論
  

# re: 【原創】技術系列之 內存管理(三) 2009-04-04 18:30 yshuise
object_pool設計成那樣的根本原因,就是還可以作為內存池使用。不是真正的釋放內存。所以,博主理解不對啊  回復  更多評論
  

# re: 【原創】技術系列之 內存管理(三)[未登錄] 2009-04-04 19:37 cppexplore
@yshuise
你確信你看懂它的實現了?  回復  更多評論
  

# re: 【原創】技術系列之 內存管理(三) 2011-08-10 11:57 sa
既然是一個定長的pool,為何simple_segregated_storage還要拆分成那么多chunk干嗎,直接把所有的obj通過一個linklist串在一起不就行了?  回復  更多評論
  

# re: 【原創】技術系列之 內存管理(三)[未登錄] 2011-08-10 12:30 cppexplore
@sa
原因: 1) 和linklist相比更節省內存 2)和linklist相比,申請/歸還內存更快  回復  更多評論
  

# re: 【原創】技術系列之 內存管理(三)[未登錄] 2011-10-20 21:54 chipset
看了三篇文章。不知道該說啥好,單CPU,DLMalloc足矣,其它我都不看好,最不看好用完最后一次性釋放的內存池,原因不解釋。

多CPU,ptmalloc3,或glib里的內存管理器(以ptmalloc3為基礎的改進),谷歌的TCMalloc,還有Free BSD的Jemalloc,以及Hoard。多CPU,碎片率低,好的線性加速比是關鍵,Jemalloc很強。TCMalloc看上去像個多CPU的自有列表內存管理器,加速比也不錯,且有垃圾收集,但是啟動速度跟啟動Java虛擬機絕對有一拼...這些都是免費的。至于那些要錢的,我懶得一提...  回復  更多評論
  

# re: 【原創】技術系列之 內存管理(三) 2011-12-16 12:21 cppexplore
@chipset
站在"造輪子"角度 / "使用輪子" 角度 /"選輪子"角度 看到的東西各有些不同.  回復  更多評論
  

# re: 【原創】技術系列之 內存管理(三)[未登錄] 2012-03-26 20:49 cexer
我覺得boost::pool的ordered_malloc和ordered_free函數是有必要的,它們是作為ordered pool的接口部分而存在的,使用場景不一樣,和malloc和free是沒有可比性。

boost::pool中有一個函數malloc_n用來申請幾塊連續的partition。一個block是以partition為粒度劃分,以單向鏈表鏈接起來,多次malloc/free的動作之后,這些partition在鏈表中的邏輯順序和它們在內存中的實際順序極有可能是不一致的,此時要得到連續的partition,必須要遍歷鏈表,找出在內存中實際連續的partition,并將它們在鏈表中的順序也重新以連續的順序鏈接,然后返回給調用者。

如果將鏈表的順序與內存中實際順序的不一致程度叫做它的無序度,顯然這個遍歷操作的耗費的時間,和鏈表的無序度是成正比的。如果這種malloc_n的操作很頻繁,那么這種遍歷鏈表重新鏈接的操作會很費時。

這種頻繁申請多個連續partition的場景下正是使用ordered pool的地方,正如pool作者在代碼寫的注釋那樣:
// Note: if you're allocating/deallocating n a lot, you should
// be using an ordered pool.

ordered pool內部的所有partition鏈表無序度為0,即所有partition在內存中的實際順序和它們在鏈表中的邏輯順序完全一致,對于malloc_n這樣的請求,可以更快滿足。也因此boost::pool提供了ordered版本的操作接口,這組接口保證每次free之后鏈表的順序不會亂。

不過,我個人覺得block以partition為粒度劃分是沒必要的,可以在收到請求的時候按實際需求劃分,盡力使整個塊保持連續,可以極大地避免產生碎片,降低ordered_malloc的ordered_free的時間。

當然ordered_xxx函數不應該和其它的函數混用,否則就是陪了夫人又折兵的買賣,即浪費了ordered_xxx的時間,又無法得到更快malloc_n的好處。
  回復  更多評論
  

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            欧美午夜www高清视频| 欧美影院久久久| 男女精品视频| 久久最新视频| 黑人巨大精品欧美一区二区| 欧美专区在线| 久久激情五月激情| 136国产福利精品导航网址| 久久久久久91香蕉国产| 久久精品视频在线看| 极品av少妇一区二区| 玖玖在线精品| 欧美福利一区二区三区| 亚洲自拍16p| 久久国产精品第一页| 91久久精品日日躁夜夜躁欧美| 亚洲国产清纯| 欧美精品免费播放| 午夜免费在线观看精品视频| 欧美专区日韩视频| 亚洲激情偷拍| 亚洲一区二区三区四区五区黄| 国产精品色婷婷| 麻豆freexxxx性91精品| 欧美日韩久久久久久| 久久精品二区三区| 欧美国产日韩一区| 欧美一区二区三区免费观看| 久久爱www.| 亚洲最新在线视频| 欧美一区二区三区另类 | 欧美在线黄色| 亚洲福利视频一区| 国产精品99久久久久久宅男| 国产一区二区主播在线| 亚洲精品美女在线观看| 国产精品理论片在线观看| 欧美1区2区视频| 国产精品日韩| 亚洲精品日本| 激情六月婷婷综合| 99re6热在线精品视频播放速度| 黄色免费成人| 在线亚洲精品| 日韩视频专区| 久久亚洲精品一区二区| 亚洲欧美中文日韩v在线观看| 久久亚洲综合| 欧美在现视频| 欧美日韩你懂的| 亚洲国产精品黑人久久久| 国产欧美日韩精品专区| 99re6这里只有精品| 亚洲国产91| 久久不见久久见免费视频1| 亚洲电影成人| 久久国产婷婷国产香蕉| 亚洲剧情一区二区| 欧美一区不卡| 久久成人18免费观看| 国产精品一区二区在线观看网站| 亚洲人成网在线播放| 亚洲国产精品久久91精品| 欧美一区91| 老司机成人在线视频| 激情91久久| 久久夜色精品国产噜噜av| 久久天堂成人| 激情综合网址| 欧美va日韩va| 亚洲破处大片| 一区二区三区日韩精品| 欧美视频中文一区二区三区在线观看| 亚洲国产一区二区三区青草影视| 亚洲人成绝费网站色www| 欧美成人精品不卡视频在线观看 | 亚洲最新中文字幕| 欧美日韩成人| 99视频有精品| 亚洲欧美日韩国产一区| 国产九区一区在线| 午夜一区二区三区在线观看 | 激情文学综合丁香| 欧美影院一区| 久久久久久国产精品mv| 精品成人乱色一区二区| 嫩草影视亚洲| 日韩视频免费在线| 欧美在线视频网站| 伊人一区二区三区久久精品| 欧美成人在线网站| 亚洲午夜一区二区三区| 久久人人超碰| 99综合精品| 国产欧美欧美| 欧美国产一区二区三区激情无套| 99一区二区| 久久女同互慰一区二区三区| 亚洲免费播放| 国产日韩欧美一区| 欧美岛国在线观看| 亚洲女人小视频在线观看| 蜜臀av性久久久久蜜臀aⅴ四虎| 亚洲精品视频在线播放| 国产精品―色哟哟| 久久中文字幕导航| 亚洲午夜电影网| 欧美好骚综合网| 香港久久久电影| 99在线|亚洲一区二区| 国产丝袜美腿一区二区三区| 欧美国产激情二区三区| 亚洲欧美日韩另类| 亚洲第一福利社区| 欧美一区二区三区四区夜夜大片| 狠狠色丁香久久婷婷综合_中| 欧美精品在线观看播放| 欧美一区二区三区视频免费| 亚洲人成网站777色婷婷| 亚洲欧美日韩一区二区三区在线| 亚洲国产精品久久人人爱蜜臀| 国产精品爽爽爽| 欧美日韩大片| 免费成人高清视频| 日韩午夜剧场| 欧美日韩精品是欧美日韩精品| 欧美一区在线看| 亚洲毛片一区| 欧美成人精品在线| 欧美资源在线| 亚洲无亚洲人成网站77777| 悠悠资源网久久精品| 国产资源精品在线观看| 国产精品国产成人国产三级| 欧美jizz19hd性欧美| 欧美与欧洲交xxxx免费观看| 亚洲一卡久久| 亚洲网站啪啪| 亚洲综合电影| 亚洲免费中文字幕| 亚洲综合视频在线| 亚洲免费在线播放| 亚洲夜晚福利在线观看| 99香蕉国产精品偷在线观看| 日韩图片一区| 在线视频亚洲欧美| 亚洲在线观看视频网站| 亚洲一区视频在线| 亚洲免费一在线| 欧美一级大片在线观看| 性色一区二区| 久久另类ts人妖一区二区| 久热精品视频在线观看一区| 久久五月天婷婷| 欧美韩日一区二区| 欧美日韩国产一区二区三区| 欧美三级视频在线播放| 国产精品自拍网站| 黄色成人精品网站| 亚洲国产精品99久久久久久久久| 亚洲国产日韩欧美在线99| 一级成人国产| 亚洲欧美国产日韩天堂区| 性久久久久久久久| 久久精品免费电影| 欧美好吊妞视频| 一本色道久久88综合亚洲精品ⅰ | 亚洲美女视频| 亚洲欧美日韩精品久久久久| 久久久av毛片精品| 欧美精品日韩综合在线| 国产精品成人播放| 亚洲美女一区| 欧美日韩成人激情| 欧美性事在线| 国产精品永久免费观看| 一区二区三区在线高清| 亚洲毛片网站| 欧美一区二区久久久| 巨乳诱惑日韩免费av| 亚洲乱码国产乱码精品精可以看| 亚洲一区二区三区国产| 久久久久久自在自线| 欧美日韩亚洲综合一区| 国产在线一区二区三区四区 | 一区在线影院| 一本色道88久久加勒比精品 | 中文av一区二区| 久久性色av| 99国产精品一区| 久久久久久一区| 香蕉成人啪国产精品视频综合网| 香港久久久电影| 欧美日韩在线观看一区二区| 国产在线播放一区二区三区| 亚洲一区观看| 亚洲日韩第九十九页| 亚洲综合另类| 欧美了一区在线观看| 尤物yw午夜国产精品视频明星|