青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

posts - 15, comments - 10, trackbacks - 0, articles - 0

KFS代碼分析1(meta內存結構)

Posted on 2013-10-23 01:36 whspecial 閱讀(1271) 評論(0)  編輯 收藏 引用 所屬分類: KFS分析

此處的KFS是指Kosmos distributed file system,代碼位于http://sourceforge.net/projects/kosmosfs/,之后會寫幾篇相關的文章,以供后來者參考。

KFS里Meta的內存結構主要是一棵B+樹,保存在內存里,具體分析如下:

B-樹,B+樹的定義

關于這些樹的定義,最好還是參考算法導論等經典書,網路上的信息有些不是很準確,為了方便大家還是貼一個鏈接:

http://www.cnblogs.com/oldhorse/archive/2009/11/16/1604009.html

KFS為何選用B+樹而非B樹?

這是我個人的理解:

雖然B樹可以在非葉子節點命中,會縮短一些平均查找長度,但是B+樹在這種應用一個優勢就是每個節點都有指向next節點的指針,對于范圍查詢或者遍歷操作很適合。對于文件系統的一個ls某個子目錄的需求,用B+樹可以較高效的解決。

KFSB+樹的類圖


MetaNode
base class for both internal and leaf nodes

Metabase class for data objects (leaf nodes)

Nodean internal node in the KFS search tree

MetaChunkInfochunk information for a given file offset

MetaDentry Directory entry, mapping a file name to a file id

MetaFattrFile or directory attributes

各節點的介紹

1Meta類是子節點的父類,其最主要的成員變量是fid

有三個葉子節點:MetaChunkInfoMetaDentryMetaFattr

2MetaDentry實現從文件名到fid的映射,對于每個文件(目錄)都擁有1MetaDentry

成員變量包括:

dir:文件父目錄的fid

namedentry的名稱,實際就是文件名

3MetaFattr實現從fid到文件屬性的映射,對于每個文件(目錄)都擁有一個MetaFattr

成員變量包括:

Type:文件還是目錄

numReplicas:文件有幾份副本

mtime:修改時間

ctime:屬性修改時間

crtime:文件創建時間

chunkcount:連續的chunk數目

filesize:文件大小

nextChunkOffset:最后一個chunk在文件的所處的offset

mode_t mode:文件屬性(rwx位)

key:由KFS_FATTRfid來構成,可以通過fid直接找到保存文件屬性的節點。

4MetaChunkInfo標志某個文件對應的chunk信息,如果一個文件包含多個chunk,那么需要有多個MetaChunkInfo

成員變量包括:

offsetchunk在文件中的偏移量,因為一個文件可能由多個chunk組成

chunkIdchunkid

chunkVersionchunkversion

5Node實現的是B+樹的內部節點,這種節點僅僅作為索引用途,存儲實際元數據信息的節點位于最底部的葉子節點。

成員變量包括:

NKEY = 32:每個節點最多擁有的關鍵字數目,實際上也就是最多擁有的子節點數目,如果多余這個值節點進行分裂

NSPLIT = NKEY / 2:分裂之后每個節點的關鍵字數目

NFEWEST = NKEY - NSPLIT:每個節點最少擁有的關鍵字數目,如果少于這個值兩個節點進行合并

count:節點實際擁有的關鍵字數目

Key childKey[NKEY]:節點存儲的關鍵字列表

MetaNode *childNode[NKEY]:節點指向子節點的指針列表

Node *next:指向下一個同級節點的指針

實際上每個內部節點的階數為32,可以有32個子節點,而每個葉子節點只保存一個key值。

三類子節點在B+樹中如何分布?

可以想象,必定是將同一類的節點聚集在一起。因此對于排序函數就是先比較節點類型,然后再對節點內部的成員變量進行比較。MetaDentry是根據dir(父目錄的id),MetaFattr是根據fidMetaChunkInfo是根據idchunkId來排序。

一個不太相關的思考

看上面的三類子節點,我們可以發現chunk的位置信息并沒有保存在B+樹里,它是單獨保存在一個Map數據結構里的,也不會在meta server里進行持久化,而是每次chunk啟動時向meta server來報告。之所以不做持久化,可以這樣來理解:

只有Chunk服務器才能最終確定一個Chunk是否在它的硬盤上。Chunk服務器的錯誤可能會導致Chunk自動消失(比如,硬盤損壞了或者無法訪問了),亦或者操作人員可能會重命名一個Chunk服務器,還是由chunk server來報告比較靠譜。


只有注冊用戶登錄后才能發表評論。
網站導航: 博客園   IT新聞   BlogJava   博問   Chat2DB   管理


青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            久久九九精品99国产精品| 久久婷婷综合激情| 欧美午夜性色大片在线观看| 国产精品99久久久久久有的能看 | 国产精品一区在线观看你懂的| 亚洲图片在线观看| 亚洲天堂免费在线观看视频| 国产精品porn| 久久久噜久噜久久综合| 老司机午夜精品视频在线观看| 亚洲毛片av| 一区二区毛片| 伊人成人在线视频| 亚洲理伦在线| 国产酒店精品激情| 欧美成人情趣视频| 欧美色另类天堂2015| 午夜电影亚洲| 欧美a级片网站| 亚洲你懂的在线视频| 久久激情婷婷| 亚洲视频欧洲视频| 久久电影一区| 亚洲永久精品大片| 久久婷婷成人综合色| 在线视频你懂得一区二区三区| 羞羞色国产精品| 亚洲人成精品久久久久| 亚洲综合欧美日韩| 亚洲久久视频| 久久久久久电影| 在线亚洲电影| 你懂的一区二区| 欧美在线999| 欧美视频网址| 欧美成人日本| 国产一区久久久| 亚洲视频中文| 日韩午夜电影在线观看| 欧美伊人久久大香线蕉综合69| 一区二区高清视频| 欧美sm视频| 美日韩免费视频| 国产三级欧美三级日产三级99| 亚洲精品久久久久中文字幕欢迎你| 国产乱码精品一区二区三区不卡 | 久久久av水蜜桃| 欧美午夜在线一二页| 欧美激情一区二区三区成人| 国产一区二区三区四区在线观看| 一区二区欧美日韩视频| 99爱精品视频| 蜜桃久久av一区| 欧美成人福利视频| 玉米视频成人免费看| 久久国产一区| 久久久久久久久综合| 国产精品视频精品| 中日韩午夜理伦电影免费| 亚洲色图在线视频| 欧美日韩亚洲高清一区二区| 亚洲精品视频在线播放| 99国产成+人+综合+亚洲欧美| 美女脱光内衣内裤视频久久影院| 美国成人毛片| 亚洲国产精品一区二区www在线| 久久天天躁夜夜躁狠狠躁2022| 久久综合一区| 1000精品久久久久久久久| 久久综合久久久久88| 欧美大色视频| 日韩手机在线导航| 欧美日韩视频不卡| 亚洲午夜视频| 久久久噜噜噜久久久| 亚洲福利专区| 欧美精品一区二| 妖精视频成人观看www| 亚洲欧美在线看| 国产一区二区三区直播精品电影| 久久精品国产精品| 亚洲国产婷婷香蕉久久久久久99 | 一本色道88久久加勒比精品| 欧美精品一区二区三区久久久竹菊| 亚洲激情第一区| 中文一区二区在线观看| 国产伦精品一区二区三区| 久久久久国产精品午夜一区| 欧美成人精品三级在线观看| 99re热这里只有精品视频| 国产精品美女一区二区| 久久亚洲午夜电影| 99视频精品| 另类欧美日韩国产在线| 亚洲精选在线观看| 国产精品午夜电影| 榴莲视频成人在线观看| 一本高清dvd不卡在线观看| 欧美一区永久视频免费观看| 亚洲黄色在线视频| 国产精品xxxxx| 久久久久久亚洲综合影院红桃 | 亚洲国产小视频在线观看| 亚洲视频久久| 狠狠综合久久| 国产精品高潮呻吟久久| 久久久青草婷婷精品综合日韩 | 欧美中文字幕在线播放| 亚洲精品美女久久7777777| 久久狠狠亚洲综合| 亚洲私人影院| 亚洲高清视频一区| 国产欧美精品xxxx另类| 欧美激情第9页| 久久精品在线视频| 亚洲女人天堂成人av在线| 亚洲黄页视频免费观看| 麻豆免费精品视频| 欧美一区在线直播| 亚洲视频香蕉人妖| 亚洲七七久久综合桃花剧情介绍| 国产欧美日韩在线播放| 国产精品成人午夜| 欧美激情视频在线播放| 久久天天综合| 久久久999| 久久精品视频导航| 欧美一区亚洲| 亚洲免费视频中文字幕| 夜夜夜精品看看| 亚洲精品美女久久7777777| 欧美大片91| 欧美成人有码| 欧美成人精品三级在线观看| 久久久天天操| 久久久亚洲欧洲日产国码αv | 黄色一区二区在线观看| 国产精品人人爽人人做我的可爱| 欧美理论电影在线播放| 欧美国产一区在线| 欧美不卡视频| 欧美黄网免费在线观看| 欧美风情在线| 欧美精品三级日韩久久| 欧美精品免费播放| 欧美日韩三区四区| 欧美视频在线观看一区二区| 欧美性事免费在线观看| 国产精品爱久久久久久久| 欧美性事在线| 国产欧美日韩一区二区三区在线观看| 国产精品国内视频| 国产欧美亚洲一区| 伊人狠狠色j香婷婷综合| 亚洲电影av在线| 亚洲人体偷拍| 亚洲一区免费看| 欧美综合国产| 男女激情视频一区| 亚洲三级观看| 亚洲一区二区在线免费观看| 午夜精品久久| 久久免费视频这里只有精品| 免费观看欧美在线视频的网站| 欧美黄色精品| 国产精品综合| 亚洲高清久久网| 亚洲综合国产| 免费久久99精品国产| 日韩网站免费观看| 亚洲欧美日韩国产中文在线| 久久久久99| 欧美日韩国内自拍| 国产一区二区三区高清播放| 亚洲人成网站777色婷婷| 亚洲欧美另类在线观看| 蜜臀av性久久久久蜜臀aⅴ| 亚洲精品一二| 久久精品一区| 欧美小视频在线观看| 狠狠色丁香婷婷综合影院| 日韩一级大片| 久久免费一区| 一区二区黄色| 蜜乳av另类精品一区二区| 国产精品v日韩精品| 亚洲国产精品一区在线观看不卡| 亚洲自拍偷拍麻豆| 欧美激情亚洲| 久久精品99国产精品酒店日本| 欧美日产一区二区三区在线观看| 国产自产精品| 亚洲香蕉成视频在线观看| 欧美1区2区3区| 亚洲免费视频在线观看| 欧美日韩亚洲成人| 亚洲国产专区| 米奇777在线欧美播放| 亚洲欧美一区二区激情| 欧美日韩亚洲视频一区|