青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

隨筆-341  評論-2670  文章-0  trackbacks-0
    算法的具體說明可以看這里

    今天花了一個晚上完成并測試了從NFA到DFA的代碼。NFA到DFA的主要過程就是構造出一個等價于NFA的狀態機,使得從任何一個狀態出去的狀態轉換都不具有相同的條件。這個約束就是“確定性”的含義,給定一個狀態和一個輸入,最多只能跳轉到一個目標狀態。于是知道了這個過程,代碼就很好寫了:

  1         Automaton::Ref NfaToDfa(Automaton::Ref source, IGroup<State*, State*>& dfaStateMap)
  2         {
  3             Automaton::Ref target=new Automaton;
  4             Group<Transition*, Transition*> nfaTransitions;
  5             CopyFrom(target->captureNames.Wrap(), source->captureNames.Wrap());
  6             State* startState=target->NewState();
  7             target->startState=startState;
  8             dfaStateMap.Add(startState, source->startState);
  9 
 10             for(int i=0;i<target->states.Count();i++)
 11             {
 12                 State* currentState=target->states[i].Obj();
 13                 nfaTransitions.Clear();
 14 
 15                 //對該DFA狀態的所有等價NFA狀態進行遍歷
 16                 const IReadonlyList<State*>& nfaStates=dfaStateMap[currentState];
 17                 for(int j=0;j<nfaStates.Count();j++)
 18                 {
 19                     State* nfaState=nfaStates[j];
 20                     //對每一個NFA狀態的所有轉換進行遍歷
 21                     for(int k=0;k<nfaState->transitions.Count();k++)
 22                     {
 23                         Transition* nfaTransition=nfaState->transitions[k];
 24                         //檢查該NFA轉換類型是否已經具有已經被記錄
 25                         Transition* transitionClass=0;
 26                         for(int l=0;l<nfaTransitions.Keys().Count();l++)
 27                         {
 28                             Transition* key=nfaTransitions.Keys()[l];
 29                             if(AreEqual(key, nfaTransition))
 30                             {
 31                                 transitionClass=key;
 32                                 break;
 33                             }
 34                         }
 35                         //不存在則創建一個轉換類型
 36                         if(transitionClass==0)
 37                         {
 38                             transitionClass=nfaTransition;
 39                         }
 40                         //注冊轉換
 41                         nfaTransitions.Add(transitionClass, nfaTransition);
 42                     }
 43                 }
 44 
 45                 //遍歷所有種類的NFA轉換
 46                 for(int j=0;j<nfaTransitions.Count();j++)
 47                 {
 48                     const IReadonlyList<Transition*>& transitionSet=nfaTransitions.GetByIndex(j);
 49                     //對所有轉換的NFA目標狀態集合進行排序
 50                     SortedList<State*> transitionTargets;
 51                     for(int l=0;l<transitionSet.Count();l++)
 52                     {
 53                         State* nfaState=transitionSet[l]->target;
 54                         if(!transitionTargets.Contains(nfaState))
 55                         {
 56                             transitionTargets.Add(nfaState);
 57                         }
 58                     }
 59                     //判斷轉換類的所有轉換的NFA目標狀態組成的集合是否已經有一個對應的DFA狀態
 60                     State* dfaState=0;
 61                     for(int k=0;k<dfaStateMap.Count();k++)
 62                     {
 63                         //將DFA的等價NFA狀態集合進行排序
 64                         SortedList<State*> relativeStates;
 65                         CopyFrom(relativeStates.Wrap(), dfaStateMap.GetByIndex(k));
 66                         //比較兩者是否相等
 67                         if(relativeStates.Count()==transitionTargets.Count())
 68                         {
 69                             bool equal=true;
 70                             for(int l=0;l<relativeStates.Count();l++)
 71                             {
 72                                 if(relativeStates[l]!=transitionTargets[l])
 73                                 {
 74                                     equal=false;
 75                                     break;
 76                                 }
 77                             }
 78                             if(equal)
 79                             {
 80                                 dfaState=dfaStateMap.Keys()[k];
 81                                 break;
 82                             }
 83                         }
 84                     }
 85                     //不存在等價DFA狀態則創建一個
 86                     if(!dfaState)
 87                     {
 88                         dfaState=target->NewState();
 89                         for(int k=0;k<transitionTargets.Count();k++)
 90                         {
 91                             dfaStateMap.Add(dfaState, transitionTargets[k]);
 92                             if(transitionTargets[k]->finalState)
 93                             {
 94                                 dfaState->finalState=true;
 95                             }
 96                         }
 97                     }
 98                     //將該轉換復制到新狀態機里
 99                     Transition* transitionClass=nfaTransitions.Keys()[j];
100                     Transition* newTransition=target->NewTransition(currentState, dfaState);
101                     newTransition->capture=transitionClass->capture;
102                     newTransition->index=transitionClass->index;
103                     newTransition->range=transitionClass->range;
104                     newTransition->type=transitionClass->type;
105                 }
106             }
107 
108             return target;
109         }

    這里頻繁使用了Group和IGroup作為數據結構來計算。Group是一個多對多映射,也就是說Group<K, V>的內部結構等價于Map<K, List<V>>。從NFA到DFA轉換的同時,這個函數還記錄了每一個DFA對象所對應的NFA對象集合。

    接下來就要分兩步走了,第一個先做純匹配的正則表達式,然后接著做貪婪匹配(包含捕獲、預查和指向捕獲的匹配等高級功能)。根據Vczh Library++2.0的經驗,純匹配的正則表達式用來實現詞法分析器的時候,不亞于純手寫的詞法分析器,這一點令他的應用范圍變廣。
posted on 2009-11-03 08:34 陳梓瀚(vczh) 閱讀(2748) 評論(8)  編輯 收藏 引用 所屬分類: VL++3.0開發紀事

評論:
# re: Vczh Library++3.0之正則表達式引擎(從NFA到DFA) 2009-11-03 22:49 | 白開水
看到這個文章,突然感覺很懷念,真正把我編程帶入門的文章。

轉眼就兩年了。

正則表達式引擎到了后面效率可能會卡在內存的吞吐上,一般的PC配置(這個一般我也不太確定),極限應該在30MB/S.

這個東西熱愛計算機編程的人都該嘗試去做下。非常考基本功。基本的數據結構,stack, avl tree, map, bit-vector, list都有牽涉,而算法那塊也逃不出一般算法書的經典算法部分,編譯原理也有部分涉及。假如你是個學生,又不知道該做點啥,那么這個東西,你該試著做做。

  回復  更多評論
  
# re: Vczh Library++3.0之正則表達式引擎(從NFA到DFA)[未登錄] 2009-11-04 07:06 | L.S.Winson
話說你寫這NFA到DFA轉換寫了多少次了。。。。我都覺得寫這算法寫得麻木了。。。
怎么又把你的VL重寫么?  回復  更多評論
  
# re: Vczh Library++3.0之正則表達式引擎(從NFA到DFA) 2009-11-04 20:57 | 陳梓瀚(vczh)
@L.S.Winson
嗯,這個前面說過了,因為有重大升級,所以全部重寫。  回復  更多評論
  
# re: Vczh Library++3.0之正則表達式引擎(從NFA到DFA) 2009-11-04 20:57 | 陳梓瀚(vczh)
@白開水
我也很懷念之前你那個正則表達式啊,嘿嘿  回復  更多評論
  
# re: Vczh Library++3.0之正則表達式引擎(從NFA到DFA) 2009-11-06 16:17 | zblc
@白開水
啊 你就是傳說中的vczh的徒弟~收我為徒吧~  回復  更多評論
  
# re: Vczh Library++3.0之正則表達式引擎(從NFA到DFA) 2009-11-07 05:16 | 陳梓瀚(vczh)
# re: Vczh Library++3.0之正則表達式引擎(從NFA到DFA) 2009-11-08 01:12 | v.k
囧, 怎么你的徒弟走上C#了  回復  更多評論
  
# re: Vczh Library++3.0之正則表達式引擎(從NFA到DFA) 2009-11-08 07:35 | 陳梓瀚(vczh)
@v.k
人總是要多學點的  回復  更多評論
  
青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            欧美有码在线观看视频| 国产亚洲视频在线| 久久综合伊人| 国产麻豆精品在线观看| 亚洲高清色综合| 国产在线视频不卡二| 亚洲视频中文字幕| 一区二区三区久久网| 欧美 日韩 国产精品免费观看| 欧美在线亚洲一区| 国产精品一区二区在线观看| 亚洲最新在线视频| 亚洲视频狠狠| 欧美日韩在线观看视频| 99亚洲伊人久久精品影院红桃| 亚洲日本在线视频观看| 久久久久天天天天| 裸体歌舞表演一区二区| 狠狠色丁香久久婷婷综合丁香| 亚洲免费中文| 久久久国产成人精品| 韩国久久久久| 久久久久青草大香线综合精品| 久久久久久网| 亚洲国产成人av在线| 欧美大片免费看| 亚洲国产高清视频| 亚洲精品一区在线观看| 欧美精品二区| 99伊人成综合| 欧美在线你懂的| 国产主播一区二区三区| 欧美在线观看视频| 欧美xxx在线观看| 亚洲精品视频在线看| 欧美人交a欧美精品| 这里只有精品丝袜| 久久av一区二区三区| 激情文学综合丁香| 欧美成人免费全部| 一区二区福利| 久久久亚洲综合| 亚洲欧洲在线播放| 国产精品v片在线观看不卡| 亚洲欧美国产va在线影院| 久久蜜桃av一区精品变态类天堂| 亚洲第一偷拍| 国产精品豆花视频| 久久久精品免费视频| 亚洲国产日韩欧美在线99| 亚洲主播在线播放| 韩日欧美一区二区| 欧美久久影院| 午夜视频久久久| 最近中文字幕日韩精品| 欧美影院午夜播放| 亚洲国产免费| 国产精品嫩草99av在线| 久久婷婷人人澡人人喊人人爽| 亚洲日韩第九十九页| 久久久久久久久久看片| 99精品国产在热久久| 国产一区日韩二区欧美三区| 欧美高清视频免费观看| 欧美在线播放| 99精品国产热久久91蜜凸| 久久综合网色—综合色88| 亚洲五月婷婷| 亚洲人成在线播放| 国产一区二区毛片| 欧美日韩一区二区免费视频| 久久天天躁狠狠躁夜夜av| 亚洲一区二区四区| 91久久午夜| 欧美成人免费网| 欧美一区二区在线| 亚洲亚洲精品三区日韩精品在线视频| 国内外成人免费视频| 国产精品久久一卡二卡| 欧美激情国产日韩精品一区18| 欧美一级欧美一级在线播放| 一区二区三区精密机械公司| 欧美激情视频在线播放| 久久精品亚洲国产奇米99| 亚洲欧美成人一区二区在线电影 | 久久精品视频播放| 亚洲黄色在线视频| 美女图片一区二区| 久久精品女人的天堂av| 午夜亚洲伦理| 亚洲欧美日韩区| 中文国产一区| 99精品99久久久久久宅男| 亚洲人成网站色ww在线 | 国产色综合天天综合网| 国产精品乱人伦一区二区| 欧美日韩国产高清| 欧美日韩爆操| 欧美精品久久久久久久免费观看 | 欧美亚洲综合网| 亚洲网友自拍| 亚洲视频狠狠| 亚洲在线播放| 亚洲网站视频| 亚洲专区一二三| 亚洲女女女同性video| 亚洲尤物精选| 午夜久久久久| 久久精品国产第一区二区三区| 小辣椒精品导航| 久久久999精品视频| 久久人人爽人人| 欧美成人午夜77777| 久久久av毛片精品| 女主播福利一区| 亚洲风情亚aⅴ在线发布| 亚洲韩国青草视频| 99国产精品视频免费观看一公开| 一级日韩一区在线观看| 亚洲小说春色综合另类电影| 午夜亚洲精品| 老鸭窝毛片一区二区三区| 欧美福利视频在线| 国产精品成人免费| 国产日韩成人精品| 亚洲电影免费观看高清完整版在线| 亚洲国产天堂久久综合| 一区二区欧美在线观看| 欧美亚洲视频| 免费成人av在线看| 亚洲精品国产精品国产自| 影音先锋日韩资源| 亚洲高清免费视频| 日韩视频在线一区| 午夜日韩在线| 欧美激情亚洲自拍| 一区二区毛片| 久久人91精品久久久久久不卡| 欧美国产精品v| 国产免费成人av| 亚洲人被黑人高潮完整版| 亚洲免费在线播放| 毛片一区二区| 一区二区三区日韩精品视频| 欧美在线黄色| 欧美三级欧美一级| 在线观看视频一区二区| 亚洲视频在线观看网站| 久久亚洲精品伦理| 一区二区三区高清| 久久久爽爽爽美女图片| 国产精品久久久久久久久久免费看| 韩曰欧美视频免费观看| 制服丝袜激情欧洲亚洲| 免费观看久久久4p| 亚洲天堂久久| 欧美国产日产韩国视频| 国产主播一区二区三区| 亚洲一区二区动漫| 欧美激情影音先锋| 欧美一级精品大片| 国产精品国内视频| 亚洲精品视频在线播放| 久久综合九色综合欧美就去吻| 一本久久精品一区二区| 欧美成人性生活| 在线观看av不卡| 久久精品女人| 午夜精品福利一区二区三区av | 狠狠综合久久| 欧美一区二区三区在线免费观看| 亚洲区中文字幕| 免费成人小视频| 1024国产精品| 免费高清在线视频一区·| 亚洲欧美日韩国产精品| 国产精品成人免费| 在线亚洲免费| 亚洲精品美女| 欧美精品在线观看| 亚洲精品影院| 亚洲激情成人在线| 男女激情视频一区| 亚洲国产成人久久综合一区| 久久亚洲精品一区二区| 久久国产精品久久国产精品| 国产亚洲二区| 久久精品国产精品| 欧美在线免费视屏| 国产三级欧美三级| 久久九九热免费视频| 欧美综合国产精品久久丁香| 国产日韩欧美综合| 久久久.com| 久久久国产成人精品| 激情av一区| 欧美va天堂va视频va在线| 欧美www视频| 99视频精品在线| 日韩一二三区视频|