青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

隨筆-341  評(píng)論-2670  文章-0  trackbacks-0
    有個(gè)同學(xué)近來一直在做一個(gè)魔獸世界戰(zhàn)況分析(名字好像叫DeusCraft),說是很火。只是用C#覺得不是很爽,想移植到C++上面來。但是那個(gè)東西在分析的時(shí)候用了好多正則表達(dá)式,于是只好找了些正則表達(dá)式引擎來測(cè)。

    測(cè)試的文件一共有27萬多行,首先通過一個(gè)檢查時(shí)間的正則表達(dá)式。如果成功,則在接下來的20幾條正則表達(dá)式中驗(yàn)證字符串命中哪一條,然后開始做剩余的工作。原先在C#上花了12秒分析,后來換了boost的正則表達(dá)式花費(fèi)40秒,然后從MSR上找了一個(gè)號(hào)稱比boost快4倍的正則表達(dá)式引擎,結(jié)果還是40秒(都是微軟的,咋差距這么大……)。于是同學(xué)用他自己做的正則表達(dá)式引擎花了23秒(此數(shù)據(jù)不太記得),我用我以前那個(gè)東西花費(fèi)108秒(-_-|||)。

    于是我們這幾天就在優(yōu)化正則表達(dá)式引擎,到了今天同學(xué)那個(gè)花費(fèi)13秒,我那個(gè)12秒。Visual Studio 2008 Team System上有一個(gè)Performance Wizard,用于在程序執(zhí)行的過程中統(tǒng)計(jì)各個(gè)函數(shù)所占用的時(shí)間,可以方便定位,看出效率瓶頸,非常好用。

    我之前的正則表達(dá)式為了保持很多語法上的一致性(譬如選擇操作符“|”需要遵守交換律等等),使用了一種花費(fèi)很大的辦法來對(duì)字符串進(jìn)行分析。這種分析方法找出所有符合正則表達(dá)式要求的所有匹配的路徑然后進(jìn)行篩選。篩選的過程中浪費(fèi)了很多new和delete的操作,而且做了很多計(jì)算,維護(hù)了一個(gè)非常復(fù)雜的數(shù)據(jù)結(jié)構(gòu)。后來想到有些事情是可以讓人來操心的,于是在原來的接口上加了一個(gè)option,添加了一種叫做“貪婪式”的分析方法。現(xiàn)在就同時(shí)有兩種分析方法用了。第二種分析方法的優(yōu)點(diǎn)是快,缺點(diǎn)是喪失了一些語法上的優(yōu)美(不過這個(gè)對(duì)于大部分人來說應(yīng)該是沒什么關(guān)系的了。要是正則表達(dá)式的執(zhí)行過程不復(fù)雜的話,《精通正則表達(dá)式》也就賣不出去了,反正別人的正則表達(dá)式大多都是貪婪的)。貪婪式的分析方法不同時(shí)掃描所有路徑,而是使用回溯的方法。不過這種方法最大的優(yōu)點(diǎn)在于數(shù)據(jù)結(jié)構(gòu)可以大幅度簡(jiǎn)化為三個(gè)堆棧(NFA狀態(tài)、已捕獲子串、捕獲狀態(tài)),從而大量減少包括申請(qǐng)和釋放等的指針操作。

    上文中的測(cè)試是在同學(xué)他自己進(jìn)行的。我在我自己的電腦上使用了一條表達(dá)式(而不是20幾條)來跑相同的文件,非貪婪式用了23秒,貪婪式用了3.5秒。

    雖然這個(gè)正則表達(dá)式引擎的接口跟現(xiàn)在C#或Java流行的那些差不多,只是這東西屬于Syngram的一部分,所以不是很想單獨(dú)分隔成一個(gè)dll發(fā)布。至于代碼就要等Vczh Free Script 3.0或者Vczh Lazy Script 1.0發(fā)布的時(shí)候再一起開放了,因?yàn)槭褂肧yngram做編譯器是很爽的。到時(shí)候再考慮如何將正則表達(dá)式和上下文無關(guān)文法兩個(gè)強(qiáng)大的字符串分析庫封裝成dll用吧。嘿嘿。
posted on 2008-05-07 05:21 陳梓瀚(vczh) 閱讀(15486) 評(píng)論(21)  編輯 收藏 引用 所屬分類: C++

評(píng)論:
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-07 19:19 | xiaolige
你自己寫的那個(gè)功能有boost的全嗎,能夠全面實(shí)現(xiàn)boost.regex功能并且性能上超越它這么多就很厲害了  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-07 20:13 | 空明流轉(zhuǎn)
現(xiàn)在MSR的不一定有boost好了,你用的是regex還是xpressive的那個(gè),我都分不清有什么區(qū)別,囧  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-07 20:39 | Fox
正要看看正則表達(dá)式,不妨寫詳細(xì)點(diǎn),參考一下:D  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-07 21:39 | eXile
boost::xpressive有兩種使用方式, 一種就是和boost::regex一樣的動(dòng)態(tài)解析,一種是靜態(tài)解析,類似于boost::spirit .
如果你使用的正則式是硬編碼的字符串(大多數(shù)情況下都是如此), 那么使用 xpressive的靜態(tài)解析具有更高的效率, 因?yàn)樗慕馕瞿0迨窃诰幾g期生成的.  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-08 05:10 | 陳梓瀚(vczh)
boost::regex不能命名捕獲,只能匿名捕獲,我的可以,這是功能上的唯一區(qū)別。其他的特性我全有。畢竟是參考過他和.net兩邊的語法然后自己改了一下的。

至于spirit,那個(gè)不是正則表達(dá)式,是上下文無關(guān)文法。這個(gè)就是另外一個(gè)問題了。我那套syngram有一個(gè)東西是用來處理上下文無關(guān)文法的,這兩個(gè)我還沒比。不過以前的spirit是不能處理左遞歸的,不知道現(xiàn)在的行不行。

不過xpressive寫的正則表達(dá)式在boost的主頁上號(hào)稱快了15%,估計(jì)有所限制。把文本的正則表達(dá)式換成那種直接寫代碼的東西,本質(zhì)上并沒有改變什么。因?yàn)闋顟B(tài)機(jī)還是狀態(tài)機(jī),操作符重載是不可能靜態(tài)編譯的,只有直接用模板才行。這樣的話會(huì)變成類似
seq_p<
ch_p<'a'>,
opt_p<
ch_p<'b'>,
ch_p<'c'>
>
>
的,用于表達(dá)a(b|c)。這種形式才有可能達(dá)到編譯器編譯出分析字符串的代碼。  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-09 06:20 | 路人甲
不知天高地厚,你和你同學(xué)竟然都超過了regex,真是太有才了
  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-09 06:24 | 路人甲
原先在C#上花了12秒分析,后來換了boost的正則表達(dá)式花費(fèi)40秒,然后從MSR上找了一個(gè)號(hào)稱比boost快4倍的正則表達(dá)式引擎,結(jié)果還是40秒(都是微軟的,咋差距這么大……)。
=======================
C++比C#慢這么多,差距怎么這么大啊,為什么C++比C#慢這么多啊?哦,原來使用者是頭豬喲  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-09 07:27 | eXile
@陳梓瀚(vczh)
你所寫的模板形式和xpressive的表達(dá)式模板并沒有太大的差別, 因?yàn)楸磉_(dá)式模板最終生成的也是類似于這樣的東西.
另外, 程序庫為了實(shí)現(xiàn)功能的全面性和通用性, 必然要損失一部分效率, 樓上的對(duì)此也不用大驚小怪, 還是要注意素質(zhì).....
  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-09 09:40 | 陳梓瀚(vczh)
@路人甲
C#的正則表達(dá)式也是C++寫的,謝謝合作。
至于速度問題,好像沒人規(guī)定我就不能比boost做得好吧。

不過路人甲想必是沒有寫過正則表達(dá)式引擎了。在測(cè)試的過程中,瓶頸不在分析,而在于分析完了之后產(chǎn)生的數(shù)據(jù)結(jié)構(gòu)。正則表達(dá)式分析字符串的過程本身是很快的,分析完了制造那些數(shù)據(jù)出來給你用的時(shí)候,就會(huì)消耗大量的時(shí)間。明白?不過話說回來,我那個(gè)庫是沒有用到stl的。  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-11 19:53 | 胡人
鼓勵(lì)原創(chuàng),鼓勵(lì)創(chuàng)新,鼓勵(lì)提高,一個(gè)字,好!
期待能早些見到東西,而不是一些有點(diǎn)自吹自擂的數(shù)據(jù)!
  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-11 21:45 | 陳梓瀚(vczh)
東西不能著急。做是做出來了。改進(jìn)前的代碼其實(shí)已經(jīng)發(fā)布了,改進(jìn)后的還沒有。只是以前沒做廣告到大家不知道罷了。現(xiàn)在還不拿出來的原因有三:

1:沒充分測(cè)試。因?yàn)槠綍r(shí)還要上課做作業(yè)。
2:我用的庫是我自己開發(fā)的,沒有stl,跟大家的代碼要接上不是那么容易。所以就算看到了,也就只能看。想用的話還得再花一些功夫。因?yàn)檫@個(gè)正則表達(dá)式當(dāng)初只是想給自己用的。
3:正則表達(dá)式隸屬于我自己的那套文法工具,按照計(jì)劃是在下一個(gè)編譯器發(fā)布的時(shí)候一起給出來。  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-11 22:03 | 空明流轉(zhuǎn)
鄙視造車輪啊造車輪。。。  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-24 07:04 | missdeer
我有一個(gè)項(xiàng)目里用MSR的greta全文匹配5種模式,一個(gè)3萬行的文件,占用CPU99%可能要1分鐘左右。最近發(fā)現(xiàn),用lex和yacc來做,達(dá)到同樣的效果,可能不會(huì)超過3秒鐘。正則表達(dá)式要用好,還是很有文章可作的。  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2008-05-24 09:10 | 陳梓瀚(vczh)
當(dāng)然,你用lex生成代碼,是不能動(dòng)態(tài)修改的。當(dāng)然快了。  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2009-03-20 02:20 | 林林
不知到能不能把你的測(cè)試數(shù)據(jù)與程序公布一下,不用提供正則庫的源碼
我也寫了一個(gè),想比較一下?  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2009-03-20 02:54 | 陳梓瀚(vczh)
那個(gè)在舊電腦里面,而且是一個(gè)100多M的文本文件……你去比較C#那個(gè)吧,我的速度是它的96%(比率較穩(wěn)定)  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2009-03-22 01:38 | 白開水
LSS的,你把一份C文件,用gcc -E 跑一次后,在粘貼個(gè)幾十次,基本就OK了  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2009-03-24 08:29 | wow
@路人甲
毫無水準(zhǔn)  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2010-07-27 17:57 | 路人癸
要鼓勵(lì)~而不是諷刺~支持國產(chǎn)~打到小日本~  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2010-09-02 00:45 | yoco
@路人甲

boost::regex 的效能本來就是慢的,這是常識(shí)。

切莫妄自菲薄,您自己實(shí)現(xiàn)一個(gè),效能也是有可能比 boost::regex 好的。  回復(fù)  更多評(píng)論
  
# re: 正則表達(dá)式——一點(diǎn)小插曲 2016-08-03 11:24 | Bread
明天開工。
來踩一下輪子哥的腳印。  回復(fù)  更多評(píng)論
  
青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            又紧又大又爽精品一区二区| 国产精品v片在线观看不卡 | 午夜伦欧美伦电影理论片| 欧美日韩另类在线| 亚洲欧美美女| 亚欧成人精品| 亚洲国产欧美国产综合一区| 亚洲国产精品一区二区久| 欧美国产日韩一区| 欧美日韩亚洲一区二| 欧美亚洲视频| 久久伊人亚洲| 亚洲图片欧美一区| 性感少妇一区| 亚洲日本无吗高清不卡| 一区二区三区高清在线观看| 国产亚洲激情视频在线| 亚洲国产精品悠悠久久琪琪| 欧美激情欧美激情在线五月| 午夜激情综合网| 久久久国产一区二区| 一本久久a久久精品亚洲| 性欧美8khd高清极品| 亚洲国产欧美日韩| 亚洲欧美成人| 日韩视频在线观看国产| 午夜亚洲性色福利视频| 亚洲精品影院在线观看| 欧美一区二区精品| 日韩一区二区电影网| 欧美一区视频| 亚洲综合999| 欧美丰满高潮xxxx喷水动漫| 久久精品视频在线播放| 欧美日韩在线免费视频| 欧美成人精品在线| 国产丝袜一区二区| 日韩一级片网址| 亚洲国产日韩综合一区| 欧美一级久久久| 亚洲欧美国产不卡| 欧美日韩成人| 亚洲第一狼人社区| 一区在线影院| 欧美一区二区三区啪啪 | 国产精品看片资源| 亚洲人体1000| 91久久线看在观草草青青| 欧美一区二区三区在线视频| 亚洲欧美成人一区二区三区| 欧美精品 日韩| 91久久在线播放| 亚洲国内自拍| 麻豆成人91精品二区三区| 老色批av在线精品| 国产日韩亚洲| 午夜久久资源| 久久久久久精| 一区二区亚洲欧洲国产日韩| 欧美一区二区国产| 久久亚洲精品网站| 狠狠88综合久久久久综合网| 先锋影音国产一区| 久久久综合香蕉尹人综合网| 国产日本欧美一区二区| 性伦欧美刺激片在线观看| 欧美亚洲专区| 极品少妇一区二区三区| 久久精品青青大伊人av| 美女在线一区二区| 亚洲精品美女在线观看| 欧美激情国产日韩精品一区18| 欧美激情视频网站| 一区二区三区**美女毛片 | 亚洲欧美综合精品久久成人| 国产精品高清一区二区三区| 亚洲图片欧美午夜| 久久久国产精品一区二区三区| 国产乱码精品一区二区三区五月婷| 亚洲欧美日本国产专区一区| 久久露脸国产精品| 亚洲国产精品第一区二区| 欧美成人有码| 亚洲影院免费| 免费看亚洲片| 亚洲一区www| 狠狠色综合网| 欧美日韩久久| 欧美影院精品一区| 亚洲欧洲一区二区在线播放| 亚洲在线免费视频| 韩国福利一区| 欧美精品成人91久久久久久久| 99视频精品在线| 久久久久国色av免费看影院| 亚洲精品一区二区三区樱花| 国产精品久久久久av免费| 久久国产夜色精品鲁鲁99| 亚洲国产中文字幕在线观看| 午夜日韩激情| 亚洲国产精品黑人久久久| 国产精品99免费看| 久久女同精品一区二区| 中日韩午夜理伦电影免费| 欧美暴力喷水在线| 性视频1819p久久| 亚洲卡通欧美制服中文| 国产午夜亚洲精品不卡| 欧美精彩视频一区二区三区| 欧美伊人影院| 一区二区三区色| 亚洲电影天堂av| 久久久www成人免费无遮挡大片| 野花国产精品入口| 亚洲第一区在线观看| 国产精品午夜在线| 欧美日韩免费看| 欧美大片在线观看一区二区| 欧美在线观看日本一区| 一区二区三区偷拍| 亚洲欧洲精品一区| 欧美a一区二区| 久久久久九九九九| 久久se精品一区二区| 亚洲午夜激情在线| 亚洲伦理在线免费看| 亚洲福利视频三区| 在线成人欧美| 伊人夜夜躁av伊人久久| 国产亚洲欧美一区在线观看| 国产精品福利网| 欧美视频在线观看免费| 欧美久久久久免费| 欧美韩日视频| 欧美激情aⅴ一区二区三区| 久久免费视频这里只有精品| 久久久国产精品亚洲一区| 午夜老司机精品| 欧美在线你懂的| 久久精品亚洲一区二区三区浴池 | 亚洲毛片在线| 亚洲另类在线视频| 一本大道久久a久久精二百| 亚洲精品国久久99热| 亚洲人成网站色ww在线| 亚洲日本欧美天堂| 亚洲日本电影| 中文一区在线| 亚洲免费综合| 裸体丰满少妇做受久久99精品| 欧美成人嫩草网站| 欧美大胆成人| 欧美日韩在线综合| 国产九九视频一区二区三区| 国产精品男人爽免费视频1| 国产美女精品免费电影| 国产综合久久久久久| 亚洲福利av| 亚洲最黄网站| 欧美一区二区啪啪| 久久视频一区| 亚洲国产欧美日韩| 一区二区三区成人| 午夜在线精品偷拍| 欧美承认网站| 国产精品毛片| 在线成人av| 亚洲无线视频| 美女日韩在线中文字幕| 亚洲国产精品热久久| 一区二区三区国产精华| 午夜精品福利在线观看| 久久综合九色综合网站| 欧美午夜国产| 怡红院精品视频在线观看极品| 一本色道久久88亚洲综合88| 香蕉乱码成人久久天堂爱免费| 狼狼综合久久久久综合网| 亚洲三级免费电影| 欧美一区二区三区免费视| 欧美福利视频在线观看| 国产伦精品一区二区三区视频黑人 | 亚洲日本激情| 欧美专区亚洲专区| 欧美ed2k| 亚洲欧美一级二级三级| 欧美激情在线免费观看| 国内成+人亚洲| 亚洲一区二区三区乱码aⅴ| 牛人盗摄一区二区三区视频| 一本一本久久a久久精品综合麻豆| 久久成人国产| 国产精品夜夜夜一区二区三区尤| 在线免费观看日韩欧美| 欧美一级专区免费大片| 日韩视频永久免费| 欧美成人一区二区在线| 在线观看日韩av| 久久久99精品免费观看不卡| 制服丝袜激情欧洲亚洲|