青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

各搜索引擎搜索結果的獲取

用http的get方法,構造要查詢的url,get下來,分析結果頁面即可
首先是構造url,以下是一些示例,主要看清楚?號后面的參數所代表的意思即可:
http://www.google.cn/search?num=100&&q=%E5%85%83%E6%90%9C%E7%B4%A2&start=10

http://www.baidu.com/s?wd=%D4%AA%CB%D1%CB%F7&rn=100&pn=10  //第二頁pn

http://www.yahoo.cn/s?p=%E5%85%83%E6%90%9C%E7%B4%A2&b=10  //第二頁b

http://search.yahoo.com/search?n=100&p=%E5%85%83%E6%90%9C%E7%B4%A2&b=101

http://cnweb.search.live.com/results.aspx?q=%E5%85%83%E6%90%9C%E7%B4%A2&first=51  //第二頁first=51

http://p.zhongsou.com/p?w=%D4%AA%CB%D1%CB%F7&b=3  //b=3表示第三頁

http://www.soso.com/q?w=%D4%AA%CB%D1%CB%F7&num=20&pg=1 //第一頁,每頁20個

第二步是解釋搜索結果頁面:

<meta http-equiv="content-type" content="text/html;charset=gb2312">

Google
搜索結果個數的字符串前綴:約有<b> //獲取個數用字符串定位的方式
搜索結果開始的標簽:<div id=res> //也可以用字符串定位的方式,要準確就用查找標簽定位的方式
 各個搜索結果的開始標簽:<div class=g> //字符串定位的方式
 
  搜索結果的url在第一個<a target=_blank class=l>標簽里頭
  搜索結果的標題在<a></a>的標簽之間

  搜索結果的摘要在接下來的<table><tr><td>標簽里頭直到<b>...<b><br>
  搜索結果的重寫的url在<b>...<b><br>之后的<span>標簽里頭,格式為:url,一個空格,網頁大小
  搜索結果的網頁快照在接下來的<a class=fl>的標簽里頭,屬性中有url,標簽之間有網頁快照文字
  接下來還有類似網頁等,都在<a class=fl>標簽里頭

 各個搜索結果的結束標簽是</td></tr></table></div>

......................

相關搜索的開始標簽:<p class=e>
在接下來的各個<a></a>標簽之間的內容就是相關搜索的內容
直到標簽<br clear=all>就可以結束了

 

Baidu
搜索結果個數的字符串前綴:<td align=\"righ,在定位該字符串后,直到</td>,即在這個td標簽之內含有的字符串包含相關網頁數和用時
搜索結果開始的標簽:<DIV id=ScriptDiv></DIV>
 各個搜索結果的開始標簽:<table

  搜索結果的url在第一個<a target=_blank class=l>標簽里頭
  搜索結果的標題在<a></a>的標簽之間,以<br>標簽結束
  
  搜索結果的摘要以<br>開始直到下一個<br>標簽
  
  接下來的一行(<br>換行)的font標簽中有搜索結果url的重寫,一個空格,網頁大小,網頁時間
  在接下來會有一些<a>標簽如百度快照,直到又一個<br>

 然后搜索結果的結束標簽</table>

.........................

導航條的開始標簽:<br clear=all>
導航條的內容在開始標簽之后的<div class="p"></div>標簽之間
相關搜索在接下來的<div>標簽之間的各個<a>標簽之內

其他考慮:對于字符串的匹配可以利用kmp,注意到匹配搜索結果各部分的時候所用到的模式字符串的最大前綴字符串最多是一個字符,這樣可以避免求取最大前綴字符串從而提高效率;如果要精確地匹配還需要弄兩個函數,一個用來構造標簽,一個用來讀取標簽之間的文本。

posted on 2008-01-10 20:50 zlf 閱讀(1930) 評論(1)  編輯 收藏 引用

評論

# re: 各搜索引擎搜索結果的獲取 2008-12-01 19:44 boyeco

我們怎么用google或baidu的搜索結果生成我們自己想要的頁面哪?比如搜索元搜索的結果按我們想要的頁面從新生成一個頁面,要用get等方法從搜索出結果后的頁面的腳本里或得url嗎?
  回復  更多評論   


只有注冊用戶登錄后才能發表評論。
網站導航: 博客園   IT新聞   BlogJava   博問   Chat2DB   管理


導航

<2025年12月>
30123456
78910111213
14151617181920
21222324252627
28293031123
45678910

統計

常用鏈接

留言簿(1)

隨筆檔案

文章檔案

搜索

最新評論

  • 1.?re: 各搜索引擎搜索結果的獲取
  • 我們怎么用google或baidu的搜索結果生成我們自己想要的頁面哪?比如搜索元搜索的結果按我們想要的頁面從新生成一個頁面,要用get等方法從搜索出結果后的頁面的腳本里或得url嗎?
  • --boyeco
  • 2.?re: 序列化探討
  • 看的暈 序列化主要還是要考慮怎樣在對代碼改動最小的情況下增加對序列化的支持!~
  • --shaker(太子)
  • 3.?re: AVL樹的簡單實現
  • 評論內容較長,點擊標題查看
  • --zlf
  • 4.?re: AVL樹的簡單實現
  • 評論內容較長,點擊標題查看
  • --Minidx全文檢索

閱讀排行榜

評論排行榜

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            欧美大香线蕉线伊人久久国产精品| 女同一区二区| 欧美日韩一区二区三区四区在线观看 | 亚洲欧美日韩中文播放| 亚洲最新视频在线| 欧美午夜一区二区| 亚洲午夜未删减在线观看| 日韩视频一区二区在线观看 | 国产一区二区三区黄| 久久黄色网页| 久久久久综合网| 亚洲人成精品久久久久| 亚洲精品久久久久中文字幕欢迎你| 欧美成人自拍视频| 一区二区日韩伦理片| 一区电影在线观看| 国产日韩欧美高清免费| 美女免费视频一区| 欧美美女日韩| 欧美一区二区三区视频| 久久久久久久久久久一区| 亚洲精品乱码久久久久久久久| 亚洲人被黑人高潮完整版| 欧美午夜剧场| 蜜桃av噜噜一区| 欧美日韩中文在线| 久久精品日产第一区二区三区| 久久青草欧美一区二区三区| 亚洲精品国产拍免费91在线| 亚洲午夜一区二区三区| 在线观看亚洲视频| 在线亚洲自拍| 136国产福利精品导航网址应用| 亚洲日本aⅴ片在线观看香蕉| 国产日韩欧美不卡| 亚洲精品一区二区三区福利| 国产一区二区成人| 日韩五码在线| 亚洲欧洲精品一区| 欧美一区二区成人| 亚洲视频综合在线| 牛夜精品久久久久久久99黑人| 亚洲欧美成人网| 欧美国产日产韩国视频| 久久久久久夜精品精品免费| 欧美日韩一区二区三| 农夫在线精品视频免费观看| 国产精品免费视频xxxx| 亚洲日本理论电影| 亚洲成人资源网| 欧美亚洲午夜视频在线观看| 中文av一区特黄| 欧美gay视频激情| 免费亚洲一区| **性色生活片久久毛片| 欧美一级电影久久| 亚洲宅男天堂在线观看无病毒| 免费影视亚洲| 乱中年女人伦av一区二区| 国产乱码精品一区二区三区忘忧草| 亚洲国产视频a| 最近看过的日韩成人| 久久久精品tv| 久久综合图片| 国模一区二区三区| 欧美影院成年免费版| 久久av一区二区三区| 国产精品久久久久aaaa九色| 日韩亚洲视频| 亚洲综合首页| 国产精品香蕉在线观看| 亚洲视频福利| 欧美怡红院视频| 国产欧美亚洲日本| 小处雏高清一区二区三区| 欧美一区二区黄| 国产精品色婷婷久久58| 午夜精品久久久久久久久久久久| 午夜在线观看欧美| 国产日韩一区欧美| 久久精品欧美日韩精品| 美女爽到呻吟久久久久| 亚洲国产岛国毛片在线| 欧美freesex8一10精品| 亚洲精品自在久久| 亚洲主播在线播放| 国产婷婷成人久久av免费高清| 欧美在线观看一区| 欧美凹凸一区二区三区视频| 亚洲欧洲日本国产| 国产精品r级在线| 香蕉国产精品偷在线观看不卡| 久久久最新网址| 亚洲精品视频在线观看免费| 欧美精品日韩综合在线| 亚洲小说区图片区| 久久综合久久综合久久| 日韩一级不卡| 国产亚洲人成a一在线v站 | 999亚洲国产精| 性欧美超级视频| 怡红院精品视频在线观看极品| 欧美激情欧美激情在线五月| 一本色道久久综合亚洲精品按摩 | 欧美日韩视频一区二区| 亚洲一区制服诱惑| 欧美第十八页| 性欧美xxxx视频在线观看| 亚洲高清视频在线| 国产精品久久久久久久浪潮网站| 久久爱91午夜羞羞| 日韩视频免费在线观看| 欧美中文在线观看国产| 亚洲久久视频| 黄色欧美成人| 国产精品国产三级国产普通话99 | 亚洲区国产区| 久久久久久久999| 一区二区三区欧美视频| 亚洲成色777777在线观看影院| 欧美色视频一区| 欧美.www| 久久精品一区四区| 亚洲综合欧美日韩| 亚洲巨乳在线| 亚洲第一级黄色片| 久久中文在线| 欧美中文字幕久久| 亚洲欧美日韩天堂一区二区| 亚洲国产日日夜夜| 精品69视频一区二区三区| 国产精品日韩高清| 国产精品va在线播放我和闺蜜| 免费影视亚洲| 老鸭窝亚洲一区二区三区| 午夜久久福利| 亚洲欧美国产精品桃花| 日韩亚洲在线| 日韩西西人体444www| 亚洲日韩欧美视频一区| 免费人成精品欧美精品| 麻豆精品视频在线| 久久夜色精品亚洲噜噜国产mv| 欧美一区二区精品在线| 亚洲一区图片| 亚洲欧美一区二区三区久久| 亚洲网址在线| 亚洲综合色激情五月| 亚洲视屏一区| 亚洲欧美制服另类日韩| 在线视频亚洲| 亚洲一区二区欧美| 亚洲欧美日韩视频二区| 午夜一区二区三视频在线观看| 亚洲一区精品电影| 午夜国产精品视频| 久久久噜噜噜久久中文字幕色伊伊 | 你懂的视频欧美| 欧美黄污视频| 国产精品二区在线| 国产麻豆视频精品| 国产一区二区三区最好精华液| 国产专区综合网| 在线观看日韩一区| 日韩视频在线一区二区| 亚洲午夜女主播在线直播| 亚洲欧美一区二区视频| 久久九九99| 欧美高清在线一区| 日韩视频精品在线观看| 亚洲欧美99| 久久久噜噜噜久久中文字幕色伊伊| 久久综合综合久久综合| 欧美激情精品久久久| 欧美性久久久| 国产综合亚洲精品一区二| 亚洲激情一区二区| 亚洲在线免费视频| 久久综合伊人77777尤物| 欧美不卡高清| 亚洲一区二区视频| 久久先锋影音| 欧美午夜一区二区| 在线精品观看| 亚洲欧美日本伦理| 欧美激情成人在线| 一区二区三区成人| 久久五月婷婷丁香社区| 欧美特黄一级大片| 亚洲大胆人体视频| 亚洲欧美文学| 亚洲国产一区二区三区青草影视 | 久久成人精品视频| 亚洲国产精品尤物yw在线观看| 宅男噜噜噜66一区二区66| 浪潮色综合久久天堂| 国产美女精品人人做人人爽| 亚洲看片免费| 免费观看在线综合色| 午夜日韩激情|