• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            sunrise

            每天不斷學習,才能不斷提升自己。

              C++博客 :: 首頁 :: 新隨筆 :: 聯系 :: 聚合  :: 管理 ::
              64 隨筆 :: 0 文章 :: 92 評論 :: 0 Trackbacks
            一.首先講一下統一資源定位符,簡單的Web應用被稱為URL(統一資源定位器,Uniform Resource Locator)的web地址。URL是大型標識符URI(統一資源標識,Uniform Resource Identifier)的一部分。
            網絡定位元素:
            1.部件:描述
            2.user:登錄名
            3.password:用戶的密碼
            4.host:web服務器運行的機器名或地址
            5.port:端口號
            二.urllib2模塊
            urllib2是python的一個獲取url(Uniform Resource Locators,統一資源定址器)的模塊。它用urlopen函數的形式提供了一個非常簡潔的接口。這使得用各種各樣的協議獲取url成為可能。它同時 也提供了一個稍微復雜的接口來處理常見的狀況-如基本的認證,cookies,代理,等等。這些都是由叫做opener和handler的對象來處理的。
            import urllib2  
            response = urllib2.urlopen('http://python.org/')  
            html = response.read() 
            三.下面是一個通過訪問yago的提供的接口來統計wiki中數據在yago中的覆蓋率實例
            def coveragerate(infile,outfile):
              rfile = open(infile,'r')
              wfile = open(outfile,'wa+')
              unfindcount = 0.0
              while(1):
                line = rfile.readline()
                tmpline = line
                if not line:
                  break
                line = line.split(' ')
                URL = 'https://d5gate.ag5.mpi-sb.mpg.de/webyagospotlx/WebInterface?passedQuery=I%3A0%09S%3A'
                for i in range(len(line)):
                  if i == 0:
                    URL += line[i].strip()
                  else:
                    URL += '%20' + line[i].strip()
                URL += '%3B'
                print URL
                req = urllib2.Request(URL)
                try:
                  response = urllib2.urlopen(req)
                except URLError,e:
                  print e.reason
                html = response.read().split('\n')
                for i in range(len(html)):
                  if '</div><h2>Results</h2>There were no results.<P>' in html:
                    unfindcount += 1.0
                    wfile.write(tmpline.strip() + ' Flase'+'\n')
                    print 'run'
                    break
                  else:
                    wfile.write(tmpline.strip() + ' True'+'\n')
                    print 'run'
                    break
              covrate = 1.0 - (unfindcount/len(html))
              wfile(covrate)
              wfile.close()
              rfile.close()

            通過觀察yago在進行查詢的時候URL的變化規則,來補全URL,在進行訪問就可以獲得該頁面的html源碼。最后通過分析源碼,來判斷是否被查詢到,最后在統計一下能夠被覆蓋的數據即可。


            posted on 2012-09-13 17:05 SunRise_at 閱讀(1999) 評論(0)  編輯 收藏 引用 所屬分類: 可愛的python
            久久精品亚洲福利| 久久精品中文字幕久久| 国产精品久久久久乳精品爆| 一本伊大人香蕉久久网手机| 99精品久久久久久久婷婷| 久久久久亚洲av成人无码电影 | 国产精品丝袜久久久久久不卡| 曰曰摸天天摸人人看久久久| 国产2021久久精品| 久久人妻AV中文字幕| 日韩精品久久久久久免费| 91久久香蕉国产熟女线看| 精品国产热久久久福利| 午夜精品久久久内射近拍高清 | 国产高潮国产高潮久久久| 色偷偷久久一区二区三区| 国产精品伦理久久久久久| 久久91精品国产91| 久久er热视频在这里精品| 久久亚洲AV成人无码软件| 99久久精品国产毛片| 久久久精品国产免大香伊| 国内精品久久久久久久coent| 亚洲精品乱码久久久久久按摩| 久久国产精品波多野结衣AV| 好久久免费视频高清| 国产A级毛片久久久精品毛片| 国产三级精品久久| 亚洲国产精品久久久久网站| 欧美大香线蕉线伊人久久| 精品久久久久久久久免费影院| 久久不见久久见免费影院www日本| 久久久久亚洲AV成人片| 亚洲精品国产字幕久久不卡| 欧美日韩精品久久免费| 国内精品久久久久影院老司| 久久乐国产精品亚洲综合| 久久无码AV中文出轨人妻| 久久乐国产精品亚洲综合| 久久综合视频网站| 性欧美大战久久久久久久|