<ul id="g60s4"><pre id="g60s4"></pre></ul>
<strong id="g60s4"><nav id="g60s4"></nav></strong>
<ul id="g60s4"></ul>
  • <tr id="g60s4"></tr>
  • 
    
  • 或者

    淺談所謂的提權蜘蛛和降權蜘蛛

    作者:徐小樣 瀏覽:1228 發布時間:2017-04-19
    編輯 分享 評論 0

    之前在《SEO深度解析》中有看到過降權蜘蛛和提權蜘蛛,即如果抓取你網站的蜘蛛IP是降權蜘蛛的IP,那你的網站就是被降權了;反之,抓取你網站的蜘蛛IP為提權蜘蛛的IP,那你的網站權重較高。

    該書作者痞子瑞對此問題也表示不能肯定,然而百度LEE團隊官方曾經在百度站長平臺公開回答過該問題,并明確的否認了。當然,百度還不承認有百度權重,然而確實有,呵呵。

    官方的答復不可不信,也不可全信。今天又看《走進搜索引擎》,發現可能真的有所謂的提權蜘蛛和降權蜘蛛。

    搜索引擎工作過程中,在抓取環節,有一個重要性網頁優先抓取的策略,其實很好理解,搜索引擎需要抓取的新網頁和每天重訪的網頁規模都是巨大的,為保證更重要的網頁能夠優先抓取,使得在時效性和權威性上獲得滿意的效果,就需要對重要性網頁進行優先抓取。(這不就是百度權重高的網站嗎?)

    同時,在抓取環節,還有一個抓取提速策略,通過增加同時工作的爬蟲(即蜘蛛)數量。在多個蜘蛛抓取的情況下,需要按照域名來分解任務,使特定的爬蟲抓取特定的域名下的網頁。

    在域名分配的同時,要保證每個蜘蛛的工作量相等;如默認正常網站的規模為普通水準,抓取工作量一般;而重要性高的網站,通常其網站規模龐大,內容豐富,抓取工作量較大;但是網站被降權的網站通常使用大量垃圾內容作弊來獲取排名,其網站規模肯定也較大,抓取工作量也較大。

    假設:1*重要性網站=2*普通網站=1*作弊網站,那么蜘蛛抓取工作量體系結構類似于:

    spider1抓取重要性高的域名A

    spider2抓取普通網站B和C

    spider3抓取作弊網站的域名D

    則spider1為提權蜘蛛,spider3為降權蜘蛛。

    因為蜘蛛不光要抓取,還要返回抓取的網頁結果和新的URL,而URL的重要度會影響URL的抓取優先度,所以高權重網站上的URL是不能和普通網站、作弊網站上的URL放在一起的,因此為提高蜘蛛的工作效率,同一個蜘蛛肯定不會同時抓取不同重要度的網站。

    至于考核蜘蛛(即沙盒蜘蛛)、劣質文章蜘蛛等什么亂七八糟的蜘蛛,應該是不存在的。

    谷歌的沙盒期是會對新網站正常抓取,只是不會放出或者不會給予好的排名罷了,不關人家蜘蛛的事情。

    至于劣質文章蜘蛛,蜘蛛是按照域名來劃分工作,那可能就是降權了,要不就是想多了。

    對了,如果百度真的存在提權蜘蛛和降權蜘蛛的話,谷歌應該也有,畢竟搜索引擎工作原理是一樣的。


    評論(0人參與,0條評論)

    發布評論

    最新評論

    詞條統計

  • 瀏覽次數:1228
  • 編輯次數:0次歷史版本
  • 最近更新:2017-04-19
  • 創建者:徐小樣
  • 相關詞條

    相關問答

    相關百科

    相關資訊

    欧美日韩色另类综合| 精品久久久久久中文字幕无码| 国产综合色产在线精品| 亚洲欧洲日韩在线电影| 国产精品亚洲色图| 亚洲youwu永久无码精品| 网友自拍区视频精品| 国产精品福利一区二区久久| 亚洲精品视频在线观看视频| 一本一道久久精品综合| 国产精品三级在线观看无码| 国产精品一区二区av| 99re国产精品视频首页| 久久久久久一区国产精品| 久久97久久97精品免视看秋霞| 国产精品女人呻吟在线观看| 国产成人精品a视频一区| 亚洲精品国产精品乱码不卡| 亚洲?V无码乱码国产精品| 久久综合精品国产一区二区三区 | 日韩午夜免费视频| 在线观看亚洲AV日韩AV| 亚洲欧洲日韩国产| 日韩精品亚洲专区在线影视 | 国产亚洲精品美女久久久| 日韩精品无码免费专区午夜不卡| 国产综合色产在线精品| 中文字幕久久精品| 精品久久久久久国产| 国产综合色在线精品| 青草青草久热精品视频在线网站| 国产精品久久久久久吹潮| 久久亚洲精品成人777大小说| 无码日韩精品一区二区三区免费| 亚洲午夜精品久久久久久人妖| 久久久国产精品亚洲一区| 久久久久久久精品成人热色戒| 国产成人精品怡红院| 人妻少妇看A偷人无码精品视频| 久久精品国产亚洲AV| 国产精品无码av片在线观看播|