如何快速提高網站排名?深入瞭解蜘蛛喜好,纔能有效優化網站
VIEW CONTENTS
SEO服務網 SEO優化 查看內容

如何快速提高網站排名?深入瞭解蜘蛛喜好,纔能有效優化網站

2017-12-18 10:28| 發佈者: SEO優化公司| 查看: 838| 評論: 0
摘要: 掌握蜘蛛爬取的原理可以讓我們的文章更容易被收錄,簡單說一下蜘蛛是如何爬取內容的。蜘蛛先去抓取百度白名單的網站或者一些信任度非常高的站點和頁面(例如:一些高權重網站和網站的首頁),在抓取這些網頁的內容時 ...

掌握蜘蛛爬取的原理可以讓我們的文章更容易被收錄,簡單說一下蜘蛛是如何爬取內容的。

蜘蛛先去抓取百度白名單的網站或者一些信任度非常高的站點和頁面(例如:一些高權重網站和網站的首頁),在抓取這些網頁的內容時發現一些指向另外一些一些頁面的鏈接。蜘蛛會把這些鏈接保存在自己的數據庫裏面,然後再根據抓取順序依次來抓取這些網頁。

1、蜘蛛抓取網頁的規則:
對於蜘蛛說網頁權重越高、信用度越高抓取越頻繁,例如網站的首頁和內頁。蜘蛛先抓取網站的首頁,因爲首頁權重更高,並且大部分的鏈接都是指向首頁。然後通過首頁抓取網站的內頁,並不是所有內頁蜘蛛都會去抓取。

搜索引擎認爲對於一般的中小型站點,3層足夠承受所有的內容了,所以蜘蛛經常抓取的內容是前三層,而超過三層的內容蜘蛛認爲那些內容並不重要,所以不經常爬取。

2、如何看蜘蛛的抓取?
通過iis日誌可以看蜘蛛爬取了哪些內容,iis日誌有百度蜘蛛、谷歌蜘蛛等。從iis日誌裏賣弄分析得出蜘蛛的類型、抓取時間、抓取的頁面、抓取內容的大小以及返回的頁面代碼,200代表抓取順利。


鮮花

握手

雷人

路過

雞蛋

最新評論

讓SEO服務更專業

  • 拓客網絡服務有限公司
  • 客服電話:13410526041
  • 深圳市南山區西麗硅谷
    大學城創業園C區117

精彩SEO教程,快速SEO查詢

關注我們

Copyright SEO優化  Powered by©拓客網絡優化公司  技術支持:SEO優化服務公司