搜索引擎爬蟲為何會不訪問你的網站
作者：淺色記憶
瀏覽：101次
發布時間：2017-07-12
分享
評論
贊0
站點死鏈接太多.咱們能想象,爬蟲很開心的到我們的站點來,著手鏈接的查詢,認為有好的東西,可是卻是一些不好的的鏈接等著她,1次、2次、3次,每次全像這樣的情況,因此她生氣了,就不會再來我們的站點了.
搜索引擎爬蟲為何會不訪問你的網站
好多的站點都有著死鏈接,只要咱們可以很好地看到還有刪除就沒有問題了,我們能夠使用強大的xenu,也能夠觀看我們的站點日志,看到返回404狀態碼的全部殺掉.
外鏈以及nofollow
之所以爬蟲可以很好地查到到在訪問我們的站點,是因為別的站點上有著我們站點的鏈接.想爬蟲更加頻繁的來到,在建設外鏈的時候就需要思考外聯的權重,收錄數越高、PR值越大,快照更新越迅速的站點權重就越大.
此外還有一些不好的站長在做友鏈得時候,會故意設置nofollow,這樣的外鏈在爬蟲眼中是沒有用的,假如我們的站點的外鏈有這樣的情況,就要及時的刪除.
站點邏輯構造復雜
好的站點邏輯構造需要是扁平狀的樹形構造,通常是說,爬蟲經過主頁訪問,可以達到每一個欄目網頁,經過欄目網頁又可以達到每一個文章頁,這個次數需要被限制在三次以內.假如站點層次很多,站點權重又不大的話,爬蟲就沒興趣來一層層的查詢了.
站點地圖錯誤
站點地圖是搜索引擎全面認同站點的好工具,對爬蟲來說,站點地圖就像比花名冊,不錯的站點地圖可以使爬蟲有指向性的訪問站點里面的每一個網頁.因此,咱們在定制站點地圖時就應該細心地做事了.
猜你喜歡
評論(0人參與，0條評論)
發布評論
最新評論