Baiduspider抓取頻次原則及調整方法
作者：Promise.（承諾）
瀏覽：131次
發(fā)布時間：2018-04-19
分享
評論
贊0
Baiduspider根據上述網站設置的協議對站點頁面進行抓取，但是不可能做到對所有站點一視同仁，會綜合考慮站點實際情況確定一個抓取配額，每天定量抓取站點內容，即我們常說的抓取頻次。那么百度搜索引擎是根據什么指標來確定對一個網站的抓取頻次的呢，主要指標有四個：
1，網站更新頻率：更新快多來，更新慢少來，直接影響B(tài)aiduspider的來訪頻率
2，網站更新質量：更新頻率提高了，僅僅是吸引了Baiduspier的注意，Baiduspider對質量是有嚴格要求的，如果網站每天更新出的大量內容都被Baiduspider判定為低質頁面，依然沒有意義。
3，連通度：網站應該安全穩(wěn)定、對Baiduspider保持暢通，經常給Baiduspider吃閉門羹可不是好事情
4，站點評價：百度搜索引擎對每個站點都會有一個評價，且這個評價會根據站點情況不斷變化，是百度搜索引擎對站點的一個基礎打分（絕非外界所說的百度權重），是百度內部一個非常機密的數據。站點評級從不獨立使用，會配合其它因子和閾值一起共同影響對網站的抓取和排序。
抓取頻次間接決定著網站有多少頁面有可能被建庫收錄，如此重要的數值如果不符合站長預期該如何調整呢？百度站長平臺提供了抓取頻次工具，并已完成多次升級。該工具除了提供抓取統計數據外，還提供“頻次調整”功能，站長根據實際情況向百度站長平臺提出希望Baiduspider增加來訪或減少來訪的請求，工具會根據站長的意愿和實際情況進行調整。
猜你喜歡
評論(0人參與，0條評論)
發(fā)布評論
最新評論