百度蜘蛛抓取頻次準則及調(diào)整辦法
分享
評論
贊0
百度蜘蛛是根據(jù)網(wǎng)站設置的協(xié)議對站點頁面進行抓取，但是不可能做到對所有站點一視同仁，會綜合考慮站點實際情況確定一個抓取配額，每天定量抓取站點內(nèi)容，即我們常說的抓取頻次。那么百度搜索引擎是根據(jù)什么指標來確定對一個網(wǎng)站的抓取頻次的呢，主要指標有四個：
1，網(wǎng)站更新頻率：你網(wǎng)站更新的速度快那么蜘蛛就會經(jīng)常來抓取，反之如果更新的慢蜘蛛就會來的少。所以網(wǎng)站更新頻率直接影響百度蜘蛛來訪頻率。
2，網(wǎng)站更新質(zhì)量：網(wǎng)站更新頻率提高了還不行，這僅僅是提高蜘蛛的來訪次數(shù)并不代表頁面就會被收錄，百度蜘蛛對頁面質(zhì)量也是有嚴格要求的，如果你的網(wǎng)站每天更新的內(nèi)容被蜘蛛判定為垃圾內(nèi)容或者質(zhì)量不高，那也是沒有意義的。
3，連通度：網(wǎng)站應該安全穩(wěn)定、保持暢通，能夠使蜘蛛能夠正常抓取，經(jīng)常給Baiduspider吃閉門羹可不是好事情。
4，站點評價：百度搜索引擎對每個站點都會有一個評價，這個評價是根據(jù)很多因素來決定的，而且這個評價會根據(jù)網(wǎng)站的情況不斷變化，是百度對站點的一個基礎打分（絕非外界所說的百度權(quán)重），是百度內(nèi)部一個非常機密的數(shù)據(jù)。站點評級從不獨立使用，會配合其它因子和閾值一起共同影響對網(wǎng)站的抓取和排序。
抓取頻次間接決定著網(wǎng)站有多少頁面有可能被建庫收錄，抓取頻次如果不符合站長預期該如何調(diào)整呢？百度站長平臺提供了抓取頻次工具.該工具除了提供抓取統(tǒng)計數(shù)據(jù)外，還提供“頻次調(diào)整”功能，站長根據(jù)實際情況向百度站長平臺提出希望Baiduspider增加來訪或減少來訪的請求，工具會根據(jù)站長的意愿和實際情況進行調(diào)整。
猜你喜歡
評論(0人參與，0條評論)
發(fā)布評論
最新評論