網站每天被蜘蛛爬N遍但為何收錄很少
分享
評論
贊0
聲明：由于站長提問的問題過于簡單或不工整，我這邊有做文字上的處理，但原意都不變!
以下內容為第11期問答實錄：
問題簡寫一：網站每天都被蜘蛛爬N遍，收錄的網頁為何只有一兩篇?
問：黃老師你好，我的企業網站上線有一段時間了，原創文章每天也都在堅持更新，但就是不怎么收錄，后來我分析了一下網站日志，發現百度爬蟲每天都來爬N遍。我就郁悶了，為什么蜘蛛每天都來爬行，我的內容頁收錄的這么少呢?是不是進沙盒了?還是內容質量不行?
答：一般來說新站都會遇到這樣的問題，而且很多SEO人員都遇到過，那種焦急的狀態我也是很理解的。通常我都會讓他們去觀察，如果觀察一段時間且很長一段時間內都是這樣的話，那可能是你的網站內容存在問題。無論蜘蛛抓你千百遍都不怎么收錄，這就說明你網站的內容不值得被索引。其實很多權重高的網站被降權了也會出現這樣的情況。所以，建議你從內容上做檢查。
問題簡寫二：網頁被robots了，為什么還會被百度收錄?
問：黃忠老師，這個問題困惑我很久了，為什么我網站的網頁被robots屏蔽了之后，我從網站日志分析后還會能看到被百度抓取和收錄呢?不是說屏蔽了以后就不會被抓取和收錄了嗎?這些頁面都是我們老板千叮萬囑不讓展現在百度的，現在都不知道怎么交差了，求解釋。
答：我經常遇到這樣的情況，很多人都來問我：“為啥屏蔽了的頁面還被抓取?”這里我簡單的說下吧，一般有兩種情況：
第一種是：對已經收錄的網頁使用robots屏蔽，老網頁按照robots規則的刪除時間會很長，這個時候可能會造成百度沒有遵守robots規則。
第二種情況是：如果你屏蔽的頁面或欄目存在大量的外鏈，那么這個網頁或欄目的URL會被百度收錄，但內容不會被百度索引，一般這樣的多見于首頁域名。當然，如果你連URL都不想被收錄，可以針對蜘蛛返回404即可。
問題簡寫三：B2B網站上下架的產品返回404還是200狀態碼?
問：黃老師，我們B2B網站上很多產品都等待下架，還有很多用戶自主刪除的產品頁面，我想返回404錯誤頁面，但是數量太多，怕百度認為我網站上存在大量的死鏈。如果返回200，怕欺騙搜索引擎，所以，現在我也不知道怎么辦才好，想讓黃老師給個建議。
答：這個是黃忠SEO兄弟VIP圈子里的成員提問的問題，我給收錄進來了。我簡單的說下這個解決方法：建議為產品下降的頁面返回404狀態碼，不要返回200狀態碼。一般來說，只要正確的返回404是對網站沒有任何影響的，還可以減少蜘蛛抓爬給服務器造成的負擔。如果死鏈較多，我們可以讓技術設計一個自動生成死鏈地圖的程序，任何刪除行為都自動把鏈接寫到指定鏈接文件里去，然后在百度站長平臺提交死鏈即可。
另外，商城網站產品下架其實這個是最常用的。
問題簡寫四：還沒有做好的頁面已經解析域名了，是做404還是503?
問：我們這邊的技術經常做一些新頁面的建設，每次整的頁面在開發的時候就被百度收錄了，弄的我很無語的。我想問下是給他們做404還是503?哪個更好一些?
答：一個建議，盡量不要使用404狀態碼給為創建好的頁面做返回，能用503的建立用503，這樣可以讓蜘蛛更好的去識別它。其他的沒什么建議了。
問題簡寫五：現在外鏈還重要嗎?企業網站該怎么做有效性的外鏈?
問：黃忠老師，很多都說百度現在不重視網站外鏈建設了，不知道是不是真的，搞的我們公司的企業網站都沒法做外鏈了，現在網站排名也停滯不前了。另外，在問一個小白的問題：企業網站該怎么做有效性的外鏈?求指導。
答：百度搜索引擎已經降低了外鏈的重視程度，但外鏈建設還是需要繼續做的，只是質量的好壞決定了外鏈對你網站的重要程度。而企業網站怎么做外鏈呢?我可以簡單的說下，希望對你有幫助：
猜你喜歡
評論(0人參與，0條評論)
發布評論
最新評論