專業(yè)網絡推廣公司教你怎么排查網站參數頁面抓取失敗問題

今天網絡推廣公司小編要和大家聊的是百度在抓取網站站點頁面出現有限抓取的問題，這個問題表現形態(tài)為php頁面是能夠被百度正常索引的，但是帶有參數的頁面卻每次都抓取失敗，注意是抓取失敗。

抓取失敗也就是說首先搜索引擎是能夠正常爬取到這些內容的，但是卻因為部分原因導致索引失敗。這個問題主要出現在以論壇、商城為主的動態(tài)網站。

其實出現這個問題后主要的解決手段就是排查、測試，尋找出現錯誤的原因。下面是網絡推廣公司小編整理的檢查方向。

A：重啟網站服務器

首先建議可以嘗試重新啟動服務器運行，測試是否是因為服務器受壓過載導致的抓取失敗。如果在服務器重啟過后抓取成功就說明問題出現在服務器本身，反則重新查找問題。

B：關閉CDN服務器

CDN服務器翻譯過來就是內容分發(fā)網絡，使用的目的是用于解決用戶網絡訪問時的“排隊”問題。在標準網絡服務中，用戶訪問延時是比較常見的事情，這也是使用CDN服務器的目的。而在使用中可能因為操作不當與搜索引擎的規(guī)則相對沖突，所以建議可以關閉嘗試看看能否解決問題。

C：robots協議檢查

最烏龍的事情還真有可能會發(fā)生哦，編寫robots協議的目的就是告訴搜索引擎有哪些內容是不可抓取的，如果抓取失敗的鏈接是屬于robots協議范圍的那這屬于正常的情況，所以這個也是一個要重點檢查的方向。

D：查看網站根目錄

做網站也要做好安全防護，以方有黑客在根目錄安裝后門程序對網站內容、排名、展示等出現惡意行為。