如何解決百度spider無法抓取的問題？
Shanks 提問于 1年 之前
zac您好，網(wǎng)站能夠正常訪問，但是無法被百度蜘蛛抓取，做百度推廣創(chuàng)意審核老是被拒，顯示落地頁無法訪問，求支持，謝謝！
1 個回答
Zac 管理員 回答于 1年 之前
從描述和抓圖看，基本可以肯定是服務(wù)器設(shè)置技術(shù)問題。這種問題作為用戶訪問網(wǎng)站是看不出源頭的，只能技術(shù)人員仔細查服務(wù)器設(shè)置和網(wǎng)站程序。
比如，檢查服務(wù)器或程序的什么地方是否屏蔽了百度蜘蛛IP或用戶代理？
檢查服務(wù)器原始日志，看看報錯到底是什么？是4XX還是5XX？還是壓根兒請求被拒絕？百度資源平臺抓取診斷部分顯示的是什么報錯？
網(wǎng)站程序?qū)τ脩艉退阉饕嬷┲胧欠褡霾煌幚?？為什么要做不同處理？我訪問網(wǎng)站時是被轉(zhuǎn)向到另一個域名的，但從抓圖看，百度蜘蛛并沒有檢測到轉(zhuǎn)向，所以大概率服務(wù)器端針對不同訪問設(shè)備做了不同處理，做了什么不同處理，只有程序員才能查看了。
來源：SEO每天一貼 Zac 昝輝
Public @ 2012-07-11 15:54:18
