對(duì)于SEO人員來(lái)說(shuō),百度的官方工具經(jīng)常用來(lái)檢查站點(diǎn)指標(biāo)是否符合預(yù)期。其中,“爬網(wǎng)診斷”是網(wǎng)絡(luò)管理員經(jīng)常使用的工具。許多站長(zhǎng)表示,在網(wǎng)站上使用“爬行診斷”時(shí),往往會(huì)有診斷失敗的跡象。那么問(wèn)題出在哪里
網(wǎng)頁(yè)爬行診斷概述
百度爬行診斷工具主要是從百度蜘蛛的角度來(lái)理解網(wǎng)站的內(nèi)容。其結(jié)果反饋表示蜘蛛對(duì)網(wǎng)站內(nèi)容的理解。一般來(lái)說(shuō),失敗網(wǎng)站的爬行診斷與百度蜘蛛爬行直接相關(guān)
網(wǎng)站“爬行診斷”失敗的原因是什么
機(jī)器人禁止Txt
如果您使用機(jī)器人阻止機(jī)器人在百度爬行網(wǎng)站Txt目錄下爬行,當(dāng)您在該目錄下生成內(nèi)容時(shí),百度很難抓取該目錄下的內(nèi)容,抓取診斷也將無(wú)法報(bào)警
網(wǎng)站訪問(wèn)速度
很多站長(zhǎng)表示,在本地測(cè)試中,我的網(wǎng)站返回了HTTP狀態(tài)碼200,但爬行診斷已經(jīng)在爬行中顯示,沒(méi)有反饋結(jié)果
由于服務(wù)器線路不同,百度蜘蛛的爬行速度可能延遲太久,這會(huì)產(chǎn)生明顯的可訪問(wèn)性,但爬行診斷會(huì)失敗
當(dāng)你遇到這個(gè)問(wèn)題時(shí),您需要定期監(jiān)控服務(wù)器的訪問(wèn)速度,并優(yōu)化網(wǎng)站的打開(kāi)速度
CDN緩存更新
我們知道CDN緩存更新需要時(shí)間。雖然您在管理平臺(tái)的后臺(tái)實(shí)時(shí)在線更新,但由于不同服務(wù)提供商的技術(shù)不對(duì)稱,往往會(huì)有一定的時(shí)間延遲,這將不可避免地導(dǎo)致網(wǎng)站爬行失敗
帶跳轉(zhuǎn)的爬網(wǎng)診斷
如果更新舊內(nèi)容并修改網(wǎng)站,并使用301或302跳轉(zhuǎn),由于配置錯(cuò)誤,會(huì)有太多重定向,這也會(huì)導(dǎo)致百度爬網(wǎng)失敗
DNS緩存服務(wù)
由于DNS緩存的存在,當(dāng)您在本地查詢URL時(shí),您可以正常訪問(wèn)它們,但除了上述所有問(wèn)題外,爬行診斷仍然失敗。因此,您需要更新本地DNS緩存或使用代理IP非常順利地訪問(wèn)審查站點(diǎn)
網(wǎng)站“爬行診斷”常見(jiàn)問(wèn)題解答:
對(duì)于百度爬行診斷工具,搜索引擎優(yōu)化顧問(wèn)被問(wèn)到了很多問(wèn)題:百度爬行診斷幫助包括哪些內(nèi)容
從目前許多SEO人員的反饋結(jié)果來(lái)看,沒(méi)有合理的數(shù)據(jù)作為支持,這可以證明捕獲診斷工具有利于百度采集,但可能會(huì)對(duì)百度快照更新產(chǎn)生一定影響。