不少站點會遇到收錄逐步變少的情況,本文梳理常見誘因,從抓取、內(nèi)容、站點權(quán)限、算法變動等維度排查問題。對于網(wǎng)絡(luò)推廣行業(yè)來說很明確,做關(guān)鍵詞排名優(yōu)化,網(wǎng)站指數(shù)的漲跌都很正?!,F(xiàn)在做關(guān)鍵詞優(yōu)化的網(wǎng)站越來越多,所以很多網(wǎng)站都是不正常的,那么導(dǎo)致網(wǎng)站收錄量逐漸減少的因素是什么呢?

確保它們具有正確的200http頭狀態(tài)。服務(wù)器是否經(jīng)?;蜷L期停機?域名最近過期了嗎?
您可以使用免費的HTTP頭狀態(tài)檢查工具來確定是否存在正確的狀態(tài)。對于大型站點,典型的爬行工具(如Xenu、deepcrawl、screeningfrom或body)可以對其進行測試。
正確的報頭狀態(tài)是200。有時可能會有3xx(301除外)、4xx或5xx錯誤-這些對于正在索引的URL來說不是好消息。
有時,更改CMS、后端編程或服務(wù)器設(shè)置可能會導(dǎo)致更改域、子域或文件夾,因此可能會更改網(wǎng)站的URL。
搜索引擎可能會記住舊的url,但如果沒有正確重定向,許多頁面可能會被取消索引。解決方案
您仍然希望能夠以某種方式或形式訪問舊站點的備份,以記下所有舊URL,以便可以將301重定向映射到相應(yīng)的URL。
修復(fù)重復(fù)內(nèi)容通常涉及實現(xiàn)規(guī)范標簽、301重定向、Noindex元標簽或robots和TXT中不允許的。所有這些都可能導(dǎo)致索引url的減少。這是一個減少索引頁數(shù)量的例子。
因為這對你的網(wǎng)站有好處,你需要做的就是仔細檢查,這盡量是索引頁減少的原因,而不是其他任何原因。
由于較高帶寬的相關(guān)成本,一些服務(wù)器有帶寬限制。這些服務(wù)器可能需要升級。
有時,問題與硬件有關(guān),可以通過升級硬件處理或內(nèi)存限制來解決。
當訪問者以一定速度訪問過多頁面時,某些站點會阻止IP地址。此設(shè)置是避免任何DDoS黑客嘗試的嚴格方法,但它也可能對您的網(wǎng)站產(chǎn)生負面影響。
通常,這是在網(wǎng)頁的第二個設(shè)置下監(jiān)視的。如果閾值太低,正常搜索引擎漫游者爬網(wǎng)可能會達到閾值,漫游者無法正確爬網(wǎng)站點。
如果這是服務(wù)器帶寬限制,則可能是升級服務(wù)的適當時間。
如果這是服務(wù)器處理/內(nèi)存問題,除了升級硬件外,請仔細檢查是否有任何類型的服務(wù)器緩存技術(shù),這將降低服務(wù)器的壓力。
如果安裝了防DDoS軟件,請放松設(shè)置或?qū)俣菳OT放在白名單上,以免隨時被屏蔽。但要小心,有一些假百度機器人。確保百度蜘蛛被正確檢測。蜘蛛探測也有類似的過程。
