網(wǎng)站一直不收錄怎么回事？跟這個關(guān)系很大！官方已經(jīng)實錘

你的網(wǎng)站抓取頻次為什么那么低？網(wǎng)站一直不收錄怎么回事？想必很多站長開發(fā)者面對這樣的問題就開始使出自己的大招，比如301引蜘蛛，或者大量更新文章，那么這樣做是對還是錯？今天小編就來重點解讀下網(wǎng)站收錄以及網(wǎng)站抓取頻次的相關(guān)問題，值得注意的是，以下觀點為官方解讀觀點，所以可信度99.99%。

了解網(wǎng)站抓取之前，我們首先先了解下百度爬蟲抓取原理。

一、百度蜘蛛是如何工作的？

百度蜘蛛程序運行的流程是怎樣的呢？百度抓取器（蜘蛛程序）對你網(wǎng)站服務(wù)器進(jìn)行交互，拿到首頁后對你的頁面進(jìn)行理解，這個理解包含站點類型、價值的計算，此外會把網(wǎng)站所有超鏈接提取出來，這些提取出的鏈接稱為后鏈，這個后鏈就是下一輪抓取的集合，然后等到下一輪抓取的時候，會從上一輪提取的后鏈中選擇需要抓的數(shù)據(jù)中繼續(xù)和網(wǎng)站交互，拿到頁面進(jìn)行提煉，形成一層層抓取循環(huán)和環(huán)路，對于新站來講，經(jīng)過幾輪抓取后，基本可以把整個頁面抓取完，之后就是抓取首頁和老頁面發(fā)現(xiàn)增量內(nèi)容，保證新資源可以收錄進(jìn)來。

我們舉個例子：

比如站點A,超鏈接有www.test.com/1.html、www.test.com/2.html、www.test.com/3.html..

那么第一次抓取鏈接是1.html，那么2.html、3.html...就屬于后鏈，第二次抓取鏈接就從2、3、4..等抓取，直到抓完整個超文本鏈接。

二、蜘蛛抓取對URL有何規(guī)范？

url相當(dāng)于網(wǎng)站的門牌號，所以百度官方介紹的url其實只有兩點：主流、簡單。我們可以拿實際例子做說明：

例：www.test.com/zhishi/1.html

例：www.test.com/chengyu/seo_123.html

實際工作中，有不少從業(yè)者在對url進(jìn)行處理時，認(rèn)為html前綴是隨機就可以吸引蜘蛛抓取，其實這個觀點是錯誤的，官方并沒有說html前綴是英文要比id更有優(yōu)勢，但在url設(shè)計中，更傾向于目錄結(jié)構(gòu)的有利于蜘蛛抓取。所以建議大家在做URL的時候，保持URL規(guī)范性、簡單性。

三、如何設(shè)計網(wǎng)站布局有利蜘蛛抓取？

其實大部分站點在設(shè)計初期都對蜘蛛不友好，也就是說，很多開發(fā)者在選擇模板的時候，并沒有考慮到模板的層級結(jié)構(gòu)，常規(guī)的層級結(jié)構(gòu)是這樣的：

所以盡量選擇模板的時候，依照這個布局選擇模板或更改為這個層級結(jié)構(gòu)，另外頁面布局隨機url，是有利于蜘蛛爬取的，這個已經(jīng)在多個站點測試有效。

四、抓取頻次與什么有關(guān)系？

事實上我之前也因為這個問題咨詢過百度，百度給的結(jié)果是抓取頻次和頁面質(zhì)量和用戶需求有關(guān)系，而這次百度開發(fā)工程師直接說了抓取跟內(nèi)容質(zhì)量有關(guān)系，另外還提到了一點，新站如果內(nèi)容質(zhì)量高，經(jīng)過一段時間，抓取會有提升，而老站則是通過更新頻率提升抓取頻次，換句話說，以前行業(yè)內(nèi)提到的新站上線的時候，發(fā)布一些原創(chuàng)內(nèi)容，然后過一個階段后，定時定量采集內(nèi)容也可以提升抓取頻次，這樣做是有道理的。

所以，你應(yīng)該搞明白了一點，想提升抓取頻次，就好好整內(nèi)容吧，過一個階段后（1個月后）可以定時定量更新內(nèi)容了。

最后，想談?wù)勱P(guān)于做新站的時候遇到的一些問題，很多人做新站的時候，認(rèn)為老域名比新域名有優(yōu)勢，其實這是個誤區(qū)，在初期可能有效果，但長久來看，老域名跟新域名的機會是平等的。另外我之前說的，現(xiàn)在百度對新站判斷是基于ICP備案數(shù)據(jù)，事實上這個數(shù)據(jù)很好拿到，這點已經(jīng)被百度實錘了，百度判斷新站的時候，就考察的是站內(nèi)容和ICP備案數(shù)據(jù)，那么做新站的開發(fā)者可以開心一波了，事實上百度對新站是有扶持的，這個扶持不確定是流量扶持還是抓取頻次的扶持，但有扶持是百度確認(rèn)的。（為什么我覺得新站也還是不容易起來？）

另外，關(guān)于域名領(lǐng)域的問題，比如這個域名領(lǐng)域是科技，后期改版成娛樂內(nèi)容，事實上，百度會懲罰站點的，還不如來個新域名效果來的快。

以上內(nèi)容全部來源于最新一期站長資源平臺直播內(nèi)容分析結(jié)果，如不認(rèn)同其中內(nèi)容，歡迎看完直播回放后深度交流，我們歡迎百花齊放，百家爭鳴。