第一可能是：  robots.txt沒(méi)有設置好做好，導致蜘蛛大量抓取一些內部的沒(méi)用的頁(yè)面，包括以及一些重復頁(yè)面。第二可能是    網(wǎng)站的過(guò)度優(yōu)化，百度蜘蛛對網(wǎng)站的過(guò)度優(yōu)化是很敏感的，它喜歡自然的東西，刻意優(yōu)化會(huì )造成讓它反感甚至有作弊嫌疑，當你的網(wǎng)站有作弊嫌疑的時(shí)候，蜘蛛大軍就會(huì )大量造訪(fǎng)你的網(wǎng)站，每一個(gè)蜘蛛的分工都不同，其目的就是在你的網(wǎng)站上找出充分的證據證明你是作弊的，它會(huì )把各種算法通過(guò)蜘蛛集中放到你的網(wǎng)站上去驗證，能不能躲過(guò)此劫，就看你是不是真的作弊了。而也有可能是   網(wǎng)站結構的不合理性導致蜘蛛進(jìn)入循環(huán)黑洞，爬取不順暢。同樣抓取頻次太低也是不正常的，有以下幾種可能：

第一點(diǎn)：長(cháng)期不更新內容，更新內容不規律，三天打漁兩天曬網(wǎng)。

第二點(diǎn)：新站點(diǎn)，新站點(diǎn)的規模差距還是挺大的，況且還沒(méi)走出百度的沙盒期，只有網(wǎng)站做了比較長(cháng)的一段時(shí)間，贏(yíng)得了搜索引擎的信任才會(huì )提高對你的網(wǎng)站的訪(fǎng)問(wèn)次數。

現在，深圳白起SEO，為大家分享一下百度蜘蛛更新時(shí)間的規律

大家通過(guò)看服務(wù)器日志就可以發(fā)現，其實(shí)百度蜘蛛時(shí)刻都是在抓取爬行的，并且抓取的頻率和數量都非常大。個(gè)人認為站內文章更新時(shí)間最好選擇在每天早上10：00—11：00左右。早發(fā)文章有一個(gè)比較大的好處就是，如果有人發(fā)布跟你文章類(lèi)似且網(wǎng)站權重相同，或許你能先人一步收錄。如果每天十點(diǎn)你都有新的高質(zhì)量文章，時(shí)間一久百度蜘蛛也就會(huì )固定這個(gè)時(shí)間來(lái)爬行，這也就是養蜘蛛的說(shuō)法。

接下來(lái)說(shuō)一說(shuō)星期一到星期日的安排，我們可以利用星期一的時(shí)間好好為網(wǎng)站的收錄做準備。添加一些文章增加一些友情連接或者再做一些外鏈，等到星期三的時(shí)候會(huì )對排名有很大的好處。如果星期一沒(méi)有更新，星期二還是可以發(fā)布文章的。到了星期三的凌晨1：00—4：00左右百度會(huì )更新一下。屆時(shí)可能你的網(wǎng)站關(guān)鍵詞排名升的很高，也可能也會(huì )百名開(kāi)外。無(wú)論你的排名升了或者降了，都不要因此而興奮或者氣餒。因為星期三也許是百度服務(wù)器調整，到了星期四的凌晨1：00—4：00的時(shí)候百度會(huì )把星期三的浮動(dòng)穩定住并且基本不會(huì )再有浮動(dòng)了。

所以每周四的大更新也正是因此而來(lái)。如果這一天排名掉得厲害，那只能下星期繼續努力。當然也不排除有些特殊情況出現，會(huì )讓人丈二和尚摸不著(zhù)頭腦。星期五跟星期一和星期二是一個(gè)道理，因為星期四的更新已經(jīng)基本上定型了，可以更新下文章，再次等待星期六的更新。大家不要以為這一周就這么順利的過(guò)去了。據我所知星期六這天也會(huì )有更新。到了星期日的話(huà)，目前來(lái)說(shuō)我基本上就不會(huì )去弄網(wǎng)站了。每星期的小更新基本就是星期四跟星期六，更新時(shí)間在凌晨四點(diǎn)。不過(guò)目前來(lái)看也有聲音說(shuō)每天都會(huì )有小更新，只不過(guò)影響不是很大。每個(gè)月的大更新有一到兩次，不是十一號就是二十六號，最重要的就是二十六號。更新幅度比較大，K站也是最多的，也可能每個(gè)月的這兩天都更新。

百度蜘蛛抓取頻次原則及調整方法

百度蜘蛛會(huì )根據網(wǎng)站設置的協(xié)議對站點(diǎn)頁(yè)面進(jìn)行抓取，但是不可能做到對所有站點(diǎn)一視同仁，會(huì )綜合考慮站點(diǎn)實(shí)際情況確定一個(gè)抓取配額，每天定量抓取站點(diǎn)內容，即我們常說(shuō)的抓取頻次。那么百度搜索引擎是根據什么指標來(lái)確定對一個(gè)網(wǎng)站的抓取頻次的呢，主要指標有四個(gè)：

1，網(wǎng)站更新頻率：更新快多來(lái)，更新慢少來(lái)，直接影響百度蜘蛛的來(lái)訪(fǎng)頻率

2，網(wǎng)站更新質(zhì)量：更新頻率提高了，僅僅是吸引了百度蜘蛛的注意，百度蜘蛛對質(zhì)量是有嚴格要求的，如果網(wǎng)站每天更新出的大量?jì)热荻急话俣戎┲肱卸榈唾|(zhì)頁(yè)面，依然沒(méi)有意義。

3，連通度：網(wǎng)站應該安全穩定、對百度蜘蛛保持暢通，經(jīng)常給百度蜘蛛吃閉門(mén)羹可不是好事情

4，站點(diǎn)評價(jià)：百度搜索引擎對每個(gè)站點(diǎn)都會(huì )有一個(gè)評價(jià)，且這個(gè)評價(jià)會(huì )根據站點(diǎn)情況不斷變化，是百度搜索引擎對站點(diǎn)的一個(gè)基礎打分（絕非外界所說(shuō)的百度權重），是百度內部一個(gè)非常機密的數據。站點(diǎn)評級從不獨立使用，會(huì )配合其它因子和閾值一起共同影響對網(wǎng)站的抓取和排序。

抓取頻次間接決定著(zhù)網(wǎng)站有多少頁(yè)面有可能被建庫收錄，如此重要的數值如果不符合站長(cháng)預期該如何調整呢？百度站長(cháng)平臺提供了抓取頻次工具，并已完成多次升級。該工具除了提供抓取統計數據外，還提供“頻次調整”功能，站長(cháng)根據實(shí)際情況向百度站長(cháng)平臺提出希望百度蜘蛛增加來(lái)訪(fǎng)或減少來(lái)訪(fǎng)的請求，工具會(huì )根據站長(cháng)的意愿和實(shí)際情況進(jìn)行調整。