百度蜘蛛IP段以及意義

 123蜘蛛類型區(qū)分：

123.125.71.95抓取內(nèi)頁收錄 權(quán)重較低 爬取完內(nèi)頁不會(huì)很快放出

123.125.71.97 抓取內(nèi)頁收錄 權(quán)重較低 爬取完內(nèi)頁不會(huì)很快放出

123.125.71.106抓取內(nèi)頁收錄 權(quán)重較低 爬取完內(nèi)頁不會(huì)很快放出

123.125.71.117抓取內(nèi)頁收錄 權(quán)重較低 爬取完內(nèi)頁不會(huì)很快放出。

220蜘蛛類型區(qū)分：

220.181.108.75 90%抓取內(nèi)頁、8%抓取首頁 2%其他 此ip段爬取過的內(nèi)容基本24小時(shí)內(nèi)放出

220.181.108.91 綜合 主要抓取首頁或者內(nèi)頁 此ip段爬取過的內(nèi)容基本24小時(shí)內(nèi)放出

220.181.108.92 98%抓取首頁或者其他頁面 此ip段爬取過的內(nèi)容基本24小時(shí)內(nèi)放出

220.181.108.95 百度抓取首頁的專用ip 如果是220.181.108ip段來訪 你網(wǎng)站會(huì)天天隔夜快照

220.181.108.*ip段主要抓取首頁占比80% 內(nèi)頁占比30% 被此ip爬過后通常24小時(shí)后放出;成功抓取返回是200 返回碼304代表未更新;2000、64主要是網(wǎng)站是動(dòng)態(tài)導(dǎo)致返回碼是這樣的!

220.181.108.77

220.181.108.80

220.181.108.83

220.181.108.86

220.181.108.89

220.181.108.94

220.181.108.97

代表抓取首頁ip段 返回碼304代表未更新。

其他ip代表：

121.14.89.*代表新站度過考察期

123.125.68 經(jīng)常來表示要進(jìn)沙盒

125.90.88*廣東茂名市電信也屬于百度蜘蛛ip 一般出現(xiàn)在新站較多

203.208.60.*一般會(huì)出現(xiàn)新站比較多 不穩(wěn)定

220.181.68.*只增不減代表網(wǎng)站可能進(jìn)去沙盒或者將要k站

210.72.225 用戶百度蜘蛛巡邏個(gè)站點(diǎn)

220.181.7.* 123.125.65.*代表百度指數(shù)ip造訪 準(zhǔn)備抓取頁面

對(duì)于網(wǎng)站新產(chǎn)出的鏈接必定是123開頭的蜘蛛到訪后且內(nèi)容質(zhì)量合格情況下，會(huì)有220蜘蛛再來進(jìn)行抓取并放出建立索引。

Tags：博客日記   新網(wǎng)站收錄

轉(zhuǎn)載：感謝您對(duì)MrCseo搜索營(yíng)銷博客原創(chuàng)作品的認(rèn)可及青睞，于此非常歡迎各界朋友將喜歡的經(jīng)驗(yàn)博客分享到個(gè)人站點(diǎn)或者朋友圈，但轉(zhuǎn)載請(qǐng)說明文章出處“來源MrCseo博客”。http://www.pet67.com/blog/82.html

很贊哦！ ()