宏微信息技術(shù)詳解百度蜘蛛ip段代表的不同含義
更新時(shí)間:2018-01-16 10:00:01 來源:大同網(wǎng)站建設(shè) 點(diǎn)擊:
詳解百度蜘蛛ip段代表的不同含義
新大同于2017年末終于又全新上線,上次大約還是2010年所謂的“全新改版”,新版上線后大約有半個(gè)月了,因?yàn)闇y(cè)試的時(shí)間較長(zhǎng),所以測(cè)試的網(wǎng)址被收錄了“一堆”,最近看百度只抓取新大同首頁,更新速度基本也正常,但內(nèi)頁確實(shí)無論如何不肯收錄,究其原因,艾達(dá)不地道。
最近我們?cè)诜治霭俣戎┲氲臅r(shí)候,會(huì)發(fā)現(xiàn)很多的ip,這些個(gè)ip地址,根據(jù)后面的參數(shù)可以發(fā)現(xiàn)都是百度的。剛學(xué)習(xí)SEO不久的同學(xué)肯定要問:這些ip地址到底代表什么含義,是不是不同的ip地址所代表的含義不一樣呢?對(duì)權(quán)重和抓取是否有影響?哪些是無效的蜘蛛,哪些是站長(zhǎng)工具的蜘蛛,那些又是百度自己真正的蜘蛛?
最近我們?cè)诜治霭俣戎┲氲臅r(shí)候,會(huì)發(fā)現(xiàn)很多的ip,這些個(gè)ip地址,根據(jù)后面的參數(shù)可以發(fā)現(xiàn)都是百度的。剛學(xué)習(xí)SEO不久的同學(xué)肯定要問:這些ip地址到底代表什么含義,是不是不同的ip地址所代表的含義不一樣呢?對(duì)權(quán)重和抓取是否有影響?哪些是無效的蜘蛛,哪些是站長(zhǎng)工具的蜘蛛,那些又是百度自己真正的蜘蛛?
首先,怎么判斷這個(gè)蜘蛛是不是百度蜘蛛?
在這里,我教大家一個(gè)方法。
電腦上,點(diǎn)開始——運(yùn)行——cmd——nslookup 【ip】看name值。
如判斷ip地址123.125.71.95,如下圖。
很明顯看出是百度的蜘蛛。
如判斷ip地址61.147.98.146,如下圖
顯示不是百度蜘蛛。
這個(gè)只要看nslookup出來的name值。沒有的話就不是百度蜘蛛,有百度字樣的,就是百度蜘蛛。
那么,不同的百度蜘蛛,它的功能和作用是什么呢?以下是搜集于互聯(lián)網(wǎng)的,大家可以作為一個(gè)參考。
百度蜘蛛 | 功能說明 |
60.172.229.61 | 蜘蛛來訪,準(zhǔn)備抓取網(wǎng)頁內(nèi)容 |
61.129.45.72 | 蜘蛛來訪,準(zhǔn)備抓取網(wǎng)頁內(nèi)容 |
61.135.162.* | 蜘蛛來訪,準(zhǔn)備抓取網(wǎng)頁內(nèi)容 |
61.135.165.134 | 百度競(jìng)價(jià)蜘蛛 |
117.34.74.66 | 百度競(jìng)價(jià)蜘蛛 |
118.122.188.194 | 百度競(jìng)價(jià)蜘蛛 |
119.63.196.9 | 百度競(jìng)價(jià)蜘蛛 |
125.39.78.185 | 百度競(jìng)價(jià)蜘蛛 |
61.135.186.* | 百度聯(lián)盟蜘蛛、百度統(tǒng)計(jì)蜘蛛 |
61.147.98.146 | 站長(zhǎng)工具模擬百度蜘蛛 |
61.188.39.16 | 站長(zhǎng)工具模擬百度蜘蛛 |
113.98.254.245 | 站長(zhǎng)工具模擬百度蜘蛛 |
117.21.220.245 | 站長(zhǎng)工具模擬百度蜘蛛 |
117.28.255.42 | 站長(zhǎng)工具模擬百度蜘蛛 |
124.248.34.52 | 站長(zhǎng)工具模擬百度蜘蛛 |
125.90.88.* | 站長(zhǎng)工具模擬百度蜘蛛 |
119.147.114.213 | 站長(zhǎng)工具模擬百度蜘蛛 |
121.10.141.* | 站長(zhǎng)工具模擬百度蜘蛛 |
123.15.**.** | 百度圖片蜘蛛 |
123.125.71.* | 抓取網(wǎng)站內(nèi)頁收錄,質(zhì)量不高,暫時(shí)不會(huì)放出來 |
159.226.50.* | 考察蜘蛛(很大可能是降權(quán)蜘蛛) |
180.76.5.* | 考察蜘蛛(很大可能是降權(quán)蜘蛛) |
180.76.5.87 | 考察蜘蛛(很大可能是降權(quán)蜘蛛) |
220.181.158.107 | 考察蜘蛛(很大可能是降權(quán)蜘蛛) |
183.91.40.144 | 新站不正常情況下的蜘蛛 |
203.208.60.* | 新站不正常情況下的蜘蛛 |
210.72.225.* | 打醬油的百度蜘蛛 |
123.125.68.* | 如果發(fā)現(xiàn)下面這幾個(gè)ip段每天只增不減的話,那就很危險(xiǎn)了, 很有可能會(huì)進(jìn)入沙盒或者有被K站的現(xiàn)象。 |
218.30.118.102 | 如果發(fā)現(xiàn)下面這幾個(gè)ip段每天只增不減的話,那就很危險(xiǎn)了, 很有可能會(huì)進(jìn)入沙盒或者有被K站的現(xiàn)象。 |
220.181.68.* | 如果發(fā)現(xiàn)下面這幾個(gè)ip段每天只增不減的話,那就很危險(xiǎn)了, 很有可能會(huì)進(jìn)入沙盒或者有被K站的現(xiàn)象。 |
123.125.66.* | 代表百度蜘蛛IP來過了,準(zhǔn)備抓取你網(wǎng)站上的東西! |
220.181.7.* | |
121.14.89.* | 百度蜘蛛作為度過新站考察期的一個(gè)ip段 |
220.181.108.95 | 此ip段爬過的文章或首頁正常情況下基本在24小時(shí)都會(huì)放出來 |
220.181.108.92 | 此ip段爬過的文章或首頁正常情況下基本在25小時(shí)都會(huì)放出來 |
220.181.108.91 | 此ip段爬過的文章或首頁正常情況下基本在26小時(shí)都會(huì)放出來 |
220.181.108.75 | 此ip段爬過的文章或首頁正常情況下基本在27小時(shí)都會(huì)放出來 |
123.125.71.95 | 抓取內(nèi)頁收錄的,權(quán)重相對(duì)比較低,爬過此段的內(nèi)頁文章不會(huì)很快被放出來, 因它懷疑不是原創(chuàng)文章或者懷疑是采集來的文章。 |
123.125.71.97 | 抓取內(nèi)頁收錄的,權(quán)重相對(duì)比較低,爬過此段的內(nèi)頁文章不會(huì)很快被放出來, 因它懷疑不是原創(chuàng)文章或者懷疑是采集來的文章。 |
123.181.108.77 | 抓取內(nèi)頁收錄的,權(quán)重相對(duì)比較低,爬過此段的內(nèi)頁文章不會(huì)很快被放出來, 因它懷疑不是原創(chuàng)文章或者懷疑是采集來的文章。 |
123.125.71.106 | 抓取內(nèi)頁收錄的,權(quán)重相對(duì)比較低,爬過此段的內(nèi)頁文章不會(huì)很快被放出來, 因它懷疑不是原創(chuàng)文章或者懷疑是采集來的文章。 |
220.181.108.89 | 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段, 一般返回代碼304 0 0就代表網(wǎng)站未更新 |
220.181.108.94 | 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段, 一般返回代碼304 0 1就代表網(wǎng)站未更新 |
220.181.108.97 | 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段, 一般返回代碼304 0 2就代表網(wǎng)站未更新 |
220.181.108.80 | 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段, 一般返回代碼304 0 3就代表網(wǎng)站未更新 |
220.181.108.77 | 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段, 一般返回代碼304 0 4就代表網(wǎng)站未更新 |
220.181.108.83 | 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段, 一般返回代碼304 0 5就代表網(wǎng)站未更新 |
220.181.108.86 | 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段, 一般返回代碼304 0 6就代表網(wǎng)站未更新 |
上一篇:掌握好網(wǎng)站開發(fā)技巧,才能確保網(wǎng)站設(shè)計(jì)與搜索引擎友好相處 下一篇:淺析網(wǎng)站404頁面設(shè)置方法和注意事項(xiàng)