有時(shí)候我們?cè)诜治鼍W(wǎng)站蜘蛛爬行日志的時(shí)候,會(huì)發(fā)現(xiàn)很多的ip,這些ip地址根據(jù)后面的參數(shù)可以發(fā)現(xiàn)都是百度的。剛學(xué)習(xí)seo不久的同學(xué)肯定要問:這些ip地址到底代表什么含義,是不是不同的ip地址所代表的含義不一樣呢?對(duì)權(quán)重和抓取是否有影響?哪些是無效的蜘蛛,哪些是站長工具的蜘蛛,那些又是百度自己真正的蜘蛛?
不同百度蜘蛛ip段代表的不同含義
首先,怎么判斷這個(gè)蜘蛛是不是百度蜘蛛?
在這里,教大家一個(gè)方法:
查看流程:電腦上,點(diǎn)擊Win鍵開始——運(yùn)行——cmd——nslookup 【ip】看name值。
通過上面的域名后綴數(shù)據(jù)可以很明顯看出這是百度的蜘蛛。
通過上面的數(shù)據(jù)可以很明顯的看到這顯然不是百度蜘蛛。
這個(gè)只要看nslookup出來的name值。沒有的話就不是百度蜘蛛,有百度字樣的,就是百度蜘蛛。
那么,不同的百度蜘蛛,它的功能和作用是什么呢?
以下是關(guān)于不同IP段的百度蜘蛛所代表的不同含義,大家可以作為一個(gè)參考。
百度蜘蛛IP 功能說明
60.172.229.61 蜘蛛來訪,準(zhǔn)備抓取網(wǎng)頁內(nèi)容
61.129.45.72 蜘蛛來訪,準(zhǔn)備抓取網(wǎng)頁內(nèi)容
61.135.162.* 蜘蛛來訪,準(zhǔn)備抓取網(wǎng)頁內(nèi)容
61.135.165.134 百度競價(jià)蜘蛛
117.34.74.66 百度競價(jià)蜘蛛
118.122.188.194 百度競價(jià)蜘蛛
119.63.196.9 百度競價(jià)蜘蛛
125.39.78.185 百度競價(jià)蜘蛛
61.135.186.* 百度聯(lián)盟蜘蛛、百度統(tǒng)計(jì)蜘蛛
61.147.98.146 站長工具模擬百度蜘蛛
61.188.39.16 站長工具模擬百度蜘蛛
113.98.254.245 站長工具模擬百度蜘蛛
117.21.220.245 站長工具模擬百度蜘蛛
117.28.255.42 站長工具模擬百度蜘蛛
124.248.34.52 站長工具模擬百度蜘蛛
125.90.88.* 站長工具模擬百度蜘蛛
119.147.114.213 站長工具模擬百度蜘蛛
121.10.141.* 站長工具模擬百度蜘蛛
123.15.**.** 百度圖片蜘蛛
123.125.71.* 抓取網(wǎng)站內(nèi)頁收錄,質(zhì)量不高,暫時(shí)不會(huì)放出來
159.226.50.* 考察蜘蛛(很大可能是降權(quán)蜘蛛)
180.76.5.* 考察蜘蛛(很大可能是降權(quán)蜘蛛)
180.76.5.87 考察蜘蛛(很大可能是降權(quán)蜘蛛)
220.181.158.107 考察蜘蛛(很大可能是降權(quán)蜘蛛)
183.91.40.144 新站不正常情況下的蜘蛛
203.208.60.* 新站不正常情況下的蜘蛛
210.72.225.* 打醬油的百度蜘蛛
123.125.68.* 如果發(fā)現(xiàn)下面這幾個(gè)ip段每天只增不減的話,那就很危險(xiǎn)了,
很有可能會(huì)進(jìn)入沙盒或者有被K站的現(xiàn)象。
218.30.118.102 如果發(fā)現(xiàn)下面這幾個(gè)ip段每天只增不減的話,那就很危險(xiǎn)了,
很有可能會(huì)進(jìn)入沙盒或者有被K站的現(xiàn)象。
220.181.68.* 如果發(fā)現(xiàn)下面這幾個(gè)ip段每天只增不減的話,那就很危險(xiǎn)了,
很有可能會(huì)進(jìn)入沙盒或者有被K站的現(xiàn)象。
123.125.66.* 代表百度蜘蛛IP來過了,準(zhǔn)備抓取你網(wǎng)站上的東西!
220.181.7.*
121.14.89.* 百度蜘蛛作為度過新站考察期的一個(gè)ip段
220.181.108.95 此ip段爬過的文章或首頁正常情況下基本在24小時(shí)都會(huì)放出來
220.181.108.92 此ip段爬過的文章或首頁正常情況下基本在25小時(shí)都會(huì)放出來
220.181.108.91 此ip段爬過的文章或首頁正常情況下基本在26小時(shí)都會(huì)放出來
220.181.108.75 此ip段爬過的文章或首頁正常情況下基本在27小時(shí)都會(huì)放出來
123.125.71.95 抓取內(nèi)頁收錄的,權(quán)重相對(duì)比較低,爬過此段的內(nèi)頁文章不會(huì)很快被放出來,
因它懷疑不是原創(chuàng)文章或者懷疑是采集來的文章。
123.125.71.97 抓取內(nèi)頁收錄的,權(quán)重相對(duì)比較低,爬過此段的內(nèi)頁文章不會(huì)很快被放出來,
因它懷疑不是原創(chuàng)文章或者懷疑是采集來的文章。
123.181.108.77 抓取內(nèi)頁收錄的,權(quán)重相對(duì)比較低,爬過此段的內(nèi)頁文章不會(huì)很快被放出來,
因它懷疑不是原創(chuàng)文章或者懷疑是采集來的文章。
123.125.71.106 抓取內(nèi)頁收錄的,權(quán)重相對(duì)比較低,爬過此段的內(nèi)頁文章不會(huì)很快被放出來,
因它懷疑不是原創(chuàng)文章或者懷疑是采集來的文章。
220.181.108.89 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段,
一般返回代碼304 0 0就代表網(wǎng)站未更新
220.181.108.94 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段,
一般返回代碼304 0 1就代表網(wǎng)站未更新
220.181.108.97 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段,
一般返回代碼304 0 2就代表網(wǎng)站未更新
220.181.108.80 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段,
一般返回代碼304 0 3就代表網(wǎng)站未更新
220.181.108.77 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段,
一般返回代碼304 0 4就代表網(wǎng)站未更新
220.181.108.83 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段,
一般返回代碼304 0 5就代表網(wǎng)站未更新
220.181.108.86 專用抓取網(wǎng)站首頁的,也屬于權(quán)重段,
一般返回代碼304 0 6就代表網(wǎng)站未更新
以上文章部分內(nèi)容采集于網(wǎng)絡(luò),如有侵權(quán)請(qǐng)聯(lián)系創(chuàng)一網(wǎng)客服處理,謝謝!