影响网站收录之:蜘蛛IP封禁(屏蔽)


在网站运营的过程中,我们会经常遇到竞价突然被恶意点击,或者网站被批量采集,或者网站被攻击,遇到这种情况我们的解决方法是屏蔽这些IP地址,但是有时候网站技术人员会不小心导致屏蔽了蜘蛛的IP,最终会导致抓取量的极速下降,最终会导致收录下降,最终会导致流量下降。

那么如何判断可疑的IP是不是蜘蛛的IP呢,搜索引擎官方给我们列了他们的蜘蛛IP段,我们只需要对比一下就能发现是不是真实蜘蛛 了。

360好搜Spider的ip段:
参考地址:http://bbs.360safe.com/thread-4835418-1-1.html
101.226.166.*
101.226.167.*
101.226.168.*
101.226.169.*
182.118.20.*
182.118.21.*
182.118.22.*
182.118.25.*
182.118.35.*
61.55.185.*
180.153.236.*
182.118.28.*

如何分辨百度真假蜘蛛的IP段,很多站长都会看自己的网站爬行记录的ip是多少以便来区分是百度的还是其他搜索引擎的,并不是所以的IP段都是百度的IP段,那么如何区分哪些是百度的IP段,哪些不是IP段呢?

我们通过dos命令来查看,我们来找两个IP段220.181.108.140和117.28.255.37,开始—运行—输入 cmd ,用命令nslookup +ip 看截图:

如果是真的IP段:
真的IP段.jpg

如果不是真实的百度IP段:
不是真实的百度IP段.jpg

大家要注意的是:只要是百度的IP段,代码中会有出现:name:baiduspider,如果没有出现,那就不说不是真的百度IP段。
已邀请:

chalisli - 一万小时定律

赞同来自:


技术部门为了减少宽带的使用,往往会屏蔽蜘蛛IP,要特别嘱咐技术部门。

要回复问题请先登录注册