|
说的真伪百度蜘蛛，又让我想到西游记里的辨真假的情节，言归正传。这几天再查看网站日志的时候发现了一个很奇怪的现象，大部分站长都会有日志分析的习惯，一般国内是以百度与Google这两大搜索引擎。在检查日志时出现了几个陌生的百度蜘蛛IP号段，哈哈！你猜对了，这就是传说中的百度伪蜘蛛，有人会奇怪怎么蜘蛛还有真伪吗？是的今天就来聊聊这个真伪百度蜘蛛。 在检查日志的时候发现了几个陌生的百度蜘蛛IP号段（如下图），三个IP分别是117.28.225.37、117.34.73.70、.116.55.241.24上面也标志着(BaiDu Spider) 如果不去注意分辨的话会觉的这就是百度的蜘蛛，哈！其实你错了，这个就是传说中的伪蜘蛛，查了IP这几个IP分别是福建厦门、陕西西安、云南昆明，是的这些只是我发现的百度伪蜘蛛中的几个，网络有很多的网络蜘蛛在游荡。说不定有天就光临贵站了。
在检查日志的时候发现了几个陌生的百度蜘蛛IP号段除了用IP工具来查询是否是百度蜘蛛也还有另一种方法，在运行中输入cmd后再输入nslookup+ip（如图）就可以显示出是真是伪。这样的方法会更为准确。显示为图上的内容就可以确定是百度蜘蛛了。
在运行中输入cmd后再输入nslookup+ip（如图）就可以显示出是真是伪正常百度蜘蛛的IP都是220.181.108.*或123.125.71.*号段的（顺便科普一下，这两个IP段的百度蜘蛛没有所谓高权重和降权之分）。
那么假的百度蜘蛛对于我们网站有什么危害呢？ 这里SEO管家中心提醒这些假蜘蛛对于我们的网站的危害是十分巨大的，具体有以下几点：
1.占用网站带宽，导致网站流量上升，增加额外开销
2.在有限带宽的前提下，阻碍了正常蜘蛛的抓取
3.误导了我们在对网站开展SEO工作时的思路
4.部分伪装成假蜘蛛的采集工具剽窃了我们的工作
当然既然出现了这样的伪装蜘蛛，我们就必须要想办法怎么把其屏蔽了才可以，具体怎么屏蔽呢？这个还得再编辑一篇文章才能完整的来回答这个问题，所以抽空详细的来说明一下。
| 
发表于 2014-2-7 19:30:54
