魔贝课凡
一个IT互联网人的知识分享基地  世界上仅有一种病，穷病。—《我不是药神》
咱们在分析网站日志的时候，常常会发掘有些莫名其妙的IP段，怎么样分辨这些IP段是不是为真正的百度蜘蛛呢？倘若是虚假的百度蜘蛛咱们能否进行禁止或屏蔽呢？答案是能够的。 先来介绍怎么样分辨真假百度蜘蛛；
其次，在网站日志中统计所有必须查找的IP位置；
首要，针对非苹果电脑用户，按住【windows+R】快捷键，打开“运行”，如下图 所示；  第三，在“文本框”内输入“cmd”，而后按Enter键，或单击“确定”按钮！单击Enter键之后打开如下的对话框； 第四，在光标位置处输入nslookup 123.125.71.95，中间有一个空格；亦能够先复制IP，而后在光标处右击，就会完成粘贴；IP输入完成后，按Enter就能够显现分析结果；从下图能够看出这个IP是真正的百度蜘蛛。 经过此办法，咱们还能够发掘谷歌蜘蛛、360蜘蛛、搜狗蜘蛛、神马蜘蛛等。分辨真正百度蜘蛛的办法还有非常多，大众能够自己百度一下并实操。倘若你不想让某一个或某几个虚假百度蜘蛛爬取你网站的内容，咱们就能够禁止或屏蔽这些IP，怎么样屏蔽呢？有2种办法。 第1种办法：从服务器的防火墙上屏蔽IP，不外爬虫一般有非常多IP，咱们能够屏蔽爬虫的IP段；然则倘若爬虫的IP段无规律，那此种办法就不适用了。第二种办法；.htaccess屏蔽虚假百度蜘蛛。有有些虚假的百度爬虫并不遵守robots规则，那咱们还能够经过.htaccess来屏蔽它，代码如下： 上图中htaccess屏蔽蜘蛛的办法是一种比较简单的办法，还有其他的有些办法能够运用，感兴趣的小伙伴能够尝试一下。倘若你在操作过程中遇到有些问题，欢迎咨询魔贝课凡，魔贝课凡专注于线上seo培训，任何相关seo的问题都能够咨询咱们；同期你想系统的加强你的seo技能，魔贝课凡是你不二的选取，魔贝课凡是腾讯课堂的top合作公司，想认识的能够到腾讯课堂上搜一搜。
凯文
魔贝课
凡SEO讲师
5年SEO实战经验 对SEO关联数据有较强的分析能力，熟悉运用各样SEO器具，推广成绩优越。善于网站推广利用互联网平台对网络资源的整合进行推广网站，重要词排名。熟悉认识Baidu等各大搜索引擎的原理和特点，熟悉排名规则和规律，并制定优化策略
  长按指纹，识别二维码，一键关注
| 
发表于