今天在查看IIS日志时发现，“WukongSpider”竟然占了很大的量，在其中一天的日志中，WukongSpider竟然达1万多条，一万多PV啊，就这么被这个可恶的悟空搜索给霸占了，并且WukongSpider出现频率过高，已经超过Google / Baidu / Yahoo / Youdao / Soso等正规搜索引擎的抓取条数了。
网上查了一下这个站：
| 唔箜搜索 唔箜搜索是综合型的手机搜索引擎,提供分类定向搜索,共有手机图片、手机铃声、mp3、手机地图、手机游戏等17个类别的搜索和下载. wukong.net |
方法一：
将WukongSpider添加到Robots.txt，相信这个家伙也是遵循搜索引擎抓取规则的。
方法二：
将WukongSpider的IP地址加入到黑名单中，禁止该IP来访，可以大大减轻服务器的压力。
推荐：以上两个方法都使用，PS：如果你的网站是手机类站点，就不要屏蔽了！
程序员人生，我编程，我富裕，记住wfuyu网，php教程，php学习，php手册，CMS模版制作
声明：本站大部分内容是作者原创，少部分收集于互联网供大家一起学习，原版权很多不明，如有侵权请联系本站，谢谢！
粤ICP备14040726号-1 2015-2020 程序员人生 版权所有
