国内最全IT社区平台 联系我们 | 收藏本站
华晨云阿里云优惠2
您当前位置:首页 > web前端 > 网络优化 > 经历:我被百度蜘蛛害惨了,丢了40G流量

经历:我被百度蜘蛛害惨了,丢了40G流量

来源:程序员人生   发布时间:2014-05-27 11:00:04 阅读次数:3104次
  我的空间是在华夏名网买的,每个月40G的流量。每天通过百度GOOGLE获得的流量并不多每天一百来,对于一个才开了3个月不到的网站来讲,已经非常充裕。但是今天突然发现网站无法打开,到华夏空间一查,原来40G流量全部没了!而且还超出不少。

  我仔细分析了一下,流量流失的几种可能:

  1.百度 GOOGLE是Spider(因为我用了站群,发了很多篇文章,有一定可能是这个原因)

  2.用户在线听歌(因为周杰伦新专辑出来前一天我发表一篇文章,关键字"超人不会飞完整版"在百度第二页,但是我看51LA上面的IP也并不多!)

  3.图片被其他网站外链(刚开网站,觉得防盗链并不是很重要,就没管他)

  但总上原因,也不可能把40G流量全部吞噬掉!

  于是,我把日志文件下载下来分析。这样几句代码非常显眼:[111.MP3,即为“超人不会飞”]

  [29/Apr/2010:12:37:33 +0800] "GET /111.mp3 HTTP/1.1" 200 4572974 "-" "NSPlayer/10.0.0.4054 WMFSDK/10.0" "-"

  121.34.163.116 - - [29/Apr/2010:12:37:34 +0800] "GET /111.mp3 HTTP/1.1" 200 4572974 "http://box.zhangmen.baidu.com/flash/fmp.swf?v=20100201a" "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US) AppleWebKit/531.0 (KHTML, like Gecko) Chrome/3.0.195.0 Safari/531.0 SE 2.X" "-"

  58.210.9.196 - - [29/Apr/2010:12:37:34 +0800] "GET /111.mp3 HTTP/1.1" 206 24576 "http://box.zhangmen.baidu.com/m?rf=idx&ct=134217728&tn=baidumt&gate=10&c_n=mp3order&l_id=402&l_n=%E6%96%B0%E6%AD%8CTOP100&s_o=0" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)" "-"

  61.152.106.182 - - [29/Apr/2010:12:37:34 +0800] "GET /111.mp3 HTTP/1.1" 200 98304 "-" "NSPlayer/11.0.5721.5145 WMFSDK/11.0" "-"

  60.161.114.79 - -

  然后我把网址:http://box.zhangmen.baidu.com/m?rf=idx&ct=134217728&tn=baidumt&gate=10&c_n=mp3order&l_id=402&l_n=%E6%96%B0%E6%AD%8CTOP100&s_o=0

  输入到浏览器上,按下了回车,当时我就晕掉了!~

  网站上的MP3被百度音乐盒搜录了,而且放在新歌排行榜首位!害得我把40G流量全部浪费掉了!

  以后建议各位站长网站上的MP3做好防盗链,防的不是别人,而是百度这个流量小偷!

  本文来自:胡泽的博客! http://胡泽.中国,转载请保留地址!

生活不易,码农辛苦
如果您觉得本网站对您的学习有所帮助,可以手机扫描二维码进行捐赠
程序员人生
------分隔线----------------------------
分享到:
------分隔线----------------------------
关闭
程序员人生