qihoo您真是牛

qihoo是谁,大名鼎鼎的奇虎是也。奇虎的论坛搜索可谓一绝,特点一,相当的贪婪,小网站被看上的话,消耗的流量能比你正常访客消耗的都多。比如说吧,IPB有个日历功能,要是被这位qihoobot看上了,那简直不得了,它还以为自己一脑袋栽到蓝海里了,天天都来,乐此不疲,似乎一定要把这日历里边的上下五千年都抓完咯才罢休,老兄,您积点德成不? 说他傻吧,他有时候还挺精的,我刚一禁止,这可不是使用robot文件的禁止方法,直接判断了agent,然后拒绝访问,一看日志,挺牛的,这位老兄还以为自己遇到了限制板块,一扭头转到注册和登陆页上,想装个会员去访问,这不半小时了,这个bot还没走,估计是自动尝试各种验证方式,我真是服了,彻底的。
  1. 221.194.136.23 - - [30/May/2008:12:41:03 +0800] "GET /bbs/index.php?s=9a3b75360673c93c0c9b3fbdcba97b34& HTTP/1.1" 403 345 "-" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; CollapsarWEB qihoobot{AT}qihoo.net)"
  2. 221.194.136.23 - - [30/May/2008:12:41:10 +0800] "GET /bbs/index.php?s=9a3b75360673c93c0c9b3fbdcba97b34&act=Help HTTP/1.1" 403 345 "-" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; CollapsarWEB qihoobot{AT}qihoo.net)"
  3. 221.194.136.23 - - [30/May/2008:12:41:14 +0800] "GET /bbs/index.php?s=9a3b75360673c93c0c9b3fbdcba97b34&act=Search&f= HTTP/1.1" 403 345 "-" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; CollapsarWEB qihoobot{AT}qihoo.net)"
  4. 221.194.136.23 - - [30/May/2008:12:41:19 +0800] "GET /bbs/index.php?s=9a3b75360673c93c0c9b3fbdcba97b34&act=Members HTTP/1.1" 403 345 "-" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; CollapsarWEB qihoobot{AT}qihoo.net)"
  5. 221.194.136.23 - - [30/May/2008:12:41:24 +0800] "GET /bbs/index.php?s=9a3b75360673c93c0c9b3fbdcba97b34&act=calendar HTTP/1.1" 403 345 "-" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; CollapsarWEB qihoobot{AT}qihoo.net)"

1 Comment

回复评论

Comment

  • 输入内容会自动换行、分段。

Plain text

  • 不允许HTML标记。
  • 网址或者email地址在发表后系统会帮你自动转化为可点击的连接。
  • 输入内容会自动换行、分段。