Yahooの検索ロボットがIP変えながら大量にアクセスしてくるから、アクセスカウンタがめちゃくちゃになっちゃったよ……
初めは inktomisearch.com から来たからそれをカットしたら、今度は yahoo.co.jp から大量に来た。
Googleの googlebot.com は同じIPでクロールしてくれるから、被害が小さくて済んだんだけど。
Yahooの検索ロボットがIP変えながら大量にアクセスしてくるから、アクセスカウンタがめちゃくちゃになっちゃったよ……
初めは inktomisearch.com から来たからそれをカットしたら、今度は yahoo.co.jp から大量に来た。
Googleの googlebot.com は同じIPでクロールしてくれるから、被害が小さくて済んだんだけど。
たとえばさ、
マウスストローク情報をサーバーに転送して、
その情報があった場合にだけ、トラックバックURLや
カウンタを正規のものにするっていう方法をつかえば
スパムが防げそうな気がする。
カウンタの場合は、画像にしてimgタグで呼んじゃえば、ほとんどのロボットは読みに行かないんだけどね。
robots.txt とかは読んでくれないのかな?
うちは、meta タグ + robots.txt で全部拒否。
事の発端は、その robots.txt を消したことから始まったんだけどね。
そろそろ表に出してもいいかなって思ったんだけど、それには準備が必要だったみたい。
いきなりで戸惑っちゃった。