IRORIBATA

あるときかなり長時間にわたってルーターのアクセスランプが点滅。
念のためHTTPサーバー(Apache2)のアクセスログを見てみると、ある検索ロボットがひたすら写真にアクセスしています。しかも元ページとは別個にアクセスしてくる様子からして、写真の収集が目的としか思えません。

検索ページには確かに写真や画像ばかり集めたものがあり私も見たことはありますが、作者の意図するページの内容は全く無視されているように思えて、どうも好きではありません。
．．．で、これは断固拒否することにしました。

いちおうrobots.txtには Disallow: /idata/ と写真の入ったディレクトリを読まないようお願いは書いておきましたが過去の経験から無視するロボットもあり、これでOKなどとは微塵も思ってはおりません。

最初に保存されたCookieをチェックしてCookieのない場合は拡大写真は出さない方法を検討しました。でもこれはすぐにやめ。時折Cookieの保存を無効にしている人がいるからです。

次に写真収集ロボットはまずページのソースを見て、画像の表示タグ<img src="..." のパターンで画像を検出し、アクセスするのではないかと推定しました。
また、以前より検索ロボットはどうもJavaScriptをちゃんと実行していないような印象も持っていました。

そこで、imgタグをJavaScriptで書き出してやることにしてみました。
．．．で、しばらく様子を見ていました。確かにアクセスはぐんと減ったのですが、ロボットによってはちゃんと写真にアクセスしてくるのがあります。
どうやらJavaScriptのdocument.write()くらいは実行するロボットもあるようです。

さらなる改良が望まれます。

では、さらに改良を加えます。

htmlヘッダー内に以下の関数を定義

写真を表示したい部分には、
としてみました。
写真のファイル名を一旦変数を介して与え、さらに関数で表示させます。

さて、効果のほどは．．．？

これでだめなら悪質収集ロボットと判定したアクセスには一切情報は出さない(場合によってはアクセス遮断)という手もまだあります。．．．トップページに if(is_bad_access()){exit;} などとひとこと加えるだけだから簡単ですが．．．。