yahooの検索ロボット(Yahoo! Slurp)に対して、画像関係のほとんどのディレクトリを立ち入り禁止にしました。
yahoo以外ではK国の一部検索ロボットを完全拒否を行っています。

　 自サイトを検索サイトで上位表示させるための姑息な手段として、「検索エンジンスパム」があるそうです。 サイトの見た目としては現れないキーワードを多量に埋め込む方法です。

　 文字を最小サイズにしたり,1ピクセルの画像に属性としてキーワードを多量に書き込んだりして、 見た目には見えないのですがソースには沢山埋め込んであって検索エンジンに読み取らせる手法ですね。

　 最近「Yahoo」で当サイトが検索されなくなりました。完全に削除されたようです。

　 色々調べていると、「検索エンジンスパム」にぶつかりました。 説明としての項目に以下のものがありました。

　 「情報をほとんど公開していないにもかかわらず、自動的にまた大量に作られているページ 」

　 当サイトは、当然「検索エンジンスパム」であるはずはありませんが、サイト構成が、 yahooの新型エンジンに嫌われた可能性が大なのです。 写真アルバムを中心とするWebサイトなので、同じようなhtmlが多量にあります。

　 サイトの構成
写真のアルバムを作るため、１枚の写真に3枚のjpegと2枚のhtmlを用意しています。

　 サムネイルを集めたインデックスページ（ここに多数のリンクがあるので"index,nofollow"としています。）
　・128ピクセルのサムネイル
　・720ピクセル程度の中間サイズの画像
　・1984ピクセルの最大サイズの画像
　・中画像表示用html
　・大画像表示用html

　 もちろん、多量でほとんど同じ内容のため自動処理で作成していますので、上記の項目に当てはまりますね。

　 このファイル構成は、画像表示用htmlによって＜前・戻る・次＞と画像の切替を可能としているので単純なhtmlが多量にあり、 それぞれにタイトルとかが書いてあるので「検索エンジンスパム」と判定されたかなと考えています。

　 こちらとしても単純なhtmlを検索されては膨大な検索記録が残るだけなので、 検索拒否をページ内に記述しています。 が、しかし、Yahooのロボットは無視して勝手に検索して行きます。

　 訪問者よりロボットの方が多いくらいなのです。
Yahooロボットがどのファイルを見たかは、ログに残っています。（msnbotも無視しています。） ページの構成を変えてインデックスを変更した時、過去のhtmlを直接検索しに来て多量のエラーログを残してくれました。 やはりインデックスを参照していないのでインデックス内に書いてある検索拒否（"index,nofollow"）を見ていないですね。

そして「検索エンジンスパム」判定かな?
なんて自己中なロボットだ。

　 復活を目指しての自衛策として、Yahooのロボットには強行手段でインデックスページ以外のhtmlを検索禁止にしました。 これで「自動的にまた大量に作られているページ 」を無視してもらえれば、復活の可能性があるかな。

　 googleロボットはちゃんと検索拒否に応じてくれているのに。

　 さて、いつの日か復活できるやら。