クローラーで通信不能になるとは、何とも情けないのですが。
コンソールからもアクセス出来なくなっているのに気付きかなり焦りました(^^ゞ
約1分間に16回のWgetでハングアップした様です(ーー;)

[30/Jun/2009:07:15:47 +0900] “GET /**.jpg HTTP/1.0″ 200 5377 “-” “Wget/1.10.2 (Red Hat modified)”
↓
[30/Jun/2009:07:16:43 +0900] “GET /*/*/**.jpg HTTP/1.0″ 200 58369 “-” “Wget/1.10.2 (Red Hat modified)”

ちなみに、iplogを確認するとポートスキャンしてるし。
Jun 30 07:15:41 TCP: port scan detected [port 80] from ***** (174.129.***.**) [ports 47494,47493,47495,47496,47497,...]

mod_rewrite でWget拒否する設定をしてみました。
効果があると良いのですが。

【参考サイト】

Apache HTTP Server Version 2.2
Apache Module mod_rewrite

http://httpd.apache.org/docs/2.2/mod/mod_rewrite.html

http://japache.infoscience.co.jp/rewriteguide/#info