ホーム > アーカイブ > 2008年4月11日のアーカイブ

2008年4月11日のアーカイブ

行儀の悪いUSER_AGENT対策

[`evernote` not found]

[`grow` not found]

[`livedoor` not found]

[`yahoo` not found]

Apacheのアクセスログを読んでみると新しい発見がある。
USER_AGENTが YodaoBot となっているリクエストが目立つ。

検索してみると同じ事を感じてる人が結構いますね。

存在しないページをリクエストしてくる。
同じタイミングで2度同じリクエストをしてくる。
それも結構密なタイミングで。
行儀が悪いというより嫌がらせと言うほうがしっくりくる。

こんなクローラに収集されも良い事はひとつもないので
.htaccess ではじいてしまおうと思う。

SetEnvIf User-Agent "YodaoBot" badAgent
order allow,deny
allow from all
deny from env=badAgent

ホーム > アーカイブ > 2008年4月11日のアーカイブ

プロフィール

ゆうじ
PHPの基礎体力
Ｇ＋

Follow @soundws

サンデープログラマーはプログラミングはやるけどプロじゃない。お父さんの日曜大工とおんなじです。
プログラミングは体力じゃ!
コーヒーとタバコLOVE、あと音楽は聴くのもやるのも好き。

検索

Ad

カレンダー

最近の投稿

Ad

カテゴリー

タグクラウド

Ad

Apache

MySQL

PHP

お気に入り

ん。。。。。。広告

アーカイブ

Ad

ページの上部に戻る