msnが困った状態です

October 09 [Sun], 2016, 18:47
以前にもあったのですが、最近になって急に酷くなっています。 (以前の話)
.search.msn.com から UAが BingPreview/1.0b というクローラーが画像を狙って来ています。

robots.txtでアクセス許可していない画像ばかり狙ってます。 .htaccessでも当然チェックがかかってます。
このクローラー自体はrobots.txtを読んでおらず、 見てないから規制なんか知らんというスタンスです。

結果、すべて403ですが、その量が半端でない。次々浚いに来て、エラーログが見づらくなってます。

仕方ないので、該当するIPをルータ規制します。 65.55.213.0/24 131.253.24/22

今回は以前の時とは違うIPです。他のIPでも観測されたら、追加します。

その他、/apple-touch-icon-precomposed.png 関係のアクセスが凶悪化したようです。
アイコン取得時に通常のページアクセスと異なるUAで来るので 403が出る場合が多くなり、
403が返って取得できない場合、時間をおいて再度取りに来る行動が見られます。
だいたい、 apple-touch-icon は勝手に種類が増えるので迷惑です。もう、ブクマ登録しないで欲しいです。
  • URL:https://yaplog.jp/bellstek/archive/52
Comment
小文字 太字 斜体 下線 取り消し線 左寄せ 中央揃え 右寄せ テキストカラー 絵文字 プレビューON/OFF

不正な自動コメント投稿を防ぐため、チェックボックスにチェックをしてください。

利用規約に同意
 X 
禁止事項とご注意
※本名・メールアドレス・住所・電話番号など、個人が特定できる情報の入力は行わないでください。
「ヤプログ!利用規約 第9条 禁止事項」に該当するコメントは禁止します。
「ヤプログ!利用規約」に同意の上、コメントを送信してください。
ヤプログ!広告
プロフィール
  • プロフィール画像
  • アイコン画像 ニックネーム:admin@bellstek.net
  • アイコン画像 現住所:大阪府
読者になる
メールフォーム

TITLE


MESSAGE