前回の対策で、503エラー連発は落ち着いていたのに、今日、急に、また、連発が発生した。

ログを見てみると、見慣れぬクローラー（？）が集中的にアクセスしていた。

１秒間に２０ページくらいの猛烈なアクセスで、非常にたちが悪い。

Agent: Website Explorer/0.9.9.9

Googleで検索してみると、
http://www.umechando.com/webex/index.html
で配布しているソフトを、誰かが使っているようだ。

htaccessにAgentの拒否設定をして、503エラー連発はストップしました。

みなさん、503エラーの発生状況は、きちんと監視してますか？

かなり強烈なので、アクセスの有無に関わらず、デフォルトで、アクセス拒否設定をしておいた方が安心かも・・・。

私が管理するあるサイトで503エラーが連発するので、ログなどいろいろ調べてみると、どうもクローラーが原因のようだと判明した。

クローラーがサーバーにかける負荷は、私の理解では、次の順。
（ページ生成時間の累計により判断した）

　Yahoo　　＞　　　　MSN　　　　　　　　　　　　＞　Google

Yahooは、際立って重い印象だ。
Googleは、巡回頻度の割には、ページ生成時間は、それほどでもない。
だが、とりあえず、頻度の調整ができるGoogleから手をつけることにした。

「ホームページって何？」というところから始まった私のホームページは、ホームページ作成ソフトによるメンテナンスから、ＣＭＳ（コンテンツ・マネージメント・システム）による運営へと変更することになりました。

ホームページ作りにおいて色々な発見がありながらも、ホームページ作成ソフトを使っていると、その煩わしさから、更新が疎かになっていまう・・・。

でも、自分のための健忘録という意味で、ホームページに記録しておきたいことがたくさんある・・・。

そんな問題の解決の為に、ブログのようにコンテンツを更新できるＣＭＳを採用することにしました。

ぼちぼち、移行作業を進めながら、その辺の経緯なども整理していきたいと思っています。

ホームページを沢山の方に見ていただくためには、検索エンジン対策が非常に重要だということは身に染みて感じています。でも、いざ、それに取り組もうと思って、検索エンジン対策について書かれているサイトを見たとき、その内容を理解する事が困難な為に、これまで、深く理解しないままに放置してきました。