ロボ除けのお呪いとか。(?)

ご訪問くださってる皆様にはどうでも良い話題だと思うんですが、サイト運営者的なツブヤキ…です。

サイトの基礎をCMSに変えて再開作業を進めているところなのですが、実はプラグインのアクセス解析を入れてみているんですね。
今までもCGIのアクセス解析を入れていたし、今のカウンタはCGIで使っていたものをそのまま引き続き使用してるんですけど。


で、CMSの方のアクセスログとか、見てみたりしてるんですが…うーむ、アクセス数のうちの半分以上がロボット系の人々(人じゃないだろ…)だ(ーー;)というか、アクセスログ見るとウザイ程にロボット系の人達がぐる?り巡回してやがる。
RSSを取得するロボット(っていうかRSSリーダなのかな?)も特定の所のものが毎日何度も来てるんですよね。しかも毎回過去記事にさかのぼってご丁寧にぜ??んぶ拾って行ってるみたいなの。
さすがにアクセスログで見る時これはウザイなぁ(^_^;)と思ったので、何処まで効果あるか解らないんですが、ロボット除けを施してみる事に。
あのぅ、何年か前から、Webサイトを勝手にアーカイブして公開してるサイトがあるでしょう。Googleのキャッシュじゃなくて、過去ページのアーカイブの公開ね。開始当時、削除したはずの古いページまで、勝手に公開されている!著作権の侵害だ!って一部で討論されてたみたいですが(どうやら削除希望を送ると閲覧不可にはしてくれるらしいですね)、やっぱり勝手に自分のサイトを全保存して不完全な形で知らない間に公開されてるっていうのは、いくらWWWという世界だからとはいえ、感情的には気分は良くないですよね…。
という訳で、一応、そのアーカイブサイトのロボット除けも一応考慮して記述してみました。
indexページ以外のサーチエンジンからの検索を拒否する指定にしたら、一応Googleではindexしかサーチエンジンに引っかからないようになってたみたいなんですが(くまなく見たわけではないので完全に遮断されてたかは不明ですが)、それではあまりにもきつく拒否しすぎるか(^_^;)って思って、インデックスとアーカイブは拒否するけど、日記まで検索はOKよ、って指定に変えてみました。テキストメインの日記なんかは、検索されてOKとして然るべき(?)なのかなって気もするんで。ただし、ぎゃらりーとか脳天気図書館とかは検索対象には入れないようにはしてあるんですが…。
勿論、metaタグに書いた程度なので、何処まで有効かってのは解らないんですけどね。それに、ロボットたちが、内部を延々ぐるぐる巡回するのも何処まで防げるのかも解らないんですけど(^_^;)
…希望的にはアクセスログがもーちょっと、見やすくなったらいいなぁ、って思ってます…。

この記事を書いた人:このみ

最近、映画ばっかり観に行っている気がします。 絵もまた描けるようになりたいんですけど、長期スランプからなかなか抜け出せません…。

最新情報をお届けします

ぎゃらりー


Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk_vt2011.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk_vt2011.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
もうすぐバレンタイン

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/xmas2010.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/xmas2010.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
Merry Christmas !!

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk091223.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk091223.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
めりくり絵?@ウェブカレ

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk091206.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk091206.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
すばるくん@ウェブカレ

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk091024comic.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk091024comic.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
公式ガイドに応募した絵

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/2009_webkare1year.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/2009_webkare1year.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
ウェブカレ1周年!

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/090719subaru.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/090719subaru.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
すばるくん@ウェブカレ

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/20090705-01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/20090705-01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
贈り物の弟君@ウェブカレ

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk090525-01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk090525-01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
すばるくん@ウェブカレ

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/bd090523-03.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/bd090523-03.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
すばるくん@ウェブカレ

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk_syu_090418.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/wk_syu_090418.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
赤い…@ウェブカレ(バスケ君)

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/To_Kayura090207.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/To_Kayura090207.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
蒼夜くん@ウェブカレ

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/kanade090118.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/kanade090118.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
奏っち@ウェブカレ

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/webkare_Halloween2008.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/webkare/webkare_Halloween2008.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
ハロウィンコス@ウェブカレ

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/070612_01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/070612_01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
村田健猊下

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/070421-01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/070421-01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
健ちゃん。

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/070414_01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/070414_01.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
記憶戦隊ダイケンジャー(違 ::今日からマ王!::

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/PaintBBS050913_220321.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/PaintBBS050913_220321.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
日記に描いた絵:久留美ちゃん

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/PaintBBS050912_213808.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/PaintBBS050912_213808.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
日記に描いた絵:匠くん

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/PaintBBS050912_003712.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/1/PaintBBS050912_003712.jpg): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
日記に描いたジョエル師匠

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/20060924-kameguru.GIF|454|630|+++KAMEさんより)%/><br /> <a href=): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/20060924-kameguru.GIF|454|630|+++KAMEさんより)%/><br /> <a href=): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
KAMEさんより

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/20060924-bakubaku.gif|96|96|+++のりみさんより・その2)%/><br /> <a href=): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/20060924-bakubaku.gif|96|96|+++のりみさんより・その2)%/><br /> <a href=): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
のりみさんより・その2

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/20060924-skip.gif|365|323|+++のりみさんより)%/><br /> <a href=): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149

Warning: getimagesize(/home/polepole/merrymaking.org/public_html/wp-content/uploads/2017/20060924-skip.gif|365|323|+++のりみさんより)%/><br /> <a href=): failed to open stream: そのようなファイルやディレクトリはありません in /home/polepole/merrymaking.org/public_html/wp-content/themes/4536/functions/img-movie-setting.php on line 149
のりみさんより