Out of memory (allocated 11689984) (tried to allocate 9591784 bytes)　に苦しんでますが、
先日おこなった対応でも、まだ駄目っぽいです。

今日先ほど、zabbixのcacheグラフを見て唖然ですｗ
なんじゃこりゃ・・・。1．0ｋMbyteになっているじゃないですか・・・・。
ちなみに、このグラフ私が記事を投稿すると自動削除（リフレッシュ）されて、0に戻ります。
それから、皆様にアクセスされるとどんどんcacheが生成されて、静的コンテンツに差し替わっていきます。
JSなんかは、動的に動くので、コンテンツ部分だけ静的コンテンツになっていくイメージですね。
という事は、このcacheサイズってのは、アクセスされた数に比例するので
今日はたくさん見ていただいたんだって感じで、zabbixでグラフを描かせている次第です。

どうも、ＣＰＵの負荷率をみる限り、高速化したサイトをざーっと勢いよく舐めて行った感じに
なっているグラフが見て取れますね。

今までだと、数日かかって全記事引っ張っていくbotはあったけど、
1日でもっていって締まったのですね。ちょっと、botも考え物ですねぇ。
とりあえず、このくらいアクセス来ても、Out of memoryに深夜帯はなってないので
設定の効果はでているのかな？と思っちゃいましたがｗ。負荷試験ありがとぉと言いたいｗ

The post なんじゃこりゃｗ　→　bot被害かぁ！！ first appeared on ～下町物語～.

もうなんなん！！ブログが負荷が掛かっているとアラートが飛んでくる！
したの黄色い所をが閾値で超えると、alertが飛ぶんですよ。

シスログ見ると、またもやボットが全分を吸い上げにいらっしゃっている。
このブログ４０００を越える記事が入っている。下手すれば３日間とかアクセスしっぱなしになる時も・・・。

しかも、海外のボットに吸い上げられてもどうするんですか？
拒否るか！それとも、海外のサイトへの掲載も含めてリンクと見なしてこのまま放置するか・・・。

ただ、負荷率が高くなってくると、サーバ管理者から連絡が来たり
しょっこいサーバのくせに、やたらと言ってくるので
ちょっと、やっぱりSSDのサーバ業者に載せ替えないとなぁと思う今日この頃です。

ボットどうすっかなぁ・・・・。もーめんどくさいなぁｗｗｗ

173.234.159.250 – – [13/Jun/2017:00:49:38 +0900] “GET /page/407?e=2948 HTTP/1.1” 200 33383 “-” “Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)”
173.234.159.250 – – [13/Jun/2017:00:49:45 +0900] “GET /page/407?e=3036 HTTP/1.1” 200 33400 “-” “Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)”
173.234.159.250 – – [13/Jun/2017:00:49:56 +0900] “GET /page/407?e=3088 HTTP/1.1” 200 33428 “-” “Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)”
173.234.159.250 – – [13/Jun/2017:00:50:01 +0900] “GET /page/407?e=3111 HTTP/1.1” 200 33426 “-” “Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)”
173.234.159.250 – – [13/Jun/2017:00:50:07 +0900] “GET /page/407?e=3119 HTTP/1.1” 200 33429 “-” “Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)”
173.234.159.250 – – [13/Jun/2017:00:50:14 +0900] “GET /page/407?e=3124 HTTP/1.1” 200 33419 “-” “Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)”
173.234.159.250 – – [13/Jun/2017:00:50:20 +0900] “GET /page/407?e=3126 HTTP/1.1” 200 33400 “-” “Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)”
173.234.159.250 – – [13/Jun/2017:00:50:27 +0900] “GET /page/407?e=3164 HTTP/1.1” 200 33432 “-” “Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)”
173.234.159.250 – – [13/Jun/2017:00:50:34 +0900] “GET /page/407?e=348 HTTP/1.1” 200 33404 “-” “Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)”

世の中めんどくさいことばかりで嫌になっちゃうねぇ。

The post またボット被害・・・。mj12bot.com first appeared on ～下町物語～.

朝からＺａｂｂｉｘがないてるので見て見ると、負荷が1～2を行ったり来たりしている・・・。

また、Cloud運営で止められてしまうじゃないかｗ
過去2回くらいCloud運営者に警告を受けており、強制停止を食らった事がある。

ただ、その時はメモリーもリークして、さらにスワップしてIOwaitまで発生して
ひどい有様になって停止に至った気がします。

ぶっちゃけ、ここのCloudあまり良く無いので
他のSSD等つかえるCloudにマイグレーションしている最中って事もあって
追々、がっつり移行したいと思います。

表示されるのも、結構襲いですからね。
マグネットディスクを現在使ってますが、
Web公開しかしてないですが、やたらと負荷が高いですからねぇ。
複数Webが動いているってのも事実ですが・・・ｗ

結構な秒数で記事さらってますね・・・。
ドミニカ連邦（ドミニカ国）のBotのようです。
ちょっと、お行儀が悪いですねぇ。
一回iptablesで止めちゃおうかな。悩ましいですよねぇ。

46.229.168.72 – – [06/May/2017:09:29:44 +0900] “GET /page/4?e=3211 HTTP/1.1” 200 134404 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.75 – – [06/May/2017:09:29:47 +0900] “GET /archives/3346 HTTP/1.1” 200 131578 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.74 – – [06/May/2017:09:29:49 +0900] “GET /page/406?e=3524 HTTP/1.1” 200 129471 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.70 – – [06/May/2017:09:29:55 +0900] “GET /page/410?e=246 HTTP/1.1” 200 129668 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.73 – – [06/May/2017:09:29:55 +0900] “GET /page/410?d=20130901 HTTP/1.1” 200 129718 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.72 – – [06/May/2017:09:30:03 +0900] “GET /page/4?e=3211 HTTP/1.1” 200 134398 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.72 – – [06/May/2017:09:30:09 +0900] “GET /page/393?e=1380 HTTP/1.1” 200 130125 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.75 – – [06/May/2017:09:30:13 +0900] “GET /archives/3346 HTTP/1.1” 200 131612 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.71 – – [06/May/2017:09:30:15 +0900] “GET /page/408?c=3- HTTP/1.1” 200 129878 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.73 – – [06/May/2017:09:30:16 +0900] “GET /page/410?d=20130901 HTTP/1.1” 200 129686 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.74 – – [06/May/2017:09:30:18 +0900] “GET /page/406?e=3524 HTTP/1.1” 200 129469 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”
46.229.168.72 – – [06/May/2017:09:30:30 +0900] “GET /page/393?e=1380 HTTP/1.1” 200 130091 “-” “Mozilla/5.0 (compatible; SemrushBot/1.2~bl; +http://www.semrush.com/bot.html)”

リンクを収集しているだけならいいですが、
サイトの魚拓を取って別で公開的なのもあるので、そうなってくると全くこちらとしては
美味しくないですからねぇｗ
うまい・まずいの世界で申し訳ないｗ

The post http://www.semrush.com/bot.html がサイトをクローリング first appeared on ～下町物語～.