2021-01-22

anond:20210122102514

CPU利用率が常時1%未満だったのが(年単位で安定駆動)100%超えている

 

どうかんがえても、悪質なクローラー

 

とはいえ、こういうのを各にわか学生がふえかねないとなると、こっちで対応だろうな

なぜ、クローラーが3秒に1つとかしかクロールしてこないか

 

しかも、これ100%いくって、同時にいくつクロールしたんだ

オートスケール切ってるからいいようなもの

入れてたらいくら無料記事で払わせる気だ

 

記事公告と引き換えに無料

全部持っていって勝手に保存して良いものはいいがたい。だめじゃないけど、何考えてんだ

しかも、オリジンにこの時間となると

いちおう1配信0.001円ぐらいはかかるのだが・・・

記事への反応 -
  • クローラー回しているやつがいるな 単一記事が爆発的にアクセスされるのはキャッシュでたえるようにつくってあるんだが すべての記事をクロールしようとかすると負荷でサーバが落ち...

    • CPU利用率が常時1%未満だったのが(年単位で安定駆動)100%超えている   どうかんがえても、悪質なクローラー   とはいえ、こういうのを各にわか学生がふえかねないとなると...

      • 情報を読もうとしたのではなく、収集しているねぇこの動きはこれは、利用目的が情報の収集と保存だろうな。

記事への反応(ブックマークコメント)

ログイン ユーザー登録
ようこそ ゲスト さん