度重なるサーバダウン

金土と同じような時間帯に大量のトラックバックSPAMを受け、サーバ負荷がピークに。後からsyslogを調べてみると、メモリ消費量が異様に増え続けてswapまで食い尽くし、すべてのサービスがダウン寸前までに至っていたようだ。

それでも金曜日はなんとかリモートログインして再起動できたりしたのだが、土曜日はまったくもってお手上げ状態。一応、pingが通るので完全なるダウンではないが、もはやリモートでの対応は不可能だと判断。データセンターへ赴いての緊急メンテナンスとなった。

根本的な原因がメモリ不足ということは分かっているのだが、とりあえずシステム的に可能なことを先にやっておいた。不要なデーモンを極力落とし、Apacheの子プロセスも暫定的に減らした上でyumによるアップデートをかけておいた。