【Linux】あるLinuxサーバが突如として動作しなくなった話

Contents

昔話なんです

これ書いてて思い出しました。黒いよ。

かつて出向先があるシステム（社会的影響力とか半端なくてプログラマ1人月で面倒見てちゃいけなかった規模の製品）を運営していた頃、朝飯も喰う前から「システムが動かない！」と電話が。

ひとまず出向先に向かいコンソールをsshすると、確かにapache動いてない

何故？と思い、freeコマンドを叩いてみたら解決

ログファイルが溜まりに溜まってディスク容量が0になり、新たにログが蓄積できず動きませんでした、と

仕方ないのでひとまず一旦リブート。
/var/log配下ら辺のアーカイブ的なファイルを削除。
その上でもういっぺんリブート。apache起動。事なきを得た。

結局のところサーバが閉域網内なので、手立てとしてはやっぱり出てこないとならなかったんですが、運営後半になってやっとMuninを入れました。

意外にこういうことあります。サーバの容量管理はきちんとやろう！w