SHIN's Diary

■ 厄{日,週,月,年} どれだ?

最近仕事関係で障害多し。自分達が原因でないものの方が多いが。

• 1/26: 客先設置のFWが4時間に一度沈黙→一旦とりはずす
• 1/28: 客先DBサーバ不調→ハード障害
• 1/28: グループ会社WEBサーバクラッシュ

お客さんも「今年はおおいよねぇ〜。はぁ〜。」とブルーになっていた。我々も負けずにブルー…。

■ 朝まで作業…

その障害で自分が一番痛かったのは最後のWebサーバ。

このサーバはディスク3台で構成していたRAID5の1台が死んでいた。諸事情により通常ルートで修理が頼めないブツなので担当者にWarningをあげておいたが結局数ヵ月放置され、もう1台ディスクが死んでしまっておしまい…。

この中でグループ会社がやっているサービスも動いていてそれなりに急いで復旧させることが必要だっので、がんばることにした(細かいことを言うと保守も結んでないのだが…)。

必要なコンテンツはすべて作った人間が持っていたのでその点は苦労せず。ふる〜いコンテンツはこの際廃棄ということに。

＃バックアップがなかったとも言う。(^^;;

始発まで1時間くらいの時間で復旧。電車が動くまで待って帰った。

■ ルータだよぉ〜

FWを外したときにルータで余計なポートも塞いでいたらしい。

みかかさま…。

■ そんなわけで

更新が遅いのでした。

ふぅ。