パスワードを忘れた? アカウント作成
15608915 journal
変なモノ

nemui4の日記: 節電でコンセント抜いたらDiskが逝ったそうな 12

日記 by nemui4

掃除のおばちゃんがサーバー室でというのはよく聞く都市伝説っぽいけど。
計画停電の指示でいきなり電源ケーブル引っこ抜かれちゃってサーバーが起動しなくなったと。
https://togetter.com/li/1863657

【悲報】弊社鯖、節電計画停電によるコンセント乱れ抜きで無事逝く【売上・商品管理鯖】

いやマジでアホか???アホだな????

事件の概要としましては、まず計画停電が行われるので
機器類の電源を落としてコンセントも抜いておけ、とのお達しが出たのが始まりでした。

この指令に従い、ITにはひたすら疎い現場管理者が文字通りサーバー機器も含む全ての電源を抜くといった暴挙を起こします。
はい、ITに疎い者がシャットダウン処理を...マニュアルも無しに行いと言うか電源をそのまま落としました。

結論を言いますと、この杜撰な管理からメインサーバーはハードディスククラッシュ、サブサーバーは何とか復旧したものの「何故動いてるかわからない程」となり、現在はサブサーバー1本体制で新サーバーまで耐えろとの状況です

電源を落とすのにshutdown手順をすっ飛ばした様子。
販売業だと、サーバーの取り扱いに気を配れる人もあまりいないのでしょうけどお疲れさまです。

この議論は賞味期限が切れたので、アーカイブ化されています。 新たにコメントを付けることはできません。
  • by miyuri (33181) on 2022年03月26日 13時09分 (#4221892) 日記

    メインサーバーはハードディスククラッシュ

    ( ´_ゝ`)

    • by Anonymous Coward

      最近のサーバ+HDDはAC電源抜いたぐらいじゃクラッシュしないですね。
      HDD側で電圧低下検知して、保持電荷でヘッド退避するので。

      そりゃブートセクタとかカーネル書き換えてる瞬間に電源落ちればOS起動しなくなるけど、どんな確率なのかと。
      その場合でもバックアップから復旧すれば問題ないでしょう。

      • by Anonymous Coward

        確率的にはまあ数打てば当たるので。
        でもバックアップのサーバがあるからそっちからチョロチョロコピーすればいいよね。

        • by nemui4 (20313) on 2022年03月26日 17時57分 (#4221982) 日記

          サーバー室に行くと、電源抜いて無くてもDiskは壊れていますね。

          親コメント
        • by Anonymous Coward

          計画停電は実施された事実が無いのに節電のために基幹サーバ止める判断する会社で、かつ、いきなり電源抜く無能な現場管理者が存在する会社。
          これが数打てるほど存在するのだろうか?

    • by Anonymous Coward

      仮にこの話が本当だとしても、停電に対するケアを一切していなかったのがたまたま今回発覚しただけだよね

      • by Anonymous Coward on 2022年03月26日 17時54分 (#4221980)

        UPSの電源スイッチ長押しで強制断された事が有る。
        「電源切れなかったから」だそうな。
        UPSの電源ボタンの上に「押す前に電話」と貼られるように。
        今回の事例、コンセントを抜いたらしいけど、抜いた元がPDUだったら少し同情しますわ。

        今回のHDDクラッシュは計画停電明けによくある、
        電気系の劣化でスピンアップに必要な設計値まで電力が上がらないとか、
        潤滑の劣化で正常にスピンアップ出来ないパターンでしょうね。
        短時間の停止なら大丈夫でも、止まってHDDが冷えると起動しなくなるやつ。

        親コメント
        • by nemui4 (20313) on 2022年03月26日 18時07分 (#4221984) 日記

          >今回のHDDクラッシュは計画停電明けによくある、

          年一法定点検で建屋丸ごと停電して、復電後順番に起動しますが。
          一定数起動しなくなるか起動してもDiskや何かが壊れるのはありますね。
          とりあえず全部あげて、上がらないやつとランプ点灯してる機器をリストアップして、翌朝サポートに連絡。

          親コメント
  • by Anonymous Coward on 2022年03月26日 10時44分 (#4221821)

    >犯人猫曰く「普通に立ち上げたら黒い画面に変な英語が出た、壊れた」
    猫じゃないにゃ

typodupeerror

私はプログラマです。1040 formに私の職業としてそう書いています -- Ken Thompson

読み込み中...