nemui4の日記: 節電でコンセント抜いたらDiskが逝ったそうな 12
日記 by
nemui4
掃除のおばちゃんがサーバー室でというのはよく聞く都市伝説っぽいけど。
計画停電の指示でいきなり電源ケーブル引っこ抜かれちゃってサーバーが起動しなくなったと。
https://togetter.com/li/1863657
【悲報】弊社鯖、節電計画停電によるコンセント乱れ抜きで無事逝く【売上・商品管理鯖】
いやマジでアホか???アホだな????
事件の概要としましては、まず計画停電が行われるので
機器類の電源を落としてコンセントも抜いておけ、とのお達しが出たのが始まりでした。
この指令に従い、ITにはひたすら疎い現場管理者が文字通りサーバー機器も含む全ての電源を抜くといった暴挙を起こします。
はい、ITに疎い者がシャットダウン処理を...マニュアルも無しに行いと言うか電源をそのまま落としました。
結論を言いますと、この杜撰な管理からメインサーバーはハードディスククラッシュ、サブサーバーは何とか復旧したものの「何故動いてるかわからない程」となり、現在はサブサーバー1本体制で新サーバーまで耐えろとの状況です
電源を落とすのにshutdown手順をすっ飛ばした様子。
販売業だと、サーバーの取り扱いに気を配れる人もあまりいないのでしょうけどお疲れさまです。
嘘臭さ (スコア:2)
( ´_ゝ`)
Re: (スコア:0)
最近のサーバ+HDDはAC電源抜いたぐらいじゃクラッシュしないですね。
HDD側で電圧低下検知して、保持電荷でヘッド退避するので。
そりゃブートセクタとかカーネル書き換えてる瞬間に電源落ちればOS起動しなくなるけど、どんな確率なのかと。
その場合でもバックアップから復旧すれば問題ないでしょう。
Re: (スコア:0)
確率的にはまあ数打てば当たるので。
でもバックアップのサーバがあるからそっちからチョロチョロコピーすればいいよね。
Re:嘘臭さ (スコア:1)
サーバー室に行くと、電源抜いて無くてもDiskは壊れていますね。
Re: (スコア:0)
計画停電は実施された事実が無いのに節電のために基幹サーバ止める判断する会社で、かつ、いきなり電源抜く無能な現場管理者が存在する会社。
これが数打てるほど存在するのだろうか?
Re:嘘臭さ (スコア:1)
「数」の定義次第だね
がんばれマウント合戦
Re: (スコア:0)
I/O error
Re: (スコア:0)
仮にこの話が本当だとしても、停電に対するケアを一切していなかったのがたまたま今回発覚しただけだよね
Re:嘘臭さ (スコア:1)
UPSの電源スイッチ長押しで強制断された事が有る。
「電源切れなかったから」だそうな。
UPSの電源ボタンの上に「押す前に電話」と貼られるように。
今回の事例、コンセントを抜いたらしいけど、抜いた元がPDUだったら少し同情しますわ。
今回のHDDクラッシュは計画停電明けによくある、
電気系の劣化でスピンアップに必要な設計値まで電力が上がらないとか、
潤滑の劣化で正常にスピンアップ出来ないパターンでしょうね。
短時間の停止なら大丈夫でも、止まってHDDが冷えると起動しなくなるやつ。
Re:嘘臭さ (スコア:1)
>今回のHDDクラッシュは計画停電明けによくある、
年一法定点検で建屋丸ごと停電して、復電後順番に起動しますが。
一定数起動しなくなるか起動してもDiskや何かが壊れるのはありますね。
とりあえず全部あげて、上がらないやつとランプ点灯してる機器をリストアップして、翌朝サポートに連絡。
風評被害ニャ (スコア:0)
>犯人猫曰く「普通に立ち上げたら黒い画面に変な英語が出た、壊れた」
猫じゃないにゃ
Re:風評被害ニャ (スコア:1)
現場猫的な意味の猫では