アカウント名:
パスワード:
9月6日未明に北海道で発生した地震について [sakura.ad.jp]というプレスリリースが出てます。地震直後、電源切り替え失敗で一部サーバーに障害が出てましたが現在は復旧済みです。原因が公開されたらsradのネタになりそう。
それより、北海道の半分近くを支える苫東厚真発電所 [wikipedia.org]が全滅したので電力供給が絶対的に不足する模様。非常発電機の燃料は48時間備蓄とのことなのですが、優先供給を受けられるのかが気になります。
最悪、37時間以内に何らかの手をこちらで打つ必要があるかもしれないのでサーバー管理者の皆様は覚悟した方が良いかもしれません。
取引先がネットから消える可能性とかも考慮が必要かも……
日本では意外と発生していない「データセンタ障害」はリスク管理からも抜け落ちてることが多いんだけど、日本以外では割と発生しているので「今どきのクラウド設計」ではAZはもちろんリージョン分散も当たり前。
今回は幸運なことに「いきなり落ちる」わけじゃない。まずは37時間後のリスクを見据え、今、出来ることをやれという話だ。
この無給油48時間って、給油しなくても48時間持つってことなんだろうけど稼動中に追加給油可能なのか、連続稼働48時間までというものかどっちなんでしょうね?報道によっては48時間分の備蓄とも書いてあるし。
今までは非常用電源の有無の明記しか気にしていなかったけど当然備蓄量(非常用電源の稼働時間)についても気にしないといけませんね。とても教訓になりました。
「無給油」ってどこから出てきたのかわかりませんが
単に常時備蓄が48時間分ありますよって話じゃないかなそれも使い切りそうなら給油トレーラー横付けして対応ってのはどっかのデータセンターで説明受けたことがあります
この報道に書いてありました http://ascii.jp/elem/000/001/736/1736877/ [ascii.jp]
ちゃんと1次ソースを信用しなきゃいけませんね http://support.sakura.ad.jp/mainte/mainteentry.php?id=24776&_ga=2.... [sakura.ad.jp]
いろいろ中の人も大変だと
「今それを聞いてどうするの?」だわな
別に移せるのなら今すぐ移した方が良いと思うよ
さくら側でインスタンスを東京とかに持って行ってくれるとかならそれはそれで構わない。そういう面で、今後の計画見通しを広報して欲しいとは思います。
まぁ、タイムリミット的に明日の朝には出てるとは思いますが。
投稿後に9月06日03時08分頃に発生した地震による弊社サービスへの影響について [sakura.ad.jp]確認したら更新されてた。
00時26分 : 北海道電力より、稼働に必要な電力量の50%前後の電力供給が再開されました。 この電力供給の再開により、非常用発電設備についてはより長い時間の稼働が 行える見込みとなりました。 また、非常用発電設備の燃料につきましても国および経済産業省のご支援を いただきながら確保を進めております。 今後の状況の変化につきましては、引き続き逐次お知らせいたします。
+48時間の猶予と思えばゆっくりできるかなぁ?
9月7日12時45分の更新に、最悪の事態になる場合の流れが書かれましたね。
なお、電力の復旧が期待できず、燃料枯渇に伴い非常用電源の維持も困難という状況になり、石狩データセンターで提供するサービスの停止が余儀なくされる場合、少なくとも24時間以上前に告知をいたします
追加の燃料を輸送できる状況なのかという話が(自分の観測範囲では)まったく出てこないのが不思議。だだっ広い北海道だとそういう状況にはなりにくい印象はありますが。
> 今、出来ること
ささやき 詠唱 祈り 念じろ!
>ささやき 詠唱 祈り 念じろ!
Anonymous Cowardは灰になりました。
#不謹慎なのでAC
地震直後、電源切り替え失敗で一部サーバーに障害が出てましたが現在は復旧済みです。
さくらの専用サーバ 石狩リージョン 第2ゾーンの一部 障害発生のお知らせhttp://support.sakura.ad.jp/mainte/mainteentry.php?id=24775 [sakura.ad.jp]
9月06日03時08分頃に発生した地震による弊社サービスへの影響についてhttp://support.sakura.ad.jp/mainte/mainteentry.php?id=24776 [sakura.ad.jp]
北海道胆振地方中東部で発生した地震による影響についてhttps://www.sakura.ad.jp/information/announcements/2018/09/06/1968198101/ [sakura.ad.jp]
通信回線が先にダウンするんじゃないだろうか
>現時点では非常用ディーゼル発電機を3基(1500KVAを1基、1000KVAを2基)確保している。http://www.itmedia.co.jp/enterprise/articles/1111/16/news025.html [itmedia.co.jp]
北海道にはさくら以外にもたくさんDCあるけど、電源障害が起きたという話は他に伝わってこないですねぇ。さくらはなんでしくじったんだろ。# うちの会社のDCも元気に稼働中。
石狩DCは、高電圧直流(HVDC)給電システムを採用 [sakura.ad.jp]しているので、UPSも特殊なのかもしれません。DCならではの難しさが有ったとか。
> DCならではの難しさが有ったとか。
データセンターではなくて、直流電流のことだったのですね。素で、いまようやく分かった。
給油なうhttps://twitter.com/sakura_pr/status/1037966000048594944 [twitter.com]
より多くのコメントがこの議論にあるかもしれませんが、JavaScriptが有効ではない環境を使用している場合、クラシックなコメントシステム(D1)に設定を変更する必要があります。
アレゲは一日にしてならず -- アレゲ見習い
さくらインターネットの石狩DCは現在、正常に稼働中 (スコア:5, 興味深い)
9月6日未明に北海道で発生した地震について [sakura.ad.jp]というプレスリリースが出てます。
地震直後、電源切り替え失敗で一部サーバーに障害が出てましたが現在は復旧済みです。
原因が公開されたらsradのネタになりそう。
それより、北海道の半分近くを支える苫東厚真発電所 [wikipedia.org]が全滅したので電力供給が絶対的に不足する模様。
非常発電機の燃料は48時間備蓄とのことなのですが、優先供給を受けられるのかが気になります。
最悪、37時間以内に何らかの手をこちらで打つ必要があるかもしれないのでサーバー管理者の皆様は覚悟した方が良いかもしれません。
取引先がネットから消える可能性とかも考慮が必要かも……
「覚悟」というより「教訓」 (スコア:1)
日本では意外と発生していない「データセンタ障害」はリスク管理からも抜け落ちてることが多いんだけど、
日本以外では割と発生しているので「今どきのクラウド設計」ではAZはもちろんリージョン分散も当たり前。
今回は幸運なことに「いきなり落ちる」わけじゃない。
まずは37時間後のリスクを見据え、今、出来ることをやれという話だ。
Re: (スコア:0)
この無給油48時間って、給油しなくても48時間持つってことなんだろうけど
稼動中に追加給油可能なのか、連続稼働48時間までというものかどっちなんでしょうね?
報道によっては48時間分の備蓄とも書いてあるし。
今までは非常用電源の有無の明記しか気にしていなかったけど
当然備蓄量(非常用電源の稼働時間)についても気にしないといけませんね。
とても教訓になりました。
Re: (スコア:0)
「無給油」ってどこから出てきたのかわかりませんが
単に常時備蓄が48時間分ありますよって話じゃないかな
それも使い切りそうなら給油トレーラー横付けして対応ってのは
どっかのデータセンターで説明受けたことがあります
Re: (スコア:0)
この報道に書いてありました
http://ascii.jp/elem/000/001/736/1736877/ [ascii.jp]
ちゃんと1次ソースを信用しなきゃいけませんね
http://support.sakura.ad.jp/mainte/mainteentry.php?id=24776&_ga=2.... [sakura.ad.jp]
いろいろ中の人も大変だと
Re: (スコア:0)
「今それを聞いてどうするの?」だわな
別に移せるのなら今すぐ移した方が良いと思うよ
Re: (スコア:0)
さくら側でインスタンスを東京とかに持って行ってくれるとかならそれはそれで構わない。
そういう面で、今後の計画見通しを広報して欲しいとは思います。
まぁ、タイムリミット的に明日の朝には出てるとは思いますが。
Re: (スコア:0)
投稿後に9月06日03時08分頃に発生した地震による弊社サービスへの影響について [sakura.ad.jp]確認したら更新されてた。
00時26分 : 北海道電力より、稼働に必要な電力量の50%前後の電力供給が再開されました。
この電力供給の再開により、非常用発電設備についてはより長い時間の稼働が
行える見込みとなりました。
また、非常用発電設備の燃料につきましても国および経済産業省のご支援を
いただきながら確保を進めております。
今後の状況の変化につきましては、引き続き逐次お知らせいたします。
+48時間の猶予と思えばゆっくりできるかなぁ?
Re: (スコア:0)
9月7日12時45分の更新に、最悪の事態になる場合の流れが書かれましたね。
Re: (スコア:0)
追加の燃料を輸送できる状況なのかという話が(自分の観測範囲では)まったく出てこないのが不思議。
だだっ広い北海道だとそういう状況にはなりにくい印象はありますが。
Re: (スコア:0)
> 今、出来ること
ささやき 詠唱 祈り 念じろ!
Re:「覚悟」というより「教訓」 (スコア:1)
>ささやき 詠唱 祈り 念じろ!
Anonymous Cowardは灰になりました。
#不謹慎なのでAC
Re:さくらインターネットの石狩DCは現在、正常に稼働中 (スコア:1)
地震直後、電源切り替え失敗で一部サーバーに障害が出てましたが現在は復旧済みです。
さくらの専用サーバ 石狩リージョン 第2ゾーンの一部 障害発生のお知らせ
http://support.sakura.ad.jp/mainte/mainteentry.php?id=24775 [sakura.ad.jp]
9月06日03時08分頃に発生した地震による弊社サービスへの影響について
http://support.sakura.ad.jp/mainte/mainteentry.php?id=24776 [sakura.ad.jp]
北海道胆振地方中東部で発生した地震による影響について
https://www.sakura.ad.jp/information/announcements/2018/09/06/1968198101/ [sakura.ad.jp]
Re: (スコア:0)
通信回線が先にダウンするんじゃないだろうか
Re: (スコア:0)
>現時点では非常用ディーゼル発電機を3基(1500KVAを1基、1000KVAを2基)確保している。
http://www.itmedia.co.jp/enterprise/articles/1111/16/news025.html [itmedia.co.jp]
Re: (スコア:0)
北海道にはさくら以外にもたくさんDCあるけど、電源障害が起きたという話は他に伝わってこないですねぇ。
さくらはなんでしくじったんだろ。
# うちの会社のDCも元気に稼働中。
Re: (スコア:0)
石狩DCは、高電圧直流(HVDC)給電システムを採用 [sakura.ad.jp]しているので、UPSも特殊なのかもしれません。
DCならではの難しさが有ったとか。
Re: (スコア:0)
> DCならではの難しさが有ったとか。
データセンターではなくて、直流電流のことだったのですね。
素で、いまようやく分かった。
Re: (スコア:0)
給油なう
https://twitter.com/sakura_pr/status/1037966000048594944 [twitter.com]