Follow Me


    2018年09月12日

    【北海道地震】約60時間の停電を乗り切った石狩データセンターすげええええ!

    2018年09月12日

    (6)Comments

    Unknown-266
    1: 2018/09/10(月) 19:01:53.70 ID:CAP_USER
     2018年9月6日に北海道を襲った震災により、停電状態に陥ったさくらインターネットの石狩データセンターに対し、9月8日ようやく電力供給が再開された。想定を超えた約60時間を非常用電源設備で乗り切り、インフラ事業者としての矜持を見せた石狩データセンターの「奇跡」について、改めてきちんと説明していきたいと思う。

    卓越したオペレーション能力で「想定外」を「想定内」に
     2011年11月に開設された石狩データセンターは、数多くのサーバーを収容するさくらインターネットの基幹データセンターになる。開設当時はソーシャルゲームの普及でサーバーの需要がうなぎ登りだったほか、環境に配慮したエコなデータセンターが求められていた。こうしたニーズに対応する石狩データセンターは、寒冷地のメリットを活かした外気冷却と東京ドーム1個分に相当する広大な敷地を用いたスケーラビリティが大きな売りだった。私も開設時と増設時で2回ほど現地に足を運んでおり、現地のエンジニアとも話をしている。同じデータセンターに2度訪れることなんてほぼないので、個人的にも思い入れが深い。

     思い起こせば、なぜ石狩だったのか? 皮肉なことにその大きな一因は災害リスクが低いことであった。同社の石狩データセンターの紹介にも「石狩地域は、今後30年間で震度6以上の地震が発生する確率が0.1~3%と低く、(以下略)」と明記されており、さくらインターネットにとっても今回の地震は「想定外」だったはずだ。しかし、今回さくらは約3000ラックを超える巨大データセンターを非常用電源設備で60時間無停止で運用し続けた。卓越したオペレーション能力で未曾有の停電を乗り切り、「想定外」を「想定内」にしてしまったのだ。

    東日本大震災のときは首都圏のデータセンターが停電の影響をあまり受けてないので、ここまで長時間での非常用電源設備の運用はおそらく初めて。世界的に見てもあまり例を見ないはずだ。しかも、途中で電力が一部復活し、燃料調達にめどが付いたこともあり、非常用電源設備停止の直前は、1週間近い連続稼働まで視野に入れていた。薄氷を踏むどころか、最後は余力すらあったわけだ。

    さくらにとって絶対落とせなかった石狩データセンター
     まずは話の前提としてデータセンターの停電対策について簡単に説明しておきたい。実は9月6日に北海道の震災が発生してから、石狩データセンターに関しては経緯から復旧まで3本の記事を挙げているのだが、どれもシンプルな速報体裁。細かい説明を割愛していたため、書き手としてもどれだけ読者に伝わっているか正直不安だった。しかも、ITに対する知識の不足により、いたずらに不安をあおるような報道も多い。これを読めば、今回さくらがどれだけすごかったのか、信頼性というデータセンターの役割をきちんと果したのか、少しは理解してもらえるはずだ。

     個人・企業問わず数多くのサーバーが集まるデータセンターでは、停電時の対策として非常用電源設備が用意されている。そのため、電力会社からの電力供給が停止すると、バックアップ用のUPSで非常電源設備の起動までの時間を確保し、ガスや重油などの燃料を用いて自家発電するようになっている。発電の際に用いられる燃料も多くのデータセンターでは48時間程度の燃料が備蓄されているので、停電が起こってもおおむね2日間は運用は止まらない。とはいえ、一連の設備はどれも高価で、日本でも自前できちんと運用できる事業者はそれほど多くない。さくらインターネットはこうした数少ない事業者のうちの1つだ。

     石狩データセンターでも48時間稼働する分の重油を備蓄していた。しかし、今回の大規模な停電からの復旧は当初「1週間後」と発表されており、実際に東日本大震災のときは停電解消が約80%に至るまで3日間、94%に至るまで8日間かかっている。そのため、電力供給が再開せず、重油が足りなくなったら、石狩データセンター自体の稼働を停止しなければならなかった。

     もし石狩データセンターが停止に追い込まれたら、そのインパクトは計り知れない。40万以上にも上るさくらのレンタルサーバのユーザーや、メルカリやマネーフォワードといったWebサービス事業者、官公庁や学術機関などのサービスも大きな影響を受けることになる。また、石狩データセンターならではの事情として、ユーザー自身が運用するコロケーションもそれなりにある。さくらインターネットにとっては絶対落とせないデータセンターなのだ。

    http://ascii.jp/elem/000/001/738/1738515/


    5: 2018/09/10(月) 19:07:32.32 ID:cW5AYHrg
    燃料確保頑張ったね

    これでいい?

    22: 2018/09/10(月) 19:26:16.58 ID:fOUY37N7
    >>5
    その通り
    燃料の行先は病院、避難所(小中学校)、市町村の庁舎などが最優先
    放送通信と言えども企業なので、これらの次になる
    48時間分は常時蓄えてたとして、プラス12時間分の補給できたことは評価すべき

    6: 2018/09/10(月) 19:07:47.01 ID:mW1t0Ugp
    現場が無理してでもやると
    上は「それができて当たり前」になるからなあ

    7: 2018/09/10(月) 19:08:41.84 ID:20FIt5my
    で、どうやって切る抜けた?

    8: 2018/09/10(月) 19:10:23.18 ID:dPy8d9Hi
    北海道は電力供給のリスクが高いことが露呈したから
    データセンターには向いてない 最近は涼しくもないし

    50: 2018/09/10(月) 20:30:42.49 ID:oObxeZST
    >>8
    1ヶ所で道内半分調達って危機管理なってないだろ。
    すぐ近くに大活火山樽前山有るんだし。
    北海道新幹線がなぜ南回りルート取らないか小一時間考えろと。

    150: 2018/09/10(月) 23:28:21.97 ID:R5YtTV2c
    >>8
    原発が動いていれば、そんなむちゃな状況にはならなかったんだよなぁ
    原発動かさずに、電力のベストミックスは現状無いわな
    太陽光は肝心なときに役に立たないし

    242: 2018/09/11(火) 07:54:07.32 ID:8Z2A3Vm0
    >>150
    原発止まって何年になるんだよ
    非常時の対応を投げっぱにしてたのが悪い

    11: 2018/09/10(月) 19:12:03.25 ID:Lsmkiqbd
    奇跡と努力は違うと思うw

    12: 2018/09/10(月) 19:13:09.97 ID:flQmgFTp
    燃料追加調達できるよう、連続48時間の自家発電システム組んでました。
    な、目論見通りだろ?
    という記事

    13: 2018/09/10(月) 19:13:16.36 ID:fG8wI/f+
    さくらインターネットのVPSをまさに使っているが
    随時メールをくれていたので安心できた

    15: 2018/09/10(月) 19:14:50.24 ID:FxV8qh5g
    どっちにしろ周辺の電源は全てブラックアウトしてたんだし
    外部アクセスはほぼ無かったから大した電気消費量にならなかったとかそんなオチか

    181: 2018/09/11(火) 03:54:16.34 ID:i1//Kd+w
    >>15
    何言ってるの? 通信網も生きてるんだから、全国からアクセスあるよ。誰でも知ってる企業やサービスを動かすサーバーを預かってるからね。

    16: 2018/09/10(月) 19:16:02.99 ID:yB2iIsEG
    どこに努力の要素があるんだ?

    17: 2018/09/10(月) 19:20:37.76 ID:ZzTRvRzB
    本来の使命を果たした非常用電源が一言
                   ↓

    19: 2018/09/10(月) 19:23:32.30 ID:PoUvaah1
    非常電源用の燃料調達リードタイムを見越した設計してましたってこと?

    21: 2018/09/10(月) 19:25:36.98 ID:FA5AXlXQ
    奇跡でもなんでもね~よ。非常用発電設備もっていてきっちり保守管理してりゃ
    当たり前の話だよ。逆にきっちり保守管理してないところは肝心な時に非常用電源
    が役に立たたず損失こうむってるところがたくさんあるよ。

    32: 2018/09/10(月) 19:42:29.19 ID:SAdvjcPs
    >>21
    この業界ではきっちり保守管理できるだけのリソースが適切に注ぎ込まれていることが奇跡なんですよ…

    35: 2018/09/10(月) 19:45:23.37 ID:tL+6Rf0m
    >>32
    それは言えてる

    102: 2018/09/10(月) 21:24:15.20 ID:K9J23CLu
    >>32
    確かに。保守を本気でやると金にならないからなぁ。

    40: 2018/09/10(月) 20:07:23.26 ID:4pzDAAZw
    >>21
    > 奇跡でもなんでもね~よ。非常用発電設備もっていてきっちり保守管理してりゃ
    > 当たり前の話だよ。
    それが大変なことを知らないんだなァ

    163: 2018/09/11(火) 00:05:40.66 ID:5QeHIH99
    >>40
    そうそうわからん奴らは仕事してないできないことを告白してるだけだね
    あほ丸出し他人に厳しく自分には優しくの糞が増えてイライラするわ
    当たり前だろと言う前に自分が出来てるか振り返ればいい

    73: 2018/09/10(月) 20:59:17.86 ID:QXKWIg4q
    >>21

    今回で本当に企業の力が観れてよかった。
    このご時世、非常電源や自家発電無い方がおかしいし。

    158: 2018/09/10(月) 23:53:27.36 ID:LpDo6nA+
    >>21
    やわらか銀行のDCにはできないとおもうぞ

    160: 2018/09/11(火) 00:01:13.83 ID:CJbpLzgG
    >>21
    保守管理できてねえんだよな。
    記事を読むと、さくらもUPSの障害で四時間不具合が一部で出た。
    そこは改善点

    27: 2018/09/10(月) 19:33:16.61 ID:TdQGAY7p
    アクセスが減ると、稼働サーバー数を半分にして分散処理出来る仕組みを用意しておいたからというのだろうか。
    サーバー半分なら、単純に考えて消費電力も半分。
    48時間の2倍の96時間乗り切れるだろう。

    28: 2018/09/10(月) 19:34:38.80 ID:zIxDgfiP
    普通の非常用発電機だとメーカー保証は連続24時間までのところも多い。
    そういう観点からすると奇跡と言えなくはないかもしれない。
    メンテは当然されていたんだろうけど。

    30: 2018/09/10(月) 19:39:22.67 ID:KUK35eIz
    非常用電源さえあれば大丈夫 by 原発

    129: 2018/09/10(月) 22:22:38.43 ID:UQOKiDT4
    >>30
    ディーゼル発電機とか、離島では普通に使ってるしな

    31: 2018/09/10(月) 19:41:52.18 ID:MN8znmQZ
    過去に致命的な大トラブル2回起こしている
    ペテン禿グループのデータセンター会社に爪の垢を煎じて飲ませたい

    183: 2018/09/11(火) 03:59:45.42 ID:i1//Kd+w
    >>31
    あぁ、大阪のね

    193: 2018/09/11(火) 04:57:45.67 ID:eBwDSzxr
    >>183
    そうなの?
    コスト削りすぎだろ
    なのに、仕事はやたら細かいというか、何の罰だよって感じw

    194: 2018/09/11(火) 05:04:12.89 ID:LVdHUBU+
    >>183
    サーバメンテで
    バックアップまで丸ごとデータ消去しちゃった所か

    316: 2018/09/11(火) 20:50:49.37 ID:pKbBiiDL
    >>31
    あぁワーストサーバか

    33: 2018/09/10(月) 19:44:25.13 ID:GF+zdjo6
    節電しろ

    36: 2018/09/10(月) 19:49:32.49 ID:f7OgXDnb
    ウチもさくら使ってるが予想に反して一度も止まらなかったよ
    まー正直メールさえ使えればビジネスには影響なかったんだが
    安い割にはいいと思う

    37: 2018/09/10(月) 20:00:37.64 ID:uYz9VoNm
    どここ企業が入ってるとか公開していいの(´・ω・`)

    39: 2018/09/10(月) 20:02:07.51 ID:HmQWlOXs
    さくらですら停電に対応できるのに東電ときたら

    45: 2018/09/10(月) 20:22:58.94 ID:PCVJttx7
    技術者がそう設計したんやろ
    奇跡でも何でもなく技術者の勝利やろ
    一方原発は…

    49: 2018/09/10(月) 20:30:04.29 ID:4pzDAAZw
    >>45
    設計した通りに動くかどうかは、一重に運用者に掛かっている

    そのことを分かっていない素人の癖に、偉そうなバカが多いのが現実

    126: 2018/09/10(月) 22:10:04.57 ID:XetfF7nr
    >>49
    良いこと言う。でも(偏に)な。

    56: 2018/09/10(月) 20:43:23.52 ID:ODZdj0Q3
    これは感謝感激です。 無事、予定期間に、WebAppデバッグを終えました。 サーバーが落ちるかとヒヤヒヤでした。

    63: 2018/09/10(月) 20:50:00.44 ID:73j13zuY
    おれんちのサーバも止まってないよ
    すげーだろ

    64: 2018/09/10(月) 20:53:27.15 ID:X7QshxpO
    災害のときに平然と動き続けるって物凄いな・・・













    1001: 以下おすすめ記事をお送りします

    new_f6b3e24a
    【うーん】あの『JD』って実質無罪じゃね?

    俺「Netflix登録したわ」 元友「あ、俺も見たいからメアドとパスワード教えて」

    【どう見てもアウトw】”悪質”撮り鉄、ついにこんなコトまでし出すwww(画像あり)

    面接官「君、メールで『本日X時X分に貴社に"伺います"』って書いてたよね?」

    【朗報】橋本環奈さん、谷間くっきりショット公開「色気がヤバい」悶絶の声殺到(※画像あり)

    須藤凜々花「今しまくりです」 ←これwwwwwwww

    【画像】Twitter民「タバコから大量に虫出てきた…キモすぎ…」

    ワイの彼女「回避依存症」って病抱えててまんまこれなんやけどお前ら耐えられるこれ?

    【クッソカッコイイw】引退後に”こんな姿”になる元力士っている?www(画像あり)

    【画像】マリア・シャラポワ(31)「こんなおばさんでいいの・・・?」

    居酒屋「お通し500円、席代700円、週末料金700円いただきます^^!」若者「あほくさ…」

    「あっこいつ地雷だな」ってなるゲームのハンドルネームってあるよな

    【画像あり】暑すぎて露出が半端ない水着を着るすごいJKさん現る

    【悲報】光回線さん、PS4と偽り習字の文鎮を景品にしてしまうwwwwww(画像あり)

    女「えーモテそうなのにー」「彼女いそうなのにー」←これ

    【悲報】スタバ、イタリア初出店でとんでもない店舗を作ってしまう…(画像あり)

    ロシア×中国の血が混じった結果・・・美少女すぎwwww(※画像あり) 

    【闇深】メルカリ初心者の俺、連続で詐欺に引っ掛かるwww

    美容師がリカちゃん人形の髪を本気でカットした結果www

    80kg彼女「ねーいつ結婚してくれるの?」 ワイ「せめて20kg落とせ」 →→

    サザエ「今日から健康のために母さんには>>5だけ与えて生活させるわ」








    引用元:http://egg.5ch.net/test/read.cgi/bizplus/1536573713/

    posted by news4wide at 23:10| Comment(6) | ニュース・時事 | このブログの読者になる | 更新情報をチェックする

    この記事に関するTweet等

    この記事へのリンク用タグ

    オススメ新着記事

    はてなブックマーク人気記事

      今月の人気記事

      この記事へのコメント

      1. 名無しワイドガイド at 2018年09月12日 23:27
        原発止まってから北電は何もしてない、とか思い込んでるバカは氏ねばいいのに
      2. 名無しワイドガイド at 2018年09月12日 23:35
        電気もそうだけど、あるのが「当たり前」になってると傲慢な要求しがちよね
        各種インフラや日常で使ってるもの全部維持してくれてる人たちのおかげ つか仕事してるなら自分もその歯車の一つなわけで感謝を忘れちゃアカン
      3. 名無しワイドガイド at 2018年09月12日 23:38
        たった三日未満の電源喪失すら想定外とか日本全体がお花畑化してしまったな…
      4. 名無しワイドガイド at 2018年09月13日 02:23
        札幌市内は30~40時間で通電したけど、60時間は長いな
      5. 名無しワイドガイド at 2018年09月13日 07:20
        ※3
        SLA定義は24-365だけどディザスタリカバリは別要件(AZ分離が必須)とか、ITでは普通だからね。
        60時間継続してサービス提供できたのはすごいと思うよ。
      6. 名無しワイドガイド at 2018年09月13日 10:03
        停電でも通信網生きてた方が驚き

      この記事へのコメントを書く

      コチラをクリックしてください