約60時間を非常用電源設備で乗り切った石狩データセンターの奇跡
文●大谷イビサ/TECH.ASCII.jp
2018年09月10日 09時30分
2018年9月6日に北海道を襲った震災により、停電状態に陥ったさくらインターネットの石狩データセンターに対し、9月8日ようやく電力供給が再開された。想定を超えた約60時間を非常用電源設備で乗り切り、インフラ事業者としての矜持を見せた石狩データセンターの「奇跡」について、改めてきちんと説明していきたいと思う。
卓越したオペレーション能力で「想定外」を「想定内」に
2011年11月に開設された石狩データセンターは、数多くのサーバーを収容するさくらインターネットの基幹データセンターになる。開設当時はソーシャルゲームの普及でサーバーの需要がうなぎ登りだったほか、環境に配慮したエコなデータセンターが求められていた。こうしたニーズに対応する石狩データセンターは、寒冷地のメリットを活かした外気冷却と東京ドーム1個分に相当する広大な敷地を用いたスケーラビリティが大きな売りだった。私も開設時と増設時で2回ほど現地に足を運んでおり、現地のエンジニアとも話をしている。同じデータセンターに2度訪れることなんてほぼないので、個人的にも思い入れが深い。
思い起こせば、なぜ石狩だったのか? 皮肉なことにその大きな一因は災害リスクが低いことであった。同社の石狩データセンターの紹介にも「石狩地域は、今後30年間で震度6以上の地震が発生する確率が0.1~3%と低く、(以下略)」と明記されており、さくらインターネットにとっても今回の地震は「想定外」だったはずだ。しかし、今回さくらは約3000ラックを超える巨大データセンターを非常用電源設備で60時間無停止で運用し続けた。卓越したオペレーション能力で未曾有の停電を乗り切り、「想定外」を「想定内」にしてしまったのだ。
東日本大震災のときは首都圏のデータセンターが停電の影響をあまり受けてないので、ここまで長時間での非常用電源設備の運用はおそらく初めて。世界的に見てもあまり例を見ないはずだ。しかも、途中で電力が一部復活し、燃料調達にめどが付いたこともあり、非常用電源設備停止の直前は、1週間近い連続稼働まで視野に入れていた。薄氷を踏むどころか、最後は余力すらあったわけだ。
さくらにとって絶対落とせなかった石狩データセンター
まずは話の前提としてデータセンターの停電対策について簡単に説明しておきたい。実は9月6日に北海道の震災が発生してから、石狩データセンターに関しては経緯から復旧まで3本の記事を挙げているのだが、どれもシンプルな速報体裁。細かい説明を割愛していたため、書き手としてもどれだけ読者に伝わっているか正直不安だった。しかも、ITに対する知識の不足により、いたずらに不安をあおるような報道も多い。これを読めば、今回さくらがどれだけすごかったのか、信頼性というデータセンターの役割をきちんと果したのか、少しは理解してもらえるはずだ。
個人・企業問わず数多くのサーバーが集まるデータセンターでは、停電時の対策として非常用電源設備が用意されている。そのため、電力会社からの電力供給が停止すると、バックアップ用のUPSで非常電源設備の起動までの時間を確保し、ガスや重油などの燃料を用いて自家発電するようになっている。発電の際に用いられる燃料も多くのデータセンターでは48時間程度の燃料が備蓄されているので、停電が起こってもおおむね2日間は運用は止まらない。とはいえ、一連の設備はどれも高価で、日本でも自前できちんと運用できる事業者はそれほど多くない。さくらインターネットはこうした数少ない事業者のうちの1つだ。
石狩データセンターでも48時間稼働する分の重油を備蓄していた。しかし、今回の大規模な停電からの復旧は当初「1週間後」と発表されており、実際に東日本大震災のときは停電解消が約80%に至るまで3日間、94%に至るまで8日間かかっている。そのため、電力供給が再開せず、重油が足りなくなったら、石狩データセンター自体の稼働を停止しなければならなかった。
もし石狩データセンターが停止に追い込まれたら、そのインパクトは計り知れない。40万以上にも上るさくらのレンタルサーバのユーザーや、メルカリやマネーフォワードといったWebサービス事業者、官公庁や学術機関などのサービスも大きな影響を受けることになる。また、石狩データセンターならではの事情として、ユーザー自身が運用するコロケーションもそれなりにある。さくらインターネットにとっては絶対落とせないデータセンターなのだ。
非常時の運用を支えたエンジニア、さくらのチーム力に拍手を
停止した場合の影響が大きく、しかも給電がいつ再開されるかわからないという絶体絶命の状態だったが、さくらインターネットは見事この難関を乗り切った。
停電当初はUPSの障害により、一部のサーバーで障害が発生したものの、これは約4時間で解消し、無事に非常用電源設備の運用に切り替えた。その後、石狩市役所、経済産業省など関係各所からの燃料調達により、非常用電源設備で約60時間も稼働させた。停電にも関わらず、約3000ラックを有する巨大データセンターを2日半無停止で運用し続けたのだ。
やはり賞賛されるべきは、石狩データセンターの現場のエンジニアだ。おおよそ災害対策やBCPと呼ばれるものはあくまで「計画」に過ぎず、本番のときにうまく機能しなかったという例は枚挙にいとまがない。その点、さくらの場合、普段の訓練や保守をきちんと実施し、関係機関と密に連携してきたからこそ、「北海道全土で停電する」という未曾有の事態にも対応できたわけだ。あたりが圧倒的な闇に沈み、家族や実家が心配という不安の中、「よくがんばったね」と現地のエンジニアに声をかけたい。
そして、そんな現地のエンジニアたちをさくらのチーム力が支えた。外部と連携して燃料を調達したり、ユーザーやパートナーからの数多くの問い合わせをさばいたり、正確な情報を外部にリアルタイムに発信したりといった活動をタイムラインで見ながら、「絶対にデータセンターを落とさない」という気概を感じた。これこそ物理的なインフラからクラウドサービスまでを一気通貫で提供できるさくらインターネットの強み。今回の件は、豊富な資金とスケールを持つメガクラウドとは異なる価値観を提供するさくらインターネットの存在意義を世に知らしめ、ユーザーから圧倒的な信頼感を勝ち取るはずだ。
■関連記事
- 石狩データセンターへの電力供給が回復
- 非常用電源設備で運用中の石狩DC、燃料確保の見込み
- さくらの石狩データセンター、停電によるサービス障害から復旧
- さくら石狩DCが3号棟建設発表、空調&設備は新コンセプトで
- 最新技術の実験場「石狩データセンター」のすべて
- さくらなど、太陽光発電所から石狩DCへ直流超電導送電を開始
- 大谷イビサのIT業界物見遊山
- 北海道の地震から停電復旧まで 千歳ではジンギスカンで過ごす
- 北海道地震から停電復旧で助かったのはマキタの製品と友達ネットワーク
- 週刊アスキーNo.1196(2018年9月18日発行)
- 粗大ゴミの受付をLINEで実現!福岡市で実証実験
- さくらインターネット、ImageFluxサービス約款を改定
- JSSA北海道ランチ交流会にてさくらインターネット代表が登壇
- 北海道が暗闇に沈んだブラックアウトはなぜ起きたのか
- さくら、SIGNATEとの協力で衛星データの分析コンテストを開催
- さくらのネットワークエンジニアが北海道の地震で見た「モノのつぶやき」
- さくらインターネット、2019年の年当初感
- さくらインターネット、学術情報ネットワーク「SINET」と石狩データセンターを100Gbps回線で接続
- さくらインターネット、営業やプリセールス向け採用イベントを東京にて開催
- オウンドメディア運用ノウハウセミナー「DevRel Meetup in Tokyo #40」
- さくらのクラウド、「エンハンスドロードバランサ」を提供開始
- 心が躍るファミコン風CSSフレームワーク「NES.css」の誕生秘話に迫る
- さくらインターネット、石狩データセンター見学会を実施
- さくらインターネット、「第12回 雷と保護技術セミナー in 九州」に同社代表が登壇
- さくらインターネット、データセンターの構築・運用技術に関するセミナーに参加
- さくらインターネット石狩データセンター、「SOC2保証報告書」を受領
- さくらインターネット研究所の松本直人氏が語る災害対応と通信技術の可能性
- トヨタが試す液浸冷却サーバーはなぜ石狩データセンターに行ったのか?
- 至高のAI小説「タイタン」にも表れる北海道の地理的優位性
- 冷蔵庫を開けずに牛乳が腐っているかわかる技術でIoTの未来を感じた