このページの本文へ

2013年以降5回の大規模更改/増設、ジュニパーのファブリックを採用した理由

成長し続けるDMM.comのネットワーク、その変遷を担当が語る

2015年09月08日 14時00分更新

文● 大塚昭彦/TECH.ASCII.jp

  • この記事をはてなブックマークに追加
  • 本文印刷

2014年前半、70ラックの10Gサーバー専用コロケーションを増設

 こうして大規模なネットワーク更改を果たしたDMM.comだったが、サービスとユーザー数は拡大し続け、そのわずか半年後(2014年)にはデータセンターの増設が決定した。「10G(10ギガ)サーバー専用のコロケーションを都内に契約しました。ハイスペックサーバーを高密度収容できる6kVAラックが70ラック。データセンターキャパシティは一気に倍以上になりました」(山田氏)。

2014年前半時点のデータセンターネットワーク。新データセンターには大規模向けQFabric製品を導入。またMPLS/L2VPNでデータセンターインターコネクトを実施

 前述のデータセンターでは中規模向けのQFabric製品である「QFX3000-M」を導入したが、10Gサーバーのみの新しいデータセンターでは、より収容能力の大きい「QFX3000-G」を採用することになった。QFX3000-Gは、最大6144個の10GbEポートを収容できる製品だ。

 そのうえで、すべての10Gサーバーを10G Base-T経由で直接QFabricに収容するネットワークデザインとした。「ラインカードは各サーバーラックに、ルーティングエンジンやスイッチングファブリックはネットワークラックに設置しますが、これらが『1台のスイッチ』として動作し、管理できる。それがQFabricの良いところです」(山田氏)。

QFabric(QFX3000-G)の実装。エンジン/ファブリック/ラインカードが物理的に分離している

ラック配置のイメージ図。ラインカードは各ラックに、それをまとめるエンジンとファブリックはネットワークスイッチに分散配置

 その結果、6kVA×70ラックの環境でも、管理対象となるスイッチの台数は「10台程度」(QFabric 1台+マネジメントスイッチ9台程度)に抑えられ、管理負荷が非常に少なく済んでいるという。

 他方、山田氏はこのネットワークでも新たなチャレンジを行っている。それまで触れたことのなかったMPLSを、データセンターインターコネクト(DCI)で採用したのだ。ちょうど「QFX5100」スイッチがMPLS/L2VPNをサポートしたタイミングであり、将来的なマルチデータセンター間接続にMPLSを利用することも意識しての挑戦だった。

2014年後半、高速なデータセンター向けファイアウォールを導入

 こうして新データセンターのネットワークを構成し終えたのもつかの間、2014年後半にはまた新たな要求が持ち上がる。それまで外注で構成していたゲーム系システムを統合するために、ハイパフォーマンスなファイアウォールが必要になったのだ。

2014年後半時点のデータセンターネットワーク。高速で拡張性のあるSRXファイアウォールを導入

 ここでは、データセンター向けファイアウォールの「SRX5400」および「SRX3400」を導入することになった。ポイントは拡張性だったと、山田氏は説明する。「あとでサービスが急増した場合の、柔軟なパフォーマンス拡張が課題でした。SRXならば、サービスプロセッシングカード(SPC)を増強することで簡単にパフォーマンスが拡張できます」(山田氏)。

 また、ルーターやスイッチと同じJUNOSで管理ができる点、「Chassis Cluster」機能で管理台数を削減できる点も評価したという。

今年はさらに200ラックを増床、異なるファブリック技術も採用

 それでもDMM.comのサービス成長は止まらない。今年(2015年)前半には、またしてもデータセンターの増設が決まった。2014年に新設したデータセンターと同じ6kVAラックが、今度は200ラックという規模だ。

2015年(現在)時点のデータセンターネットワーク。QFabric 1台には収容できない規模のため、別のファブリック技術(VCF)を採用

 今回の新たなチャレンジとして、山田氏らはQFX5100の「Virtual Chassis Fabric(VCF)」機能を採用した。「6kVA×200ラックの増床となると、単体のQFabricでは収容できません。そこでこのデータセンターでは、もっと小さなドメインに分割することにして、ラックのロー(列)単位でVCFに収容するデザインにしました」(山田氏)。

Virtual Chassis Fabric(VCF)の実装

ラック配置のイメージ図。「30ラックを1モジュールとして、段階的に導入していくことを想定」

 山田氏は、VCFの採用と同時に、以前から抱えていた“ある課題”を解決したかったと語る。ネットワーク機器のファームウェアバージョンアップを実行する際に生じうる、万が一のトラブルにどう備えるか、という課題だ。

 そこで、この新しいネットワークでは2系統のVCFを用意した。重要なサーバーは、必ず両方の系統につなぐ(LAN接続を冗長化する)ようにすることで、バージョンアップやネットワーク障害の際には容易に片寄せ運用できるようにしてある。

重要なサーバーは、必ず2系統のVCFに収容するようにデザインしている

 また、今回のDCIには100Gbpsが必要だったため、ダークファイバを利用してMPLS/L2VPNで構成している。なお、今後はBCPを考慮して、この新データセンターにもインターネットアクセスポイントを設ける計画だという。

(→次ページ、今夏には対外接続280Gbpsへ拡張、インフラ担当者の使命とは

カテゴリートップへ

本記事はアフィリエイトプログラムによる収益を得ている場合があります

アクセスランキング

  1. 1位

    ITトピック

    情シス人材不足でも「採用予定なし」中小企業の意見/“従業員発のSNS炎上”6割の企業が懸念/「SNS疲れ」利用を減らす効果的方法、ほか

  2. 2位

    ビジネス・開発

    「Gemini Enterprise」に大規模導入の波 ― SOMPO・NTTデータ・Skyが描く“エージェント企業”への進化

  3. 3位

    ITトピック

    北米での成長率がすごすぎる NinjaOneとはいったい何者だ?

  4. 4位

    Team Leaders

    Power AutomateでSharePointリストにある申請データ一覧をメール送信する方法

  5. 5位

    sponsored

    無線APにデザインは不要ですか? ブラックスケルトンモデルは今どきのオフィスにめちゃなじむんです

  6. 6位

    YouTube

    ぶっちゃけ、あのSaaSってどう!? 情シスがガチ格付け! 本当に使えるツールを決める最強SaaSティア決定戦!!

  7. 7位

    sponsored

    キャッシュレス決済の利用シーンを広げる 三井住友カードの「stera terminal light」とソフトバンクのIoT回線

  8. 8位

    データセンター

    「関東・関西に次ぐDC集積地」目指す 北海道・石狩でデータセンター連合 さくら、NTT東らが参画

  9. 9位

    TECH

    プロテクティブDNSでDNSをセキュリティ基盤へ 福岡大学でも「運用課題なし」の実績

  10. 10位

    デジタル

    異常検知からロボット走行、車両制御まで —— 現場を遠隔化・自動化するSORACOM活用のIoTソリューション

集計期間:
2026年08月01日~2026年08月07日
  • 角川アスキー総合研究所