クラウドとインフラ

Meta、2026年OCPサミットでAIネットワークスタックを公開

Metaは、液冷スイッチ、オープンRDMAトランスポート、およびギガワット規模のPrometheusクラスターを支える多層ファブリックに関する詳細情報を発表しました。

光接続を備えた液冷ネットワークラックのイラスト
この記事用に生成されたイラスト

英語の原文から自動翻訳されました。

2026年のOpen Compute Project(OCP)グローバルサミットにおいて、Metaのエンジニアたちは、最新のAIモデルや大規模な計算クラスターを支えるネットワークインフラについて詳細を説明しました。プレゼンテーションでは、液冷ラックなどのハードウェア革新、データセンター間でのスケーリングを実現するソフトウェア定義型ファブリック、そして業界標準化を目指す新たなオープンソースイニシアチブが取り上げられました。

何が起きたか

Metaは、Muse WonderやMuse Sparkなどのモデルを支えるギガワット規模のPrometheusクラスターのアーキテクチャを公開しました。注目の中心には、同社初の液冷ネットワークエンクロージャーである「IcePack」ラックがありました。このラックには、102.4テラビット/秒のスループットを持つ「IceCube」スイッチブレードが搭載されています。これらのスイッチはBroadcom Tomahawk 6CまたはNVIDIA Spectrum-6アプリケーション特化型集積回路(ASIC)を使用し、800ギガビット/秒で動作する128ポートを提供します。システムは、MetaのオープンソースネットワークOSであるFBOSS上で稼働しています。

また、同社はGPUクラスターのスケーリングアウト向けの設計である「Flattened Planar Fabric」についても説明しました。このアーキテクチャは、従来の3層Closトポロジーから2層モデルへと移行します。この構成では、各グラフィックス処理ユニット(GPU)が8つの異なるネットワークプレーンに接続されます。この設計は、ネットワークインターフェースカード(NIC)レベルでのパケットスプレーイングと、ホストおよびスイッチを横断する統一コントロールプレーンに依存しています。MetaはこのファブリックをNVIDIAと共同で開発し、クラウドパートナーと共有しています。

建物間や地域間のインフラ接続のために、Metaは「Backend Aggregation」(BAG)を導入しました。これはペタビット規模のスーパー・スパインであり、Prometheusクラスターの異なる部分をリンクします。地域バックボーンは、FBOSSとSwitch Abstraction Interface上で動作するIPv6上のSegment Routingを使用しています。ラック内の通信を処理するために、MetaはMTIA 300アクセラレーター向けにBroadcom Tomahawk5シリコンに基づいて構築されたEthernetベースのスケールアップスイッチ「Tahan」を紹介しました。さらに、同社は102.4Tシリコンを使用して1ラックあたり72個のアクセラレーターをサポートする構成もプレビューしました。

仕組み

IcePackラックにおける液冷への移行は、高速スイッチの熱密度問題に対応するものです。空冷の制約を取り除くことで、Metaはより小さなフットプリントにより多くの帯域幅を詰め込むことができます。IceCubeスイッチは物理層チップを使わず、高度なオプティクスに依存するハイブリッドな液冷・空冷設計を採用しています。このアプローチにより、電力消費と発熱が削減され、この規模において重要なボトルネックとなる要素に対処します。ネットワークでは、コストと信頼性を管理するために、短距離リンクにアクティブ電気ケーブルを使用しています。

ソフトウェア面では、Metaはリモートダイレクトメモリアクセス(RDMA)トランスポート「MetaRoCE」をオープンにしています。このプロトコルは、all-reduceやall-to-all操作などのトレーニングタスク中にGPU間でデータを移動させます。GitHub上のユーザー空間ライブラリから開始してソフトウェアをオープンソース化することで、Metaは異なるハードウェアベンダー間での相互運用性とパフォーマンスの向上を目指しています。このトランスポートは、大規模分散トレーニングでよくある問題である、最も遅いノードがクラスター全体をブロックすることを防ぐよう設計されています。

スイッチプラットフォーム開発における断片化を軽減するため、MetaはMicrosoftおよびAlibabaとともに「Open Switch Platform Architecture」イニシアチブを共同主導しています。この取り組みは、データプレーンソフトウェアの上に位置するスイッチプラットフォーム層のための統一参照設計を提供します。目標は、新しいハードウェアプラットフォームを立ち上げる際に発生する数ヶ月分の重複作業を排除することです。バージョン1.0仕様はOpen Compute Projectに提出されました。

主要な詳細

  • IcePackラックは、128x800G容量の102.4Tスイッチブレードを使用し、FBOSS上で稼働します。
  • Flattened Planar Fabricは、2層トポロジー内で各GPUを8つのネットワークプレーンに接続します。
  • Backend Aggregationは、地域間接続のためのペタビット規模のスーパー・スパインとして機能します。
  • Tahanスイッチは、Broadcom Tomahawk5シリコンを使用してMTIA 300アクセラレーターをサポートします。
  • MetaRoCE RDMAトランスポートは、GitHub上でオープンソースソフトウェアとしてリリースされています。
  • Open Switch Platform Architecture v1.0仕様は、スイッチプラットフォーム層の標準化を目指しています。

なぜ重要なのか

大規模AIシステムを構築するエンジニアにとって、これらの進展はネットワーク効率の重要性が高まっていることを浮き彫りにします。モデルサイズが増大するにつれ、GPU間の通信にかかる時間は計算時間を上回ることが多くなります。Metaがトランスポート層をオープンソース化し、標準的なプラットフォームアーキテクチャを定義することは、高性能ネットワーキングへの参入障壁を下げるものです。これにより、チームはゼロから独自ソリューションを構築するのではなく、実績のある設計を採用できるようになります。

液冷と高密度オプティクスへの重点は、データセンター設計の変革を示唆しています。従来の空冷ラックは、次世代スイッチに必要な電力密度をサポートできません。エンジニアは現在、熱管理をネットワークアーキテクチャの中核部分として考慮する必要があります。銅インターコネクトとオプティクスに対する詳細な検証手法の利用可能性は、大規模な歩留まりと信頼性の問題を扱うための実用的な指針を提供します。

できること

  • GitHub上のオープンソースMetaRoCEライブラリを確認し、現代のRDMAトランスポート実装を理解してください。
  • Open Switch Platform Architecture仕様を検討し、ハードウェア立ち上げプロセスを合理化してください。
  • インフラ計画において、高密度ネットワーク展開向けの液冷要件を評価してください。
  • GPUからネットワークへの接続を最適化するために、Flattened Planar Fabricの設計原則を分析してください。
  • 特定のコンポーネントに関する深い解説を得るために、2026年OCPグローバルサミットの録画セッションを視聴してください。
  • コストとパフォーマンスのバランスを取るため、短距離リンクにアクティブ電気ケーブルの採用を検討してください。
  • #ai infrastructure
  • #networking
  • #open source
  • #data center
  • #meta

Bytechapストアのツール

続きを読む

クラウドとインフラ

FlameサービングのチューニングでスタンドアロンvLLMのスループットに匹敵する性能を実現

ベンチマークテストにより、プレフィックスアフィニティとバッチ受け入れを最適化することで、vLLMを組み込んだ調整済みFlameサービスが短いバースト負荷においてスタンドアロンvLLMのスループットの1%以内の差まで迫ることが示されました。

すべての記事