NVIDIA Mellanox MCX631432AN-ADAB 技術ソリューション: RDMA/RoCE 低遅延トランスポートおよびサーバー スループット向上

June 12, 2026

NVIDIA Mellanox MCX631432AN-ADAB 技術ソリューション: RDMA/RoCE 低遅延トランスポートおよびサーバー スループット向上

ネットワークアーキテクト,プレセールエンジニア,オペレーション・リーダー向けです.NVIDIA メラノックス MCX631432AN-ADABサーバーアダプタは,RDMA/RoCEベースの低遅延輸送を可能にし,現代のデータセンター環境でサーバーのスループットを劇的に改善します.

1プロジェクト背景と要件分析

従来のTCP/IPネットワークは,プロトコル処理,データコピー,および中断処理のために重要なCPUオーバーヘッドを課します.サーバー密度が増加し,分散型ストレージ (Ceph) などのアプリケーションがvSAN),インメモリデータベース (Redis,Aerospike),AIトレーニングフレームワークは1桁のマイクロ秒遅延を求め,伝統的なネットワークスタックは克服できないボトルネックになります.主要な要件は,: 300μs未満のストレージアクセスレイテンシー,ネットワーク処理のためのCPU利用率が10%未満,ポート毎のラインレート25GbEスループット,既存のRoCE対応のスイッチングインフラストラクチャとのシームレスな統合.

2ネットワーク/システムアーキテクチャの設計

提案されたアーキテクチャは,RoCE v2をサポートする非ブロックする脊葉トポロジーを採用しています.各コンピューティングまたはストレージノードは,迈络思 (NVIDIA メラノックス) MCX631432AN-ADABアダプタは,25GbE SFP28 オプティクスを介してリーフスイッチに接続する.リーフスイッチは,端から端への混雑制御のためにDCQCN (データセンター定量混雑通知) を実行する.制御平面はPFC (優先流量制御) を損失優先キューにのみ利用します.RDMAデータプレーンは,レイヤ-3の境界を横断するためにIPルーティングを搭載したRoCE v2を使用している.このデザインはヘッド・オブ・ラインブロックをなくし,最大2000ノードで決定的遅延を保証する.

層 構成要素 仕様
計算ノード MCX631432AN-ADAB 2つのポート 25GbE,PCIe 4.0 x8,RoCE v2
葉のスイッチ NVIDIA SN3700 25GbE RoCE対応,DCQCNが有効
脊髄の切り替え NVIDIA SN4600 100GbE,遮断しない織物
3このソリューションにおけるMCX631432AN-ADABの役割と主要な特徴

についてMCX631432AN-ADAB イーサネット アダプター カードRDMAの卸荷の重要なエンドポイントとして機能します.MCX631432AN-ADAB ConnectX-6 Lx デュアルポート 25GbE SFP28シリコンはハードウェアベースのRoCE,タグマッチング,およびオーダー外パケットアセンブリを統合している.ソフトウェアiWARPまたはカーネルTCPと比較して,アダプターは遅延時間を70%以上削減する.建築家にとってMCX631432AN-ADAB データシート重要な卸荷には,次のものが含まれる.

  • RoCE v2 ハードウェアのオフロード:データのコピーがゼロ ポートからポートへの遅延は600ns未満
  • FlexFlow ステアリング:粒子の流量分布のためのプログラム可能なパケットパーサー.
  • インライン暗号エンジン:CPUの関与なしで IPsec/TLS ラインレートで
  • テレメトリとECNマーク:SPIFFYカウンターでリアルタイムで渋滞の可視化

評価する際MCX631432AN-ADABの仕様段階的な移行を可能にします. さらに,このカードは25GbEと10GbEの速度の両方をサポートします.MCX631432AN-ADABに対応するエコシステムには 主要なサーバーベンダーがすべて含まれています

4展開とスケーリングの推奨事項 (トポロジー説明)

500ノードのクラスターの典型的な2階層トポロジー:各ラックには20台のサーバーがあり,それぞれに1つのNVIDIA メラノックス MCX631432AN-ADAB(両ポートも冗長性または帯域幅アグリゲーションのためにアクティブである).Leafスイッチは,25GbE SFP28 DACケーブル (5mまで) またはAOC光学でより長い距離でサーバーに接続します.脊柱層は100GbEアップリンクを使用して4を維持するストレージトラフィックについては,アダプターごとに Ceph バックエンドトラフィックに1ポートをRoCEで専用し,第2ポートはコンピューティング面のワークロードに予約します.2000ノードを超えたスケーリングには 3階層のスーパースピン設計が必要です建築家は,RoCE路線の伝播のためにBGP-EVPNを使用する必要があります.MCX631432AN-ADAB イーサネット アダプター カードソリューション詳細なケーブルマトリックスと電力予算のガイド

5運用,監視,トラブルシューティングのベストプラクティス

NVIDIAの操作を有効にする必要があります.mlx5ctlそしてエストールリアルタイムのポート統計.監視する重要な指標: RoCEv2送信休止 (PFC嵐を示す),ECNマークされたパケット比率,アダプター熱値読み取り.高テイルレイテンスのトラブルシューティングのために,証明するDCQCN パラメータスイッチバッファプロファイルと並べます.MCX631432AN-ADAB データシート"out_of_seq"や"retransmissions"のような高度なカウンタを解釈する/sys/class/infiniband/mlx5_*/ポート/*/カウンター/費用計画のために,調達チームは,MCX631432AN-ADAB価格推定とチェックMCX631432AN-ADAB 販売中100 台以上の注文で販売価格が決まる.

6概要 価値評価

についてMCX631432AN-ADAB300μs未満のストレージレイテンシー, 25GbE ラインレートトラフィックに対するCPUオーバーヘッドの 5%未満,アプリケーション変更なしに RoCE v2 の完全なオフロードを提供します.古い TCP スタックを RDMA 輸送に置き換える25GbE アダプターと比較すると,この2つのシステムでは,ConnectX-6 Lx アーキテクチャは,優れたプログラム可能なパイプラインとテレメトリ深さを提供していますこの技術ソリューションは,クラウドストレージ,HPCシミュレーション,リアルタイム分析を含む生産環境で検証されています. 25GbE RoCEファブリックを採用する準備ができているチームにとって,NVIDIA メラノックス MCX631432AN-ADAB低レイテンシーで高速なサーバーネットワークの 未来に備えたコスト効率の良い基盤です