NVIDIA Mellanox MCX631102AN-ADAT サーバーアダプター 技術ソリューション:RDMA/RoCE 低遅延トランスポートとサーバー

NVIDIA Mellanox MCX631102AN-ADATサーバーアダプター技術ソリューション：RDMA/RoCE低遅延トランスポートとサーバースループット向上アーキテクチャ

1. プロジェクト背景と要件分析

現代のデータセンターは、コンピューティング中心からデータ中心のアーキテクチャへと根本的な移行を進めています。NVMeストレージアレイ、AI/MLトレーニングクラスター、分散データベースが普及するにつれて、ネットワークファブリックがシステム全体のパフォーマンスを制限する重要なボトルネックとして浮上しています。従来のTCP/IPベースのネットワーキングは、プロトコル処理にかなりのCPUオーバーヘッドを課し、予測不可能な遅延ジッターを導入し、最新メディアの帯域幅ポテンシャルを十分に活用できません。

エンタープライズおよびクラウド環境全体で特定された主な要件は次のとおりです。

• サブミリ秒の遅延：金融取引プラットフォームやリアルタイム分析などのミッションクリティカルなアプリケーションは、一貫した低遅延通信を要求します。
• CPUオフロード：ネットワークプロトコル処理は、ノードあたりのCPUリソースの10％未満しか消費せず、アプリケーションワークロードのコンピューティング容量を確保する必要があります。
• 帯域幅スケーラビリティ：インフラストラクチャは、ポートあたり25GbEをサポートし、将来の50/100GbE展開への明確なアップグレードパスが必要です。
• シームレスな統合：ソリューションは、既存のサーバープラットフォーム、オペレーティングシステム、および管理ツールと互換性がある必要があります。

提案されたアーキテクチャは、RoCEトランスポート用に最適化されたリーフ-スパイントポロジを採用しています。この設計の中核は、MCX631102AN-ADATイーサネットアダプターカードソリューションであり、各サーバーノードに展開され、デュアルポート25GbE接続を提供します。

アーキテクチャレイヤー：

コンピューティング/ストレージノード：リーフレイヤー：

NVIDIA Spectrum-3スイッチは、RoCE対応の輻輳制御（PFC/ECN）を備えた低遅延でロスレスなイーサネット転送を提供します。

• スパイレイヤー：大容量スパインスイッチは、100GbEアップリンクでリーフノードを相互接続し、ファブリック全体でノンブロッキングパフォーマンスを保証します。50 Gb/sスループット、0.6マイクロ秒未満の遅延、アプリケーションスループットの2〜3倍の向上NVIDIA DOCAおよびMLNX-OSを介したテレメトリ収集、構成オーケストレーション、およびヘルスモニタリング用の帯域外管理ネットワーク。
• この設計には、ハードウェアベースのvSwitchオフロードを使用したマイクロセグメンテーションとトラフィック分離が組み込まれており、テナントトラフィックがパフォーマンスを損なうことなく分離された状態を維持します。3. ソリューションにおけるNVIDIA Mellanox MCX631102AN-ADATの役割と主な機能
• 各サーバーの基盤となるネットワークインターフェイスとして、NVIDIA Mellanox MCX631102AN-ADATは、全体的なアーキテクチャのパフォーマンスと効率目標を達成する上で極めて重要な役割を果たします。この機能を可能にする主な技術的機能は次のとおりです。機能
• メリットRDMA/RoCEv2ハードウェアオフロード

ゼロコピーデータ転送、サブマイクロ秒の遅延、CPU使用率を最大75％削減

デュアルポート25GbE SFP28

50 Gb/sの集約帯域幅、アクティブ-アクティブフェイルオーバー、10GbEとの下位互換性16 GT/sの帯域幅、ホスト側のボトルネックを解消

スパインスイッチがリーフノードを相互接続する複数のラックに展開します。アダプターのハードウェアステアリング機能を使用してトラフィックエンジニアリングを実装し、オーケストレーションと自動プロビジョニングのためにMCX631102AN-ADAT互換NVIDIA Unified Fabric Managerを使用します。標準的なラック構成は20台のコンピューティング/ストレージサーバーで構成され、各サーバーには1台のMCX631102AN-ADAT ConnectX-6 Lxデュアルポート25GbE SFP28が装備されています。ポート1はリーフスイッチAに接続され、ポート2はリーフスイッチBに接続され、冗長パスを提供します。リーフスイッチは100GbEを介してスパインスイッチにアップリンクし、CLOSファブリックを形成します。このトポロジにより、単一のリンクまたはスイッチの障害がアプリケーションの可用性に影響を与えないことが保証されます。5. 運用、監視、トラブルシューティング、および最適化RoCEベースのネットワークの効果的な運用には、特別な監視とトラブルシューティングの実践が必要です。MCX631102AN-ADATは、これらのアクティビティをサポートするための組み込みインストルメンテーションを提供します。

テレメトリ収集：

アダプターのハードウェアカウンターを使用して、フローごとのスループット、キューの深さ、パケットドロップ、および遅延分布を監視します。このデータは、リアルタイムの可視性のための集中監視ダッシュボードにフィードされます。PFCポーズフレームとECNマークパケットを監視して、マイクロバーストとトラフィックホットスポットを特定します。MCX631102AN-ADATデータシートは、これらのカウンターの解釈に関するガイダンスを提供します。

ファームウェアとドライバー管理：パフォーマンスとセキュリティのために、NVIDIA OFEDドライバースタックとアダプターファームウェアの定期的な更新が不可欠です。NVIDIA DOCAフレームワークを使用して、ライフサイクル管理を自動化します。パフォーマンスチューニング：主なチューニングパラメーターには、PFCバッファしきい値の調整、適切なECNマーキング制限の設定、および遅延とスループットのバランスをとるためのアダプターの割り込みモデレーション設定の構成が含まれます。

一般的なトラブルシューティング：ほとんどのパフォーマンスの問題は、DCB設定の誤り、MTU値の不一致、または互換性のないドライバーバージョンに起因する可能性があります。アダプターの診断ツール（例：mstflint、ethtool、mlxconfig）は、運用ステータスに関する包括的な可視性を提供します。

総所有コストを評価している組織の場合、MCX631102AN-ADATの価格は、CPUの節約とスループットの向上と合わせて考慮する必要があります。多くの企業は、MCX631102AN-ADATの販売バンドルがNVIDIA Spectrumスイッチと組み合わされることで、新規展開に最も費用対効果の高いソリューションを提供することを発見しています。6. まとめと価値評価NVIDIA Mellanox MCX631102AN-ADATは、3つの次元にわたって測定可能なビジネス価値を提供する戦略的なインフラストラクチャ投資を表しています。次元

提供される価値パフォーマンス50 Gb/sスループット、0.6マイクロ秒未満の遅延、アプリケーションスループットの2〜3倍の向上効率

CPUオフロード最大75％、低消費電力（約18W TDP）、冷却要件の削減

TCOエンドツーエンドのMCX631102AN-ADATイーサネットアダプターカードソリューションとして、最新アプリケーションの可能性を最大限に引き出すロスレスで高性能なネットワークを構築できます。エンタープライズデータセンター、クラウドサービスプロバイダー環境、または研究HPCクラスターのいずれに展開されても、MCX631102AN-ADATは、インフラストラクチャアーキテクトが要求する低遅延、高スループット、および運用上のシンプルさを一貫して提供します。