-
7:30 - 20:30
Cả CN & Lễ -
-
NVIDIA MCX653105A thuộc dòng ConnectX-6 VPI – Virtual Protocol Interconnect – dành cho máy chủ, trung tâm dữ liệu, HPC và các hệ thống lưu trữ cần khả năng sử dụng cả InfiniBand lẫn Ethernet trên cùng một adapter. Điểm chung của nhóm MCX653105A là thiết kế single-port QSFP56 và giao tiếp PCI Express x16, nhưng tốc độ mạng chính xác phụ thuộc hậu tố đầy đủ của OPN.
NVIDIA có nhiều biến thể dùng chung phần tên MCX653105A. MCX653105A-ECAT hỗ trợ tối đa 100Gb/s với InfiniBand HDR100/EDR và Ethernet 100GbE. MCX653105A-HDAT nâng tốc độ lên HDR InfiniBand 200Gb/s và Ethernet 200GbE. Ngoài ra còn có MCX653105A-EFAT dạng Socket Direct 2x8 cho 100Gb/s và MCX653105A-HDAL 200Gb/s dành cho một số hệ thống làm mát chất lỏng.
Vì vậy khi nhập sản phẩm chỉ với tên NVIDIA MCX653105A, cần giữ mô tả ở mức dòng sản phẩm và không tự gán thông số của ECAT hoặc HDAT nếu chưa nhìn thấy hậu tố trên tem. Đây cũng là điểm quan trọng khi chọn firmware, PSID, module mạng và tốc độ switch tương ứng.
ECAT là biến thể 100Gb/s. Trong InfiniBand, HDR100 sử dụng hai lane 50Gb/s để đạt 100Gb/s; đây không phải HDR 200Gb/s đầy đủ. Khi chạy Ethernet, card hỗ trợ tối đa 100GbE và các tốc độ thấp hơn tương ứng.
HDAT là biến thể cần chọn khi hệ thống yêu cầu InfiniBand HDR 200Gb/s hoặc Ethernet 200GbE. PCIe Gen4 x16 đặc biệt quan trọng để giảm nguy cơ giao tiếp host trở thành nút thắt khi card vận hành ở tốc độ mạng cao.
MCX653105A-EFAT cũng hỗ trợ HDR100, EDR InfiniBand và Ethernet 100GbE nhưng sử dụng kiến trúc PCIe Gen3/Gen4 Socket Direct chia thành 2x8 lane liên tiếp. NVIDIA SKU được công bố là 900-9X603-0016-DT0. Đây không phải cấu hình PCIe x16 đơn thông thường như ECAT.
HDAL có khả năng HDR InfiniBand 200Gb/s và Ethernet 200GbE tương tự nhóm HDAT nhưng được NVIDIA thiết kế với cold plate cho nền tảng Intel Server System D50TNP làm mát bằng chất lỏng. Không nên nhập HDAL như adapter air-cooled tiêu chuẩn.
VPI là viết tắt của Virtual Protocol Interconnect. ConnectX-6 VPI có thể hoạt động với InfiniBand hoặc Ethernet tùy cấu hình và firmware. Đây là khác biệt quan trọng so với các ConnectX EN chỉ hỗ trợ Ethernet.
Trong môi trường HPC, InfiniBand cung cấp kết nối có độ trễ thấp và hỗ trợ RDMA. Trong hệ thống Ethernet, ConnectX-6 có thể phục vụ mạng 100GbE hoặc 200GbE tùy biến thể. Việc chuyển hoặc cấu hình protocol phải thực hiện đúng theo phần mềm, firmware và switch ở đầu đối diện.
Các biến thể MCX653105A chính đều có một cổng QSFP56. QSFP56 là loại connector tốc độ cao hỗ trợ module quang hoặc DAC phù hợp. Tuy nhiên hình dạng connector không quyết định tốc độ tối đa của adapter.
Ví dụ, cả ECAT 100Gb/s và HDAT 200Gb/s đều dùng một QSFP56 nhưng controller và firmware hỗ trợ tốc độ khác nhau. Do đó không thể chỉ nhìn cổng QSFP56 rồi kết luận card là 200GbE.
MCX653105A-ECAT và HDAT sử dụng PCI Express Gen3/Gen4 x16. Ở Gen4, mỗi lane sử dụng tốc độ signaling 16GT/s. PCIe Gen4 x16 cung cấp băng thông host cao hơn đáng kể so với Gen3 x16 và đặc biệt hữu ích đối với biến thể HDAT 200Gb/s.
Nếu card 200Gb/s hoạt động trong khe PCIe Gen3, giới hạn bus có thể ảnh hưởng throughput tùy workload. Ngoài generation, cần kiểm tra khe có thực sự chạy x16 điện hay bị chia còn x8 do cấu hình bo mạch hoặc chia sẻ lane với thiết bị khác.
ConnectX-6 VPI hỗ trợ InfiniBand và có thể được sử dụng trong những hạ tầng RDMA hiệu năng cao. Khi chạy Ethernet, nền tảng ConnectX cũng thường được triển khai cho RoCE – RDMA over Converged Ethernet – trong các cấu hình mạng và driver tương thích.
RDMA cho phép thiết bị trao đổi dữ liệu trực tiếp với bộ nhớ của hệ thống từ xa với mức can thiệp CPU thấp hơn so với nhiều mô hình networking truyền thống. Tuy nhiên hiệu năng phụ thuộc driver, firmware, switch, cấu hình lossless/RoCE hoặc InfiniBand fabric, CPU, NUMA và ứng dụng.
Máy chủ cần có khe PCIe phù hợp, đủ nguồn và airflow cho adapter. Với ECAT hoặc HDAT, khe PCIe x16 là cấu hình tiêu chuẩn được NVIDIA công bố. EFAT cần kiểm tra kiến trúc Socket Direct riêng.
Ở phía mạng, module QSFP56, AOC hoặc DAC phải hỗ trợ đúng protocol và tốc độ. Module Ethernet 100GbE không nên mặc định hoạt động trong mọi cấu hình InfiniBand HDR100; tương tự cáp InfiniBand cần phù hợp switch và chế độ port tương ứng.
Firmware cũng phải đúng PSID. ECAT dùng PSID MT_0000000222 trong khi HDAT dùng MT_0000000223. Không nên flash firmware chỉ dựa vào phần model MCX653105A mà bỏ qua hậu tố và PSID.
NVIDIA ConnectX-6 MCX653105A phù hợp với HPC cluster, máy chủ AI, hệ thống lưu trữ tốc độ cao, database phân tán, cloud và các hạ tầng yêu cầu RDMA. Khả năng VPI giúp adapter linh hoạt giữa mạng Ethernet và InfiniBand.
Biến thể HDAT 200Gb/s phù hợp các fabric HDR hoặc Ethernet 200GbE, trong khi ECAT 100Gb/s phù hợp mạng HDR100/EDR hoặc Ethernet 100GbE. Lựa chọn đúng biến thể giúp tránh mua dư hoặc thiếu băng thông so với switch và hạ tầng hiện có.
Các lỗi hoặc biểu hiện bất thường có thể đến từ nguồn điện, cáp, module quang/DAC, tải, thiết bị ngoại vi, switch, firmware, driver, phần mềm, cấu hình protocol, PCIe, linh kiện lão hóa hoặc môi trường hoạt động; đây không phải khẳng định NVIDIA MCX653105A có lỗi thiết kế.
Kiểm tra khe PCIe, số lane, BIOS, firmware và việc card được gắn chắc chắn. Nếu dùng EFAT cần kiểm tra đúng cấu hình Socket Direct thay vì xử lý như ECAT thông thường.
Kiểm tra module/DAC, switch, protocol Ethernet hoặc InfiniBand, tốc độ và FEC. Module cắm vừa connector không đồng nghĩa chắc chắn tương thích.
Trước tiên kiểm tra hậu tố. Nếu card là MCX653105A-ECAT thì 100Gb/s là giới hạn đúng thiết kế. Chỉ HDAT và các biến thể HDR tương ứng mới hỗ trợ 200Gb/s.
Kiểm tra adapter đúng là ConnectX-6 VPI, firmware hỗ trợ, cấu hình port và thiết bị mạng phía đối diện. Không nên áp dụng cấu hình VPI của model khác khi PSID không khớp.
Kiểm tra PCIe generation và width, NUMA, CPU affinity, firmware, driver, RDMA/RoCE configuration, switch và nhiệt độ card. PCIe chạy x8 hoặc Gen3 có thể giảm băng thông trong một số workload.
Đây là dòng NVIDIA ConnectX-6 VPI adapter hỗ trợ cả InfiniBand và Ethernet.
Phụ thuộc hậu tố. ECAT và EFAT thuộc nhóm 100Gb/s; HDAT và HDAL thuộc nhóm 200Gb/s.
Các biến thể MCX653105A được đề cập có một cổng QSFP56.
Có. Đây là ConnectX-6 VPI. ECAT hỗ trợ đến HDR100, còn HDAT hỗ trợ đến HDR 200Gb/s.
Có. ECAT hỗ trợ đến 100GbE và HDAT hỗ trợ đến 200GbE.
ECAT và HDAT sử dụng PCI Express Gen3/Gen4 x16. EFAT sử dụng Socket Direct chia thành 2x8.
Không. Đây là ConnectX-6 VPI network adapter, không phải NVIDIA BlueField DPU.
HDR100 đạt 100Gb/s với hai lane 50Gb/s, trong khi HDR đầy đủ trên HDAT đạt tới 200Gb/s.
Không thể chỉ dựa vào connector. MCX653105A-ECAT có giới hạn sản phẩm tối đa 100GbE; muốn 200GbE cần đúng biến thể HDAT hoặc model hỗ trợ tương ứng.
PSID xác định cấu hình firmware cụ thể của adapter. ECAT và HDAT có PSID khác nhau nên cần đối chiếu trước khi cập nhật firmware hoặc khôi phục thiết bị.
NVIDIA MCX653105A thuộc dòng ConnectX-6 VPI single-port QSFP56, có thể hỗ trợ InfiniBand/Ethernet 100Gb/s hoặc 200Gb/s tùy hậu tố đầy đủ. Vì tên MCX653105A chưa xác định duy nhất một cấu hình, bước đầu tiên khi kiểm tra thiết bị là đọc chính xác OPN, SKU và PSID trên card.
Khi adapter không được máy chủ nhận, không lên link, không chuyển đúng protocol hoặc không đạt tốc độ mong muốn, các hạng mục có thể kiểm tra gồm PCIe, QSFP56, module quang/DAC, switch, mạch nguồn, controller ConnectX-6, firmware, PSID, driver, RDMA/RoCE và airflow của server.
Trung tâm bảo hành Viện Máy Tính hỗ trợ tiếp nhận kiểm tra và khoanh vùng sự cố NVIDIA MCX653105A cùng máy chủ và hạ tầng InfiniBand/Ethernet liên quan tùy tình trạng thực tế của thiết bị.
Hotline Viện Máy Tính: 0967891080
0967891080
