InfiniBand 网络管理探秘：子网管理器如何发现硬件并分配网络地址

在现代高性能计算和数据中心中，InfiniBand 网络凭借其超低延迟和高吞吐量成为关键基础设施。然而，一个高效网络的运行离不开精密的"交通管理系统"——子网管理器（Subnet Manager，SM）。今天，我们将深入探索 SM 如何从零开始，发现网络中的所有硬件设备，并为它们分配唯一的网络地址（LID），最终构建起一个有序、高效的通信网络。

启程：黑暗中的第一声呼唤

想象一下，你被空投到一个完全黑暗、未知的房间里，房间里布满了各种设备，但你看不见它们，也不知道它们如何连接。这就是 InfiniBand 子网管理器启动时面临的处境。SM 首先要回答两个基本问题：网络里有什么设备？它们如何连接？

SM 的探索之旅从广播发现开始。它向特殊的广播地址 LID 0xFFFF 发送第一声呼唤——一个 SubnGet 管理数据报（MAD），查询最基本的节点信息（NodeInfo）。这个广播报文会被网络中所有 InfiniBand 设备接收到，无论它们是主机通道适配器（HCA）还是交换机。

每个 InfiniBand 设备内部都有一个子网管理代理（SMA），这是一个固件层面的智能应答器。当 SMA 听到这声广播呼唤时，它会立即响应，通过 SubnGetResp 报文告诉 SM：“我在这里！我是 HCA/交换机，我有 X 个端口，我的唯一身份 GUID 是 YYYY…”

有趣的是，在这个初始阶段，设备还没有正式的"门牌号"（LID），但它们仍然能够响应。它们使用 SM 的源 LID（通常是 0x0000）作为返回地址，就像在信封上写上"回复给：网络管理