sans_

NCCL视角下的Symmetric Memory 大模型训练这一场景需求推动着硬件前往特定的方向演进。 而硬件的演进必然要求通信软件库进行相应变革，以充分利用其潜力。...

要理解 NCCL 的用户缓冲区注册（User Buffer Registration），我们不能把它看作一个孤立的功能，而应将其置于 GPU 通信发展的历史脉络中。...