NCCL
The collective-communications library every distributed training run calls.
Está a ver um registo de software: uma ferramenta ou plataforma na stack de IA — quem a mantém e em que hardware corre.
NCCL implements the all-reduce, all-gather and broadcast operations that synchronize gradients across thousands of GPUs, tuned to NVLink and InfiniBand topologies. When people say a cluster 'scales well', they are mostly praising NCCL; AMD's RCCL mirrors it.
Como este elemento se liga ao resto da stack
As ligações deste registo num relance — clique num grupo para ir diretamente até ele.
Mantido por
Relacionados
Fontes
Registro revisado em 2026-01-15 — ver Metodologia.