Megatron-Core
软件
训练
智能体
NVIDIA's reference recipe for trillion-parameter training.
您正在查看一条软件记录:AI 技术栈中的一款工具或平台——谁维护它、它运行在什么硬件上。
Megatron pioneered tensor and pipeline parallelism for transformers; Megatron-Core packages those techniques as the library under NVIDIA's NeMo stack and many frontier training codebases — the canonical implementation of 3D parallelism on NVIDIA fabric.
它如何与整个技术栈相连
本记录的关联链接一览——点击分组可直接跳转。
运行于
维护方
相关
来源
记录审阅截至 2026-01-15 — 查看 方法论.