Megatron-Core
NVIDIA's reference recipe for trillion-parameter training.
Bir yazılım kaydına bakıyorsunuz: yapay zeka yığınındaki bir araç veya platform — kimin geliştirip sürdürdüğü ve hangi donanım üzerinde çalıştığı.
Megatron pioneered tensor and pipeline parallelism for transformers; Megatron-Core packages those techniques as the library under NVIDIA's NeMo stack and many frontier training codebases — the canonical implementation of 3D parallelism on NVIDIA fabric.
Bu, yığının geri kalanıyla nasıl bağlantılı?
Bu kaydın bağlantılarına hızlı bakış — bir gruba tıklayarak o bölüme atlayın.
Üzerinde çalışır
Sürdüren
İlgili
Kaynaklar
İncelenen kayıt tarihi: 2026-01-15 — görüntüle Metodoloji.