Beranda › Konsep-Konsep › Mixture of Experts (MoE)
Mixture of Experts (MoE)
Konsep
Teknis Inti
Huge capacity, small bills: only a few experts fire per token.
Anda sedang melihat entri penjelas konsep: apa arti istilah ini dalam bahasa yang mudah dipahami, dan entri-entri yang dikaitkannya.
An MoE model holds many expert sub-networks but routes each token through only a few — DeepSeek-V3 stores 671B parameters yet computes with 37B per token. That decouples capacity from cost and is how open labs reached frontier scale on constrained hardware. The trade: all those parameters still occupy memory, which pushes HBM demand even higher — an architecture choice you can read directly in the memory market.
Bagaimana ini terhubung ke bagian lain dari stack
Tautan catatan ini sekilas — klik grup untuk langsung menuju ke sana.
Dasar untuk
Sumber
Rekaman ditinjau per 2026-01-15 — lihat Metodologi.