State-Space Models (Mamba)
Concept
Technische kerngegevens
The main architectural challenger: linear-time sequence processing.
U bekijkt een conceptverklaring: wat deze term in begrijpelijk Nederlands betekent, en de records die hij samenbrengt.
State-space models like Mamba process sequences in linear time with constant memory — no quadratic attention, no ballooning KV cache. Pure SSMs trail transformers on recall-heavy tasks, so production systems hybridize (AI21's Jamba, MiniMax's lightning attention). If context keeps growing, the efficiency argument keeps getting stronger — one of the live architecture debates that could reshape hardware demand.
Hoe dit aansluit op de rest van de stack
De koppelingen van dit record in één oogopslag — klik op een groep om er naartoe te springen.
Basis voor
Gerelateerd
Bronnen
Record beoordeeld per 2026-01-15 — bekijk Methodologie.