Parameters
The learned numbers — and why 'bigger' stopped being the whole story.
U bekijkt een conceptverklaring: wat deze term in begrijpelijk Nederlands betekent, en de records die hij samenbrengt.
Parameters are the weights a model learns; storing and moving them is what all the memory on this site is for (a 405B-parameter model needs ~800 GB at 16-bit). Counts climbed from GPT-2's 1.5B to trillion-parameter mixtures, but since Chinchilla the field optimizes parameters against data and compute jointly — and closed labs stopped disclosing counts at all, which is why so many records here say 'not publicly disclosed.'
Hoe dit aansluit op de rest van de stack
De koppelingen van dit record in één oogopslag — klik op een groep om er naartoe te springen.
Gerelateerd
Bronnen
Record beoordeeld per 2026-01-15 — bekijk Methodologie.