Distillation
Conceito
Treinamento & Inferência
Teaching a small model to imitate a big one.
Está a ver um explicador de conceito: o que este termo significa em linguagem acessível, e os registos que relaciona.
Distillation trains a compact student on a larger teacher's outputs, keeping most capability at a fraction of the serving cost — the standard way 'mini' and 'flash' tiers are made. It is also a flashpoint: training on a rival API's outputs against its terms is industrial-scale imitation, an accusation that surfaced prominently around DeepSeek's rise.
Como este elemento se liga ao resto da stack
As ligações deste registo num relance — clique num grupo para ir diretamente até ele.
Relacionados
Fontes
Distillation paper (Hinton et al.) ↗
Registro revisado em 2026-01-15 — ver Metodologia.