Distillation
Teaching a small model to imitate a big one.
आप एक concept explainer देख रहे हैं: इस शब्द का सरल भाषा में क्या अर्थ है, और वे रिकॉर्ड जो इससे जुड़े हैं।
Distillation trains a compact student on a larger teacher's outputs, keeping most capability at a fraction of the serving cost — the standard way 'mini' and 'flash' tiers are made. It is also a flashpoint: training on a rival API's outputs against its terms is industrial-scale imitation, an accusation that surfaced prominently around DeepSeek's rise.
यह बाकी स्टैक से कैसे जुड़ता है
इस रिकॉर्ड के लिंक एक नज़र में — किसी समूह पर क्लिक करके उस पर जाएँ।
संबंधित
स्रोत
Distillation paper (Hinton et al.) ↗
रिकॉर्ड की समीक्षा की गई 2026-01-15 — देखें पद्धति.