万万没想到，蒸馏也搞出Scaling law了？！

科研圈又搞事情！这次是 模型“师生关系” 大揭秘！ 核心就一句话 👇
蒸馏扩展定律：算力有限？让小模型 (student) 跟对老师 (teacher)，性能飞升！ (Scaling Law 家族壮大中！All you need家族还需努力！)

之前大模型训练太烧钱？知识蒸馏来救场！但 Teacher 太强，St

最近感觉我们写东西太古板了，这种感觉大家觉得如何？