中国开源模型变强,靠的是抄答案?最强模型刚发就被「抄作业」:曝 DeepSeek、月之暗面靠蒸馏 GPT-6 Astra 训新模型
The Information 援引知情人士称,OpenAI 9 月初发布的 GPT-6 Astra 已成中国 AI 实验室头号蒸馏目标,DeepSeek 与月之暗面训练新模型时重度依赖其输出。
大白话所谓蒸馏,说白了就是拿强模型的回答当「标准答案」,喂给自家模型去学。The Information 报道说,OpenAI 今年 9 月初发的 GPT-6 Astra 是它家目前最强的模型,上线后需求很旺,其中一批特殊用户就是中国的 AI 实验室。知情人士称,DeepSeek 和月之暗面在训练各自最新模型时,都大量用到了 Astra 的输出。报道还提到,尽管 OpenAI 和 Anthropic 多次公开批评这种做法,蒸馏仍是中国开源权重模型进步的最大推手之一。
对你意味着这事关系到中美大模型的能力差距到底怎么缩小的,也关系到以后各家会不会在服务条款、输出水印上加大封锁。普通用户短期感受是:便宜好用的开源模型还会继续变强。
The Information 援引知情人士报道,OpenAI、DeepSeek、月之暗面均未公开回应
原文:OpenAI’s Astra Model Becomes Top Distillation Target for China’s AI Labs
打开巨象雷达,看今天全部 AI 动态