DeepSeek и Moonshot AI использовали GPT-6 Astra для обучения своих моделей
Китайские разработчики DeepSeek и Moonshot AI использовали ответы модели GPT-6 Astra от OpenAI при создании собственных языковых систем. Об этом сообщает The Information со ссылкой на источники, знакомые с ситуацией.
По данным издания, Moonshot AI применяла результаты Astra в работе над моделью Kimi K3.1 Pro. Об этом рассказали три источника. Ещё два собеседника сообщили, что ответы этой модели использовались при разработке DeepSeek V4.1-Flash 1017.
Как работает дистилляция моделей
Речь идёт о дистилляции — подходе, при котором ответы более мощной модели становятся обучающими материалами для другой системы. В качестве таких данных могут использоваться решения задач, примеры, объяснения и подробные рассуждения, показывающие последовательность получения ответа.
Для создания передовой языковой модели требуются значительные вычислительные ресурсы. Дистилляция позволяет частично перенести эту работу на уже существующую систему: она генерирует большое количество примеров, а разработчики используют их для обучения собственной модели.
Почему источником стала OpenAI
Ранее, как отмечает The Information, китайские лаборатории преимущественно обращались к моделям Claude от Anthropic для получения подобных данных. После усиления защитных механизмов Anthropic разработчики, по данным источников издания, переключили внимание на системы OpenAI.
Публикация не уточняет, каким именно образом DeepSeek и Moonshot AI получали ответы GPT-6 Astra, а также какой объём данных был использован. Известно лишь, что речь идёт о применении результатов модели в рамках обучения собственных разработок через метод дистилляции.
