METR: ИИ почти вдвое ускорил разработку моделей Anthropic
Исследовательская организация METR оценила, как использование искусственного интеллекта повлияло на темпы разработки моделей Anthropic. По данным анализа, с октября 2025 года возможности моделей компании на выбранных бенчмарках росли примерно в 1,9 раза быстрее, чем прежде.
Исследователи считают, что около 80% этого ускорения связано с применением ИИ внутри самой Anthropic. Для работы METR получила доступ к внутренним материалам компании, включая результаты тестирования трёх ещё не представленных моделей — Model 2, Model 3 и Model 4. Кроме того, специалисты организации провели интервью примерно с 15 сотрудниками Anthropic.
Как ИИ меняет работу исследователей
Оценка проводилась с использованием индекса AECI, причём анализ охватывал только часть задач, связанных с разработкой моделей. Полученный результат имеет значительную погрешность: доверительный интервал находится в диапазоне от 1,5 до 2,8 раза.
Сотрудники Anthropic рассказали, что Claude помогает им писать и проверять код, запускать эксперименты, анализировать результаты и быстрее проверять исследовательские гипотезы. Один из участников оценки заявил, что промежуток между формулировкой идеи и началом эксперимента сократился примерно на 80%. По мнению другого сотрудника, главным ограничением теперь становятся не написание кода, а наличие новых идей и доступных вычислительных ресурсов.
Ответы участников интервью, однако, не были однозначными. Двое сотрудников уверенно подтвердили ускорение более чем вдвое, ещё трое скорее согласились с такой оценкой. Четверо дали неоднозначные ответы, а двое не подтвердили существенного роста скорости.
В отдельных опросах сотрудники также оценили собственный прирост производительности при работе с наиболее мощной внутренней моделью в среднем в 12 раз. METR призывает относиться к этой цифре осторожно: она основана на субъективных впечатлениях и не заменяет результаты контролируемого эксперимента.
До полностью автономной разработки ещё далеко
По оценке METR, Claude пока в основном ускоряет отдельные этапы работы исследователей, но не выполняет автономно ключевые процессы обучения новых моделей. При этом организация заметила первые признаки того, что ИИ начинает справляться с более сложными задачами в рамках разработки.
Исследователи также не нашли очевидных ограничений в алгоритмах, вычислительных ресурсах или данных, которые гарантированно остановили бы дальнейшее ускорение в ближайшие 12 месяцев. В METR подчёркивают, что этот прогноз остаётся неопределённым и не означает неизбежного продолжения текущих темпов.
Вопросы к прозрачности исследования
Выводы METR появились на фоне сентябрьского призыва сооснователя Anthropic Дарио Амодеи замедлить развитие ИИ до тех пор, пока меры безопасности не начнут соответствовать росту возможностей моделей.
Полностью проверить результаты исследования независимым образом сложно: Anthropic разрешила METR изучить внутренние данные, но скрыла значительную часть материалов. В компании объяснили это опасением, что раскрытие подробностей даст конкурентам готовую схему для ускорения разработки.
Сооснователь Anthropic Сэм МакКэндлиш согласился с основным выводом о том, что ИИ уже ускоряет исследования внутри компании, но признал: из-за удалённых данных независимая проверка оценки затруднена. В отдельном анализе августовского отчёта Anthropic о рисках автоматизации исследований METR также предположила, что компания могла пересечь собственный порог раннего предупреждения об ускорении разработки.
