Компания Anthropic все активнее использует искусственный интеллект для создания и совершенствования собственных ИИ-моделей. По данным независимой исследовательской организации METR, за последний год темпы развития моделей компании выросли примерно в два раза. Исследователи связывают большую часть этого ускорения именно с применением ИИ, а не только с увеличением вычислительных мощностей.
METR провела 11-недельное исследование внутри Anthropic. Специалисты изучали внутренние данные, результаты моделей и опыт сотрудников. Согласно отчету, за последний год компания достигла примерно такого прогресса в тестах, на который раньше уходило два года.
Сотрудники Anthropic также сообщили о заметном росте производительности. По их самооценке, при работе с самой мощной внутренней моделью они в среднем выполняли задачи примерно в 12 раз эффективнее, чем без помощи ИИ. Это примерно вдвое выше показателя, который сотрудники называли несколькими месяцами ранее при использовании модели Mythos 5.
Пока искусственный интеллект в основном помогает специалистам, а не самостоятельно ведет весь процесс разработки. Однако METR отмечает признаки того, что в будущем автономный вклад моделей может вырасти. Исследователи также не обнаружили явных признаков замедления прогресса или ограничений, которые могли бы остановить дальнейшее ускорение.
За последние шесть месяцев Anthropic завершила обучение трех новых моделей, которые пока не выпущены для широкой публики. В отчете они обозначены как Model 2, Model 3 и Model 4. Их обучение завершилось в июле, в августе–сентябре и в сентябре–октябре соответственно.
Исследование имеет ограничения. Anthropic предоставила METR доступ к внутренним материалам, но сохранила право редактировать итоговый документ. Компания скрыла значительную часть наиболее информативных данных, поэтому независимым специалистам и общественности сложнее проверить выводы.
В Anthropic объяснили ограничения коммерческой чувствительностью информации и опасением, что раскрытие подробностей поможет конкурентам ускорить разработку ИИ. Сооснователь компании Сэм Маккэндлиш признал, что из-за сокращений отчет стало сложнее проверить, но назвал такое решение оправданным.
Результаты исследования вновь подняли вопрос о том, насколько быстро ИИ сможет участвовать в создании следующих поколений ИИ-систем и успеют ли меры безопасности за этим развитием.
Читайте также: Claude случайно удалил год лекций и учебную программу профессора права