Антропогенные процессы ускоряются вдвое, но, по данным METR, доказательства скрыты.

Согласно независимому обзору, компания Anthropic совершенствует свои модели ИИ примерно вдвое быстрее, чем годом ранее. Однако есть один нюанс: компания скрыла большую часть доказательств, которые, по мнению экспертов, имели наибольшее значение, поэтому общественности приходится верить им на слово, поскольку эти результаты могут изменить представление о рискованности темпов развития ИИ.

Оценка была получена от Оценка моделей и исследование угроз (METR), Опубликовано в четверг. METR провела 11 недель в Anthropic с середины августа до конца октября, имея доступ к внутренним контрольным показателям, метрикам обучения, интервью с сотрудниками и опросам. Она не получала никакой оплаты от лаборатории.

Число

По данным внутреннего индекса компетенций Anthropic (AECI), оценки модели растут примерно на определенную величину. 1,9 раза темпы роста до октября 2025 года с 95% доверительным интервалом 1,5–2,8x. Проще говоря, METR утверждает, что за последний год проект Anthropic добился прогресса, примерно соответствующего двум годам до настоящего времени. Большинство сотрудников METR, работающих над проектом, теперь считают, что лаборатория, “вероятно”, улучшает показатели по четко определенным задачам примерно вдвое быстрее, чем в период с марта 2024 года по октябрь 2025 года, хотя они не удивятся, если реальный показатель окажется ближе к 1,3x или 3x.

METR заявляет, что может “с уверенностью” исключить более быстрый рост вычислительных мощностей для обучения как причину. Интервью и опросы указывают на активное использование инструментов ИИ, помогающих исследователям писать код, проводить эксперименты и проверять новые идеи. Опросы сотрудников в Slack, в которых сообщалось об ускорении работы последней внутренней модели в октябре, показали примерно 12-кратное увеличение — это, как подчеркивает METR, лишь приблизительные данные, но они соответствуют значительному приросту производительности. ИИ пока не вносит существенного, полностью автономного вклада в самые сложные этапы обучения, сообщили экспертам, хотя “признаки активности” в этом направлении появляются.

То, чего ты не видишь

Компания Anthropic имела единоличное право удалить непубличную информацию из публичного отчета. METR утверждает, что компания удалила большую часть доказательств, которые группа сочла наиболее информативными для своих выводов о рисках, включая подробные оценки ускорения по этапам разработки, анализ узких мест и прогнозы для будущих моделей. Anthropic заявила, что эти сокращения были направлены на удаление конфиденциальной информации, которая могла бы помочь конкурирующим разработчикам.

METR прямо заявляет о результате: общественность не может оценить сами доказательства или согласовать их с другими источниками. “Этот отчет не обеспечивает ‘прозрачности в отношении доказательств’”, — говорится в нем. Читателям приходится полагаться на суждение METR больше, чем считает группа оптимальной для вопросов такой важности. AP News Было отмечено то же противоречие: предупреждение о более быстром прогрессе, связанное с материалами, которые большинство людей не могут изучить.

Почему утверждение о темпе оспаривается

Рецензенты перечисляют возможные ошибки в ту или иную сторону. Ускорение может ограничиваться простыми задачами с автоматической оценкой и преувеличивать влияние на реальный мир, связанное с несовершенством. Предыдущий рост AECI компании Anthropic был медленнее, чем в целом по отрасли, что может завышать сравнение с “двукратным” ростом. С другой стороны, засекреченные внутренние показатели намекали на то, что ускорение может превышать двукратный уровень и продолжать расти, а METR не выявила явных узких мест, которые могли бы препятствовать дальнейшему ускорению в течение следующего года.

Это важно, потому что рекурсивное самосовершенствование — системы ИИ, которые действительно помогают создавать следующее, более быстрое поколение, — это сценарий, который, по мнению исследователей в области безопасности, может сократить сроки. По оценкам METR, большинство (возможно, около 80%) из них текущий Ускорение обусловлено использованием искусственного интеллекта, однако относительно факторов, влияющих на ситуацию в конце 2025 года, остается неопределенность. Соучредитель Сэм МакКэндлиш заявил, что Anthropic планирует провести собственный публичный анализ темпов прогресса внутри компании., Как сообщило издание The Verge.

Почему это важно

Если передовые лаборатории уже получают значительный прирост производительности благодаря собственным моделям, внешним надзорным органам необходимы доказательства, которые может проверить общественность, а не только заголовки, отражающие масштабы изменений. Удвоение темпов прогресса меняет то, сколько времени у общества есть на тестирование, регулирование и адаптацию. Утаивание базовых показателей превращает независимую оценку в нечто, более близкое к мнению доверенного посредника, что полезно, но не то же самое, что открытая проверка. Для работников, уже наблюдающих, как ИИ меняет повседневную работу... включая более длинные дни, а не короткие. — Вопрос уже не в том, помогают ли эти инструменты. Вопрос в том, насколько быстро эта помощь проявляется в лабораториях, которые их создают, и кто получает доступ к этим цифрам.