Клод Фабль 5.2 за два дня завершил формализацию теоремы Ферма, Anthropic выпустила сразу две флагманские модели

Редакция Машинного Разума

Наконец, в новой гонке за флагманскими моделями, Anthropic первым сделал шаг.

Сегодня рано утром Anthropic сразу представил две топовые модели: Fable 5.2 и Mythos 5.2.

Официально заявлено, что «обе модели нацелены на сложные технические задачи, могут участвовать в крупных комплексных проектах в различных областях и достигать дальнейших улучшений в программировании, логическом мышлении и визуализации».

Кроме того, Anthropic также начал предлагать «Reset» бонусы, знакомые пользователям OpenAI Tibo.

Отец Claude Code также объявил: «Мы хотим предоставить больше бонусов тем пользователям, которые были с нами дольше всего. Поэтому в Fable 5.2, чем дольше срок подписки, тем больше Fable resets (количество сбросов) получат пользователи».

Согласно информации, Claude Fable 5.2 и Claude Mythos 5.2 в тестировании перед официальным выпуском помогли инженерам Anthropic завершить ранее трудные проекты по миграции программного обеспечения, разработав с нуля три электронных устройства, которые функционируют нормально, решив две неразрешенные проблемы в области физики черных дыр, добившись значительного прогресса в оценке роботов и завершив формальное доказательство теоремы Ферма всего за 30 часов. Кроме того, у них есть множество других сценариев применения.

Claude Fable и Claude Mythos используют одну и ту же базовую модель. Fable оснащен строгими механизмами кибербезопасности и биобезопасности, которые эффективно предотвращают злоупотребления моделью, поэтому он доступен для всех пользователей. Организации, желающие использовать модель в таких полезных областях, как кибербезопасность или биомедицинские исследования, могут подать заявку на использование Mythos через недавно расширенную программу жизненных наук и программу проверки кибербезопасности от Anthropic.

Скорость генерации обеих моделей на 30% выше, чем у Claude Fable 5.1 и Claude Mythos 5.1, а цены также снижены: 8 долларов за миллион входных токенов и 40 долларов за миллион выходных токенов.

Fable 5.2 и Mythos 5.2 также предлагают опциональный быстрый режим (Fast Mode), который может увеличить скорость генерации токенов до 2,5 раз по сравнению с обычным режимом. Цена быстрого режима составляет 16 долларов за миллион входных токенов и 80 долларов за миллион выходных токенов.

Оценка производительности Claude Fable 5.2 и Mythos 5.2

Результаты бенчмаркинга

Ниже приведенные результаты бенчмаркинга показывают, что Claude Fable 5.2 и Mythos 5.2 превосходят Opus 5.5 по почти всем оцененным возможностям.

С точки зрения горизонтального тестирования, Fable 5.2 лидирует в нескольких сложных задачах. В программировании он набрал 49,1% и 69,9% на FrontierCode 2.0 и FrontierSWE v2 соответственно, что превышает 42,8% и 65,5% у GPT-6 Astra, а также опережает Opus 5.5. В оценке робототехнических операций RoboDojo Sim Fable 5.2 достиг 64,9%, что на 37,3 процентных пункта выше, чем 27,6% у предыдущего поколения Fable 5.1, и значительно выше 39,4% у Opus 5.5 и 29,8% у GPT-6 Astra.

Кроме того, он набрал 89,3% в оценке компьютерных операций OSWorld 2.1 и 74,2% в многодисциплинарной оценке логического мышления Humanity's Last Exam (с инструментами), что ставит его на первое место среди моделей, представленных на графике. Однако в оценке знаний AA-Briefcase Elo-оценка Opus 5.5 немного опережает с 1800 баллами, в то время как Fable 5.2 имеет 1785 баллов. Некоторые высокие баллы в области научных исследований и кибербезопасности были получены благодаря Mythos 5.2, выпущенному одновременно.

Интенсивность и эффективность логического мышления

При настройках средней (Medium) интенсивности логического мышления, которые также являются настройками по умолчанию для Claude и Claude Code, Fable 5.2 требует меньше токенов для выполнения сложных задач, чем Fable 5.1.

В ранних тестах на FrontierCode 2.0, когда Fable 5.2 использовал высокую (High) интенсивность логического мышления, он показал результаты, сопоставимые с Opus 5.5, использующим максимальную (Max) интенсивность, при этом стоимость выполнения отдельных задач составила лишь около половины от стоимости последнего. При очень высокой (Xhigh) интенсивности логического мышления Fable 5.2 также превзошел все другие опубликованные модели, участвовавшие в тестировании.

Программирование

На данный момент более 90% изменений кода, объединенных в основной кодовой базе Anthropic, были выполнены Claude под руководством человека.

Anthropic уже использовал Fable 5.2 для исправления долгосрочных сложных ошибок за считанные минуты, оптимизировав производительность различных сервисов, а также завершив некоторые важные программные проекты, которые ранее не могли быть запущены из-за длительного времени выполнения или высоких затрат.

Ранее команда агентов, работающая на ранней версии Fable 5.2, мигрировала ключевую производственную службу с Python на Rust. После миграции эффективность и надежность этой службы значительно возросли, а скорость запуска увеличилась примерно в 26 раз.

Тесты также показали, что Fable 5.2 обладает высокой инженерной интуицией. Даже сталкиваясь с неясными требованиями, он может предоставить качественные результаты.

В одном эксперименте инженер Anthropic попросил Fable 5.2 разработать прототип операционной системы с нуля. Модель начала с пустой папки, координировала более 1000 подагентов и непрерывно в течение 8 дней писала, тестировала и проверяла код. В конечном итоге ей удалось разработать операционную систему, которая может запускаться и работать на ноутбуке.

Эта система имеет собственное ядро, способное управлять всей машиной; включает в себя драйверы для диска, клавиатуры и сети, а также функции постоянного хранения файлов, оконной системы, интерфейса входа и установщика, в ней также встроены функции Claude.

Ранние тестировщики также были впечатлены тем, как Fable 5.2 применяет свои программные способности к различным задачам.

Кибербезопасность

Claude Mythos 5.2 является самой мощной моделью Anthropic в области кибербезопасности. По сравнению с предыдущими моделями, она может обнаруживать больше уязвимостей и лучше справляется с их воспроизведением и исправлением. Стоит отметить, что механизмы защиты Claude Fable 5.2 блокируют большинство задач, связанных с кибербезопасностью.

Одна из компаний в области кибербезопасности обнаружила, что из уязвимостей, найденных и подтвержденных Claude Mythos 5.2, шестая часть не была обнаружена всеми другими передовыми моделями, которые они тестировали.

Внутренние тесты Anthropic, проведенные в рамках CVE Rediscovery, показали, что количество уязвимостей, обнаруженных Claude Mythos 5.2, на 10,2% больше, чем у Claude Opus 5.5, и на 14,4% больше, чем у Claude Mythos 5.1.

Claude Mythos 5.2 также продемонстрировал значительные улучшения в точности суждений и калибровке уверенности. Один из тестировщиков заметил, что предыдущие модели примерно в 1 из 20 случаев завышали серьезность обнаруженных уязвимостей, тогда как Claude Mythos 5.2 не проявил такого поведения.

Пользователи могут использовать возможности кибербезопасности Claude Mythos 5.2 через программу проверки кибербезопасности. Anthropic продолжает расширять и улучшать эту программу.

Даже без участия в программе проверки кибербезопасности, корпоративные клиенты Claude Enterprise могут использовать Claude Security. Эта услуга использует наиболее мощную модель Anthropic для сканирования кодовых баз в поисках потенциальных уязвимостей и уже интегрирована с Claude Mythos 5.2.

Недавнее обновление еще больше усилило возможности Claude Security. Теперь он может постоянно отслеживать кодовые репозитории, следить за обновлениями кода и гарантировать, что обнаруженные уязвимости будут исправлены; также он может анализировать с учетом большего количества контекстной информации и интегрироваться с другими инструментами, используемыми пользователями, через API и MCP.

Наука и инженерия

Многие важные работы в области науки, инженерии и математики все больше зависят от программных возможностей. Независимо от того, анализ данных, создание молекулярных моделей, проектирование компонентов или управление экспериментальными приборами, все это можно выполнить с помощью программного обеспечения.

Ниже Anthropic рассказывает, как Claude Fable 5.2 и Claude Mythos 5.2 помогают исследователям решать задачи в этих областях и продвигать соответствующие исследования.

Теоретическая физика

Claude Fable 5.2 решил две неразрешенные проблемы в области теоретической физики. Обе проблемы связаны с черными дырами и касаются двух основных теорий современной физики — проблемы объединения относительности и квантовой механики.

Две достижения Claude основаны на теории голографической двойственности (Holographic Duality). Основная идея этой теории заключается в том, что некоторые вселенные, содержащие гравитацию, могут быть точно описаны квантовой теорией, которая полностью не содержит гравитации.

Первый вопрос восходит к 1983 году. В то время физики уже доказали, что с нагреванием этих вселенных черные дыры могут внезапно образовываться, как вода внезапно закипает при достижении определенной температуры.

Адрес: https://hexagonmath.org/2611.00175v1

Но тогда используемый метод подходил только для достаточно больших вселенных, так как только на таких масштабах относительность применима. В 2003 году исследователи предложили вычислительную задачу, надеясь выяснить, будет ли такое же явление происходить и в очень маленьких вселенных. В этих вселенных можно было описывать только с помощью квантовой теории. Однако вычисление было слишком сложным и занимало слишком много времени, и никто не смог его завершить.

Fable 5.2 в основном самостоятельно выполнила это вычисление и обнаружила, что даже в очень маленьких вселенных такое преобразование также происходит внезапно.

Второй вопрос касается технологии, которую физики используют уже более 15 лет. Эта технология применяется для исключения возможных теорий квантовой гравитации в упрощенных моделях вселенной. Fable 5.2 нашла точные границы применения этой технологии.

Адрес: https://hexagonmath.org/2611.00174v1

Складка белков

Аденовирус, ассоциированный с вирусом (Adeno-associated Virus, AAV), является очень маленьким и безвредным для человека вирусом. Его белковая оболочка, или капсид (Capsid), может использоваться для доставки генетической терапии. Структура белка капсида очень важна. Например, она влияет на то, будет ли генетическая терапия распознана и заблокирована иммунной системой пациента. Но структура капсида также довольно сложна.

Существующие модели складки белков, такие как AlphaFold, могут предсказывать структуру отдельных белков, но капсид вируса состоит из десятков белков, и его общая структура гораздо сложнее.

Claude Mythos 5.2 на основе двух открытых моделей складки белков нашла новый способ точно предсказывать структуру всего капсида. Конкретно, она написала код, позволяющий этим двум моделям обрабатывать группы белковых цепей с перекрывающимися областями, а затем, используя известную симметрию капсида, интегрировать результаты предсказаний различных частей, в конечном итоге восстанавливая полную структуру капсида.

Этот метод показал хорошие результаты на нескольких естественных и искусственно спроектированных капсидах. В наших тестах из 34 капсидов, которые пытался смоделировать Claude, 28 получили точные предсказания структуры.

Математика

Математическая формализация означает преобразование математических доказательств в язык, который может последовательно проверять компьютер. Эта работа может помочь математикам проверять результаты исследований, повышая уверенность в правильности доказательства, не полагаясь полностью на ручную проверку. Это особенно важно, когда модели ИИ дают результаты, которые трудно проверить напрямую человеку.

Но математическая формализация обычно занимает много времени. Если ИИ сможет помочь в этой работе, математики смогут уделять больше времени исследованию новых математических идей.

Ранее Anthropic использовала еще не выпущенную исследовательскую версию Claude для формализации теоремы Ферма, что заняло 11 дней. Эта работа зависела от специально разработанной исполнительной структуры (Harness) и требовала от человеческих исследователей предоставления руководства.

В отличие от этого, команда из 1000 агентов Fable 5.2 завершила формализацию всей теоремы всего за 30 часов, почти не требуя вмешательства человека.

Fable 5.2 начала с очень ограниченных подсказок и самостоятельно установила механизм сотрудничества между агентами. Весь процесс прошел без использования каких-либо математических справочных материалов, полагаясь лишь на список промежуточных утверждений теоремы для оценки прогресса задачи.

По сравнению с нашим первым завершением формализации, на этот раз задача потребовала только треть действий Token, а длина окончательного доказательства сократилась до одной седьмой от первоначальной.

На следующем графике показаны результаты различных моделей: при использовании той же конфигурации из 1000 агентов, Opus 5.5 потратил 18 часов и завершил только 26% формализации. Даже если продолжить работу до 30 часов, прогресс почти не увеличился.

Аппаратное обеспечение и роботы

Многие потенциальные ценности ИИ, такие как ускорение лабораторных исследований, зависят от того, сможет ли он действовать в физическом мире. Claude Fable 5.2 продолжила тенденцию моделей Claude к повышению практичности в реальном мире. В задачах, связанных с проектированием аппаратных устройств, она уже продемонстрировала хорошие способности и достигла значительного прогресса в управлении физическими роботами.

Anthropic специально протестировала аппаратные инженерные способности Fable 5.2, дав ей короткую подсказку с просьбой спроектировать и изготовить три электронных устройства, которые могут нормально работать. Каждое устройство должно иметь независимую печатную плату, 3D-печатный корпус и сопутствующее программное обеспечение. В итоге были завершены три устройства: центральный голосовой помощник для дома, USB-колонка и устройство виртуального питомца, которое можно держать в руках.

Claude самостоятельно написала спецификации продукта, выбрала электронные компоненты, которые могут предоставить американские дистрибьюторы, спроектировала и завершила разводку четырехслойной печатной платы для каждого устройства, создала модель корпуса с помощью компьютерного автоматизированного проектирования (CAD) и написала необходимое программное обеспечение для устройств. Почти без вмешательства человека каждая печатная плата была спроектирована менее чем за день и достигла состояния, готового к производству.

После завершения производства печатных плат, Claude также направила инженеров компании в тестировании и сборке устройств. В итоге все три устройства работали нормально, без необходимости в каких-либо изменениях в схемах.

Роботы

По сравнению с предыдущими моделями Claude, Fable 5.2 значительно улучшила свои способности в управлении физическими роботами. Даже сталкиваясь с задачами, для которых она никогда не проходила специальное обучение, она демонстрировала высокие операционные способности.

Ниже представлен видеоролик, демонстрирующий выполнение роботом, управляемым Fable 5.2, нескольких задач, включая решение кубика Рубика, открытие крышек бутылок и рисование рисунка робота.

В открытом бенчмарке RoboDojo исследователи использовали изображения с камер, чтобы заставить ИИ управлять симулированным двуруким роботом для выполнения задач. Fable 5.2 не только превзошла другие передовые модели, использующие ту же тестовую структуру, но и обошла большинство ИИ-систем, специально разработанных для управления роботами.

Результаты оценки RoboDojo

Исследования и анализ

Ранние тестировщики, использующие Claude Fable 5.2 для проведения исследований и анализа, обнаружили, что по сравнению с предыдущими моделями она может обрабатывать более нечеткие и объемные задачи, а также демонстрировать лучшие способности к суждению в сложных и неопределенных вопросах, особенно в работах, требующих абстрактного мышления и проектирования решений.

Собственная торговая компания Jump Trading провела тестирование Fable 5.2 с использованием некоторых агентов, имитирующих их задачи количественного исследования. В процессе тестирования они подключили модель к системе, аналогичной внутреннему исследовательскому фрейму компании.

В одном из тестов Fable 5.2 почти самостоятельно взяла на себя все необходимые роли, включая написание кода, координацию задач, планирование и подачу задач. Ранее, используя другие модели, команде часто приходилось тратить много времени на ручную настройку распределения ролей, чтобы адаптировать их к сильным и слабым сторонам различных моделей.

Безопасность и согласование

Ни одно тестирование не может полностью предсказать, как будет вести себя высокоэффективная модель после развертывания. Поэтому перед официальным выпуском мы используем множество методов тестирования и собираем различные виды доказательств.

Для моделей, лежащих в основе Claude Fable 5.2 и Claude Mythos 5.2, работа по обеспечению безопасности, проведенная Anthropic перед развертыванием, включает: обучение и тестирование согласования, проектирование новых оценок для проверки склонности модели к безполезным действиям, создание более сильных механизмов защиты от злоупотреблений и расширение мониторинга поведения.

Перед официальным выпуском модель также прошла тестирование внешними оценочными учреждениями, включая Институт безопасности искусственного интеллекта Великобритании, Frontier Design и METR.

Тестирование согласования

Anthropic провела ряд оценок, чтобы проверить уровень согласования Claude Fable 5.2 и Claude Mythos 5.2 с точки зрения поведения, уделяя особое внимание тому, в какой степени они проявляют непредвиденное поведение и поведение, которое может представлять собой риск для безопасности.

Согласно результатам нескольких оценок, риск возникновения небезопасного поведения у этих двух моделей в высокорисковых сценариях низок и в целом сопоставим с другими недавно выпущенными моделями.

Anthropic провела автоматизированный аудит поведения для Claude Mythos 5.2. Следует отметить, что Mythos 5.2 использует ту же базовую модель, что и Fable 5.2, но не имеет некоторых механизмов кибербезопасности и биобезопасности, которые есть у последней. Этот автоматизированный аудит охватывает около 1900 различных сценариев для проверки поведения модели в различных ситуациях.

По большинству оценочных показателей Claude Mythos 5.2 показывает результаты на уровне или лучше, чем Opus 5.5, Sonnet 5.5 и Claude Mythos 5.1. Например, в большинстве оценок, связанных с введением пользователей в заблуждение, она показала лучшие результаты, чем эти три модели. В частности, будь то выдумка входной информации, ложное утверждение о завершении задачи, пропуск важной информации или недостоверное представление о качестве работы, Claude Mythos 5.2 проявила меньшую частоту этих случаев.

В процессе тестирования Anthropic особое внимание уделила недавним инцидентам в области кибербезопасности и согласования, которые привлекли внимание, и связанным с ними моделям поведения. Например, по сравнению с Opus 5.5, Sonnet 5.5 и Mythos 5.1, Claude Mythos 5.2 реже демонстрировал предвзятое или мотивированное поведение. Такие рассуждения могут привести к тому, что модель интерпретирует доказательства, указывающие на то, что она не находится в симуляционной среде, и, следовательно, действует без полного понимания реальных последствий.

Anthropic также провела множество различных оценок, чтобы протестировать склонность модели к попыткам покинуть песочницу. В двух ранее использованных оценках Claude Mythos 5.2 попыток побега из песочницы было значительно меньше, чем у всех других протестированных моделей.

Кроме того, Anthropic разработала специальный тест на устойчивость, охватывающий более 1800 сценариев. Большинство сценариев невозможно завершить без выхода из песочницы, и сама тестовая среда была намеренно настроена с некоторыми уязвимостями безопасности. В этом тесте Claude Mythos 5.2 использовал наши учетные данные или файлы, размещенные за пределами песочницы, в 3.1% сценариев.

Этот процент примерно равен 3.3% у Opus 5.5, ниже 5.1% у Sonnet 5.5 и значительно ниже, чем у предыдущих двух версий Claude Mythos: 39% у Mythos 5 и 21% у Mythos 5.1.

Anthropic также обнаружила, что с помощью других методов, таких как объяснение модели конкретной среды песочницы и предоставление инструментов для сообщения о уязвимостях безопасности, можно дополнительно сократить количество попыток побега Claude Mythos 5.2.

В то же время Anthropic продолжает улучшать методы оценки, чтобы тестовая среда была ближе к реальным сценариям, и выяснить, какие проблемы были упущены в существующих оценках.

Больше информации о модели можно найти в карточке модели на 264 страницах:

Адрес карточки модели: https://assets.claude.com/27d60918d218125e7504bc7354c4b4626ec56b11.pdf

Адрес блога: https://www.anthropic.com/claude-fable-and-mythos-5-2

© THE END