Компания Google представила обновлённую версию рейтинга Android Bench, где собраны новейшие модели искусственного интеллекта и проанализированы их способности в контексте разработки приложений для Android. В этот перечень вошла Anthropic Fable 5, которая сразу же возглавила его.
Источник изображения: developer.android.com/bench
Корпорация пересмотрела методологию ранжирования ИИ-моделей, заменив прежнюю систему бенчмаркинга на унифицированный фреймворк Harbor. Благодаря внедрению этого инструмента разработчики Android смогут применять единые методы для оценки ИИ-моделей в различных сценариях использования — Google, по сути, сделала Android Bench доступным для всех желающих, кто хочет направлять задачи, связанные с разработкой под Android. Эти задачи будут использоваться для определения того, насколько эффективно модели справляются с каждым конкретным сценарием. Кроме того, разработчикам предлагается публиковать свои собственные результаты тестирования.
Технологический гигант, который всегда придерживался принципов открытости и прозрачности, выложил свою методологию и тестовую платформу в открытый доступ на GitHub. Google также обновила рейтинг, применив новую структуру — первое место с ощутимым отрывом заняла модель Anthropic Claude Fable 5, набравшая 84,5 %. Вторую позицию заняла OpenAI GPT-5.5 с показателем 80,2 %, а третье место досталось Claude Sonnet 5, которая отстала от лидера на 8,3 процентных пункта. Все модели, ранее присутствовавшие в рейтинге, получили обновлённые оценки.
