Google обновила Android Bench сегодня, добавив восемь новых моделей ИИ в таблицу лидеров теста разработки приложений для Android. Обновление включает Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus и Qwen 3.7 Max. Google создала этот тест для оценки работы крупных языковых моделей по 100 задачам разработки Android-приложений, а первая версия была запущена в марте.
Google добавила восемь моделей ИИ в таблицу лидеров Android Bench
Google расширила Android Bench восемью новыми моделями. В список вошли Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus и Qwen 3.7 Max. Компания также внедрила новую платформу и добавила метрики стоимости и эффективности. Google пригласила разработчиков проводить собственные тесты и подавать обратную связь.
Claude Fable 5 лидирует в тесте с точностью 84,5 процента
Claude Fable 5 показала точность 84,5 процента в тесте Android Bench, заняв первое место в таблице лидеров. GPT 5.4 и Claude Sonnet 5 расположились на втором и третьем местах. Gemini 3.1 Pro заняла пятое место в обновлённой версии. Модели OpenAI немного опередили ИИ Google в первоначальном релизе, запущенном в марте.
Android Bench оценивает 100 задач разработки
Android Bench тестирует крупные языковые модели по 100 задачам разработки для Android. Цель теста — определить, какие ИИ-агенты лучше всего справляются с созданием Android-приложений. Первая версия была запущена в марте, с тех пор в платформу добавлены модели с открытым весом для оценки.
FAQ
Какие модели добавила Google в Android Bench сегодня?
Google добавила восемь новых моделей: Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus и Qwen 3.7 Max.
Какой точностью отметилась Claude Fable 5 в Android Bench?
Claude Fable 5 достигла точности 84,5 процента, заняв первое место в таблице лидеров.
Когда Google запустила первоначальную версию Android Bench?
Первая версия Android Bench была запущена в марте.