A Google atualiza o Android Bench com Claude Fable 5 e sete novos modelos de IA

A Google atualizou o Android Bench hoje, adicionando oito novos modelos de IA ao seu quadro de classificação de avaliação de desenvolvimento de aplicações Android. A atualização inclui Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus e Qwen 3.7 Max. A Google criou o benchmark para avaliar o desempenho de grandes modelos de linguagem em 100 tarefas de desenvolvimento Android, com a versão original lançada em março.

Google adiciona oito modelos de IA ao quadro de classificação Android Bench

A Google expandiu o Android Bench com oito novos modelos. As adições incluem Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus e Qwen 3.7 Max. A empresa também adotou uma nova estrutura e acrescentou métricas de custo e eficiência. A Google convidou os desenvolvedores a realizarem os seus próprios testes e a enviarem feedback.

Claude Fable 5 lidera o benchmark com 84,5 por cento de precisão

Claude Fable 5 alcançou 84,5 por cento de precisão no teste Android Bench, ficando em primeiro lugar na classificação. GPT 5.4 e Claude Sonnet 5 ficaram em segundo e terceiro lugar. Gemini 3.1 Pro ficou em quinto na classificação atualizada. Os modelos da OpenAI tiveram uma ligeira vantagem sobre a IA da Google na versão inicial lançada em março.

Android Bench avalia 100 tarefas de desenvolvimento

O Android Bench testa grandes modelos de linguagem numa série de 100 tarefas de desenvolvimento Android. O benchmark pretende demonstrar quais os agentes de IA que se destacam na criação de aplicações Android. A Google lançou a versão inicial em março e, desde então, adicionou modelos de código aberto ao quadro de avaliação.

FAQ

Que modelos a Google adicionou ao Android Bench hoje?
A Google adicionou oito novos modelos ao Android Bench: Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus e Qwen 3.7 Max.

Qual foi a precisão alcançada pelo Claude Fable 5 no Android Bench?
Claude Fable 5 alcançou 84,5 por cento de precisão no teste Android Bench, ficando em primeiro lugar na classificação.

Quando a Google lançou a versão inicial do Android Bench?
A Google lançou a versão inicial do Android Bench em março.