Modelos de IA
OTIS Mock AIME: placar de modelos de IA
182 modelos de IA no OTIS Mock AIME, segundo a Epoch AI. É um benchmark saturado: vários modelos de laboratórios diferentes já chegaram ao teto.
O OTIS Mock AIME, no quadro da Epoch AI (CC BY 4.0, versão mais recente consultada), traz problemas de matemática no estilo da olimpíada americana AIME, numa versão de treino feita para o modelo não se apoiar em respostas que já tenha visto. A nota é o percentual de acerto. Aqui estão os 182 modelos desta área com nota no OTIS Mock AIME, segundo a Epoch AI. 16 modelos têm 100%, e por isso a tabela mostra o placar sem posição.
OTIS Mock AIME
100%
Claude Fable 5
modelos
182
01
| Modelo | % | Fonte |
|---|---|---|
| Claude Fable 5Anthropic · fechado | 100% maior nota | Epoch AI |
| Claude Fable 5.1Anthropic · fechado | 100% maior nota | Epoch AI |
| Claude Opus 5.5Anthropic · fechado | 100% maior nota | Epoch AI |
| Claude Sonnet 5.5Anthropic · fechado | 100% maior nota | Epoch AI |
| Gemini 4 ArgonGoogle · fechado | 100% maior nota | Epoch AI |
| Gemini 4 CarbonGoogle · fechado | 100% maior nota | Epoch AI |
| GPT-5.5OpenAI · fechado | 100% maior nota | Epoch AI |
| GPT-5.5 ProOpenAI · fechado | 100% maior nota | Epoch AI |
| GPT-5.6 SolOpenAI · fechado | 100% maior nota | Epoch AI |
| GPT-6 AstraOpenAI · fechado | 100% maior nota | Epoch AI |
| GPT-6 SolOpenAI · fechado | 100% maior nota | Epoch AI |
| GPT-6.1 SolOpenAI · fechado | 100% maior nota | Epoch AI |
| GPT-6.1 TerraOpenAI · fechado | 100% maior nota | Epoch AI |
| GPT-6.2 AstraOpenAI · fechado | 100% maior nota | Epoch AI |
| Kimi K3.1 ProMoonshot AI · aberto | 100% maior nota | Epoch AI |
| Qwen3.8 MaxAlibaba · fechado | 100% maior nota | Epoch AI |
| Claude Fable 5.2Anthropic · fechado | 99,7% empate técnico com a maior nota | Epoch AI |
| GPT-5.6 TerraOpenAI · fechado | 99,7% empate técnico com a maior nota | Epoch AI |
| Mistral Large 4Mistral AI · aberto | 99,4% empate técnico com a maior nota | Epoch AI |
| Muse WonderMeta · fechado | 99,4% empate técnico com a maior nota | Epoch AI |
| Doubao Seed Evolving (Nov 2026)ByteDance · fechado | 99,2% empate técnico com a maior nota | Epoch AI |
| Grok 4.6xAI · fechado | 99,2% empate técnico com a maior nota | Epoch AI |
| Muse Spark 1.3Meta · fechado | 99,2% empate técnico com a maior nota | Epoch AI |
| Claude Haiku 5.5Anthropic · fechado | 98,9% empate técnico com a maior nota | Epoch AI |
| Claude Opus 5Anthropic · fechado | 98,9% empate técnico com a maior nota | Epoch AI |
| Gemini 3.8 FlashGoogle · fechado | 98,9% empate técnico com a maior nota | Epoch AI |
| GPT-6 LunaOpenAI · fechado | 98,9% empate técnico com a maior nota | Epoch AI |
| Claude Opus 4.8Anthropic · fechado | 98,3% empate técnico com a maior nota | Epoch AI |
| DeepSeek V4.1 FlashDeepSeek · aberto | 98,3% empate técnico com a maior nota | Epoch AI |
| GPT-5.6 LunaOpenAI · fechado | 98,3% empate técnico com a maior nota | Epoch AI |
| Grok 4.7xAI · fechado | 98,1% empate técnico com a maior nota | Epoch AI |
| Muse Spark OpenMeta · aberto | 98,1% empate técnico com a maior nota | Epoch AI |
| Claude Opus 4.7Anthropic · fechado | 97,8% empate técnico com a maior nota | Epoch AI |
| GPT-5.4OpenAI · fechado | 97,8% empate técnico com a maior nota | Epoch AI |
| Grok 4.5xAI · fechado | 97,8% empate técnico com a maior nota | Epoch AI |
| Gemini 3.7 FlashGoogle · fechado | 97,2% empate técnico com a maior nota | Epoch AI |
| Kimi K3Moonshot AI · aberto | 97,2% empate técnico com a maior nota | Epoch AI |
| DeepSeek V4 ProDeepSeek · aberto | 96,7% empate técnico com a maior nota | Epoch AI |
| Doubao Seed 2.1 TurboByteDance · fechado | 96,1% empate técnico com a maior nota | Epoch AI |
| GPT-5.2OpenAI · fechado | 96,1% empate técnico com a maior nota | Epoch AI |
| Kimi K2.6Moonshot AI · aberto | 96,1% empate técnico com a maior nota | Epoch AI |
| Doubao Seed 2.1 ProByteDance · fechado | 95,6% empate técnico com a maior nota | Epoch AI |
| Gemini 3 FlashGoogle · fechado | 95,6% empate técnico com a maior nota | Epoch AI |
| Gemini 3.1 ProGoogle · fechado | 95,6% empate técnico com a maior nota | Epoch AI |
| Gemini 3.5 FlashGoogle · fechado | 95,6% empate técnico com a maior nota | Epoch AI |
| Kimi K2.7 CodeMoonshot AI · aberto | 95,6% empate técnico com a maior nota | Epoch AI |
| Qwen3.7 MaxAlibaba · fechado | 95,6% empate técnico com a maior nota | Epoch AI |
| Claude Sonnet 5Anthropic · fechado | 94,7% empate técnico com a maior nota | Epoch AI |
| Claude Opus 4.6Anthropic · fechado | 94,4% empate técnico com a maior nota | Epoch AI |
| DeepSeek V4 Flash 0731DeepSeek · aberto | 94,4% empate técnico com a maior nota | Epoch AI |
| Gemini 3.6 FlashGoogle · fechado | 94,2% empate técnico com a maior nota | Epoch AI |
| Doubao-Seed-2.0 ProByteDance · fechado | 93,9% empate técnico com a maior nota | Epoch AI |
| GLM-5.3-FlashZhipu AI (Z.ai) · aberto | 93,9% empate técnico com a maior nota | Epoch AI |
| GLM 5.1Zhipu AI (Z.ai) · aberto | 93,3% empate técnico com a maior nota | Epoch AI |
| Grok 4.3 BetaxAI · fechado | 93,3% empate técnico com a maior nota | Epoch AI |
| Qwen3.6 PlusAlibaba · fechado | 93,3% empate técnico com a maior nota | Epoch AI |
| Qwen3.7 PlusAlibaba · fechado | 93,3% empate técnico com a maior nota | Epoch AI |
| Grok 4.20xAI · fechado | 92,2% empate técnico com a maior nota | Epoch AI |
| Kimi K2.5Moonshot AI · aberto | 92,2% empate técnico com a maior nota | Epoch AI |
| Gemini 3 ProGoogle · fechado | 91,4% empate técnico com a maior nota | Epoch AI |
| GPT-5OpenAI · fechado | 91,4% empate técnico com a maior nota | Epoch AI |
| Doubao Seed 2.0 Lite (Apr 2026)ByteDance · fechado | 91,1% empate técnico com a maior nota | Epoch AI |
| GLM-5.3Zhipu AI (Z.ai) · aberto | 91,1% empate técnico com a maior nota | Epoch AI |
| Qwen 3.6 Max (Preview)Alibaba · não informados | 91,1% empate técnico com a maior nota | Epoch AI |
| Qwen3.6 27BAlibaba · aberto | 91,1% empate técnico com a maior nota | Epoch AI |
| GPT-5.4 MiniOpenAI · fechado | 88,9% empate técnico com a maior nota | Epoch AI |
| gpt-oss-120bOpenAI · aberto | 88,9% empate técnico com a maior nota | Epoch AI |
| Muse SparkMeta · fechado | 88,9% empate técnico com a maior nota | Epoch AI |
| Qwen3.5 397B A17BAlibaba · aberto | 88,9% empate técnico com a maior nota | Epoch AI |
| GPT-5.1OpenAI · fechado | 88,6% empate técnico com a maior nota | Epoch AI |
| DeepSeek V3.2DeepSeek · aberto | 87,8% empate técnico com a maior nota | Epoch AI |
| GPT-5.4 NanoOpenAI · fechado | 87,8% empate técnico com a maior nota | Epoch AI |
| GPT-5 MiniOpenAI · fechado | 86,7% empate técnico com a maior nota | Epoch AI |
| Nemotron 3 UltraNVIDIA · aberto | 86,7% empate técnico com a maior nota | Epoch AI |
| Qwen3-235B-A22BAlibaba · aberto | 86,7% empate técnico com a maior nota | Epoch AI |
| Qwen3.5 Plus 2026-02-15Alibaba · não informados | 86,7% empate técnico com a maior nota | Epoch AI |
| Qwen3.6 35B A3BAlibaba · aberto | 86,7% empate técnico com a maior nota | Epoch AI |
| Qwen3.7 FlashAlibaba · fechado | 86,7% empate técnico com a maior nota | Epoch AI |
| GLM-5.2Zhipu AI (Z.ai) · aberto | 86,4% empate técnico com a maior nota | Epoch AI |
| Claude Opus 4.5Anthropic · fechado | 86,1% empate técnico com a maior nota | Epoch AI |
| Claude Sonnet 4.6Anthropic · fechado | 85,8% empate técnico com a maior nota | Epoch AI |
| Gemini 2.5 ProGoogle · fechado | 84,7% empate técnico com a maior nota | Epoch AI |
| o3OpenAI · fechado | 84,4% empate técnico com a maior nota | Epoch AI |
| Qwen3.5-FlashAlibaba · não informados | 84,4% empate técnico com a maior nota | Epoch AI |
| Qwen3.6 FlashAlibaba · não informados | 84,4% empate técnico com a maior nota | Epoch AI |
| Grok 4xAI · fechado | 84% empate técnico com a maior nota | Epoch AI |
| GLM 4.7Zhipu AI (Z.ai) · aberto | 83,3% empate técnico com a maior nota | Epoch AI |
| Kimi K2 ThinkingMoonshot AI · aberto | 83,1% empate técnico com a maior nota | Epoch AI |
| Gemma 4 26B A4BGoogle · aberto | 82,2% empate técnico com a maior nota | Epoch AI |
| o4-miniOpenAI · fechado | 81,7% empate técnico com a maior nota | Epoch AI |
| GPT-5 NanoOpenAI · fechado | 81,1% empate técnico com a maior nota | Epoch AI |
| Gemini 3.1 Flash LiteGoogle · fechado | 80% empate técnico com a maior nota | Epoch AI |
| GLM 5Zhipu AI (Z.ai) · aberto | 80% empate técnico com a maior nota | Epoch AI |
| Claude Sonnet 4.5Anthropic · fechado | 77,8% empate técnico com a maior nota | Epoch AI |
| Grok-3 minixAI · fechado | 77,8% empate técnico com a maior nota | Epoch AI |
| o3-miniOpenAI · fechado | 76,9% empate técnico com a maior nota | Epoch AI |
| o1OpenAI · fechado | 73,3% empate técnico com a maior nota | Epoch AI |
| Qwen3-MaxAlibaba · fechado | 73,3% empate técnico com a maior nota | Epoch AI |
| Claude Sonnet 4Anthropic · fechado | 71,1% empate técnico com a maior nota | Epoch AI |
| Gemini 3.5 Flash LiteGoogle · fechado | 71,1% empate técnico com a maior nota | Epoch AI |
| MiniMax M3MiniMax · aberto | 71,1% empate técnico com a maior nota | Epoch AI |
| Qwen3.5-35B-A3BAlibaba · aberto | 70% empate técnico com a maior nota | Epoch AI |
| Doubao-Seed-1.6ByteDance · fechado | 69,4% empate técnico com a maior nota | Epoch AI |
| Claude Opus 4.1Anthropic · fechado | 68,9% | Epoch AI |
| GPT-5.5 InstantOpenAI · fechado | 68,1% | Epoch AI |
| Qwen3 32BAlibaba · aberto | 66,9% | Epoch AI |
| Claude Haiku 4.5Anthropic · fechado | 66,7% | Epoch AI |
| DeepSeek R1DeepSeek · aberto | 66,4% | Epoch AI |
| Qwen3 14BAlibaba · aberto | 66,4% | Epoch AI |
| gpt-oss-20bOpenAI · aberto | 65,3% | Epoch AI |
| Claude Opus 4Anthropic · fechado | 64,4% | Epoch AI |
| Qwen3 30B A3BAlibaba · aberto | 62,8% | Epoch AI |
| Qwen3.5-9BAlibaba · aberto | 61,7% | Epoch AI |
| QwQ-32BAlibaba · aberto | 59,2% | Epoch AI |
| Claude 3.7 SonnetAnthropic · fechado | 57,8% | Epoch AI |
| Gemini 2.0 Flash ThinkingGoogle · fechado | 57,8% | Epoch AI |
| Qwen3-8BAlibaba · aberto | 56,1% | Epoch AI |
| Qwen3.5-4BAlibaba · aberto | 55,8% | Epoch AI |
| DeepSeek-R1-Distill-Qwen-32BDeepSeek · aberto | 55,6% | Epoch AI |
| Grok 3xAI · fechado | 55,6% | Epoch AI |
| DeepSeek-R1-Distill-Llama-70BDeepSeek · aberto | 51,4% | Epoch AI |
| DeepSeek-R1-Distill-Qwen-14BDeepSeek · aberto | 50,6% | Epoch AI |
| o1-miniOpenAI · fechado | 46,9% | Epoch AI |
| GPT-4.1 MiniOpenAI · fechado | 44,7% | Epoch AI |
| GPT-4.1OpenAI · fechado | 38,3% | Epoch AI |
| DeepSeek V3DeepSeek · aberto | 37,8% | Epoch AI |
| GPT-4.5OpenAI · fechado | 37,8% | Epoch AI |
| Mistral Medium 3Mistral AI · fechado | 32,2% | Epoch AI |
| Gemini 2.0 FlashGoogle · fechado | 31,1% | Epoch AI |
| o1-previewOpenAI · fechado | 31,1% | Epoch AI |
| Mistral Small 3.2Mistral AI · aberto | 30,3% | Epoch AI |
| Magistral Small 1.0Mistral AI · aberto | 30% | Epoch AI |
| GPT-4.1 NanoOpenAI · fechado | 28,9% | Epoch AI |
| Magistral Small 1.2Mistral AI · aberto | 28,1% | Epoch AI |
| Gemini 1.5 ProGoogle · fechado | 23,1% | Epoch AI |
| Gemma 3 27BGoogle · aberto | 22,5% | Epoch AI |
| DeepSeek-R1-Distill-Qwen-1.5BDeepSeek · aberto | 21,4% | Epoch AI |
| Llama 4 MaverickMeta · aberto | 20,6% | Epoch AI |
| Qwen-PlusAlibaba · fechado | 17,8% | Epoch AI |
| Gemma 3 12BGoogle · aberto | 16,7% | Epoch AI |
| Gemini 1.5 FlashGoogle · fechado | 16,2% | Epoch AI |
| Qwen2.5-MaxAlibaba · fechado | 16,1% | Epoch AI |
| Phi 4Microsoft · aberto | 13,8% | Epoch AI |
| Grok-2xAI · fechado | 11,5% | Epoch AI |
| Llama 3.1-405BMeta · aberto | 9,7% | Epoch AI |
| Claude 3.5 Sonnet (October 2024)Anthropic · fechado | 8,5% | Epoch AI |
| Qwen2.5-72BAlibaba · aberto | 8,1% | Epoch AI |
| Qwen3-1.7BAlibaba · aberto | 8,1% | Epoch AI |
| Llama 4 ScoutMeta · aberto | 7,8% | Epoch AI |
| Mistral Large 2Mistral AI · aberto | 7,8% | Epoch AI |
| Gemma 3 4BGoogle · aberto | 7,5% | Epoch AI |
| Qwen2.5-32BAlibaba · aberto | 7,4% | Epoch AI |
| GPT-4o-miniOpenAI · fechado | 6,9% | Epoch AI |
| GPT-4 Turbo (Apr 2024)OpenAI · fechado | 6,7% | Epoch AI |
| Mistral Small 3Mistral AI · aberto | 6,7% | Epoch AI |
| Claude 3.5 SonnetAnthropic · fechado | 6,5% | Epoch AI |
| Qwen-TurboAlibaba · fechado | 6,1% | Epoch AI |
| Mistral Small 3.1Mistral AI · aberto | 5,8% | Epoch AI |
| Llama 3.3 70BMeta · aberto | 5,1% | Epoch AI |
| Claude 3 OpusAnthropic · fechado | 4,7% | Epoch AI |
| Gemini 1.5 Flash 8BGoogle · fechado | 4,6% | Epoch AI |
| Tulu 3 (Tülu 3) 70BAi2 (Allen Institute) · aberto | 4,4% | Epoch AI |
| Claude 3.5 HaikuAnthropic · fechado | 4,3% | Epoch AI |
| Llama 3-70BMeta · aberto | 4,3% | Epoch AI |
| Llama 3.1-70BMeta · aberto | 3,6% | Epoch AI |
| Llama 3.2 90BMeta · aberto | 2,6% | Epoch AI |
| Claude 2Anthropic · fechado | 2,5% | Epoch AI |
| Claude 3 SonnetAnthropic · fechado | 2,5% | Epoch AI |
| Qwen2.5-7BAlibaba · aberto | 2,5% | Epoch AI |
| Claude 2.1Anthropic · fechado | 1,9% | Epoch AI |
| Llama 3-8BMeta · aberto | 1,9% | Epoch AI |
| Mistral LargeMistral AI · fechado | 1,9% | Epoch AI |
| Claude 3 HaikuAnthropic · fechado | 1,8% | Epoch AI |
| Llama 3.1-8BMeta · aberto | 1,7% | Epoch AI |
| Gemma 2 27BGoogle · aberto | 1,4% | Epoch AI |
| Gemini 1.0 ProGoogle · fechado | 1,1% | Epoch AI |
| Gemma 3 1BGoogle · aberto | 1,1% | Epoch AI |
| DeepSeek LLM 67BDeepSeek · aberto | 0,8% | Epoch AI |
| Gemma 2 9BGoogle · aberto | 0,6% | Epoch AI |
| Llama 3.2 1BMeta · aberto | 0,6% | Epoch AI |
| Mistral 7BMistral AI · aberto | 0,3% | Epoch AI |
| Llama 2-70BMeta · aberto | 0% | Epoch AI |
Perguntas frequentes
Qual modelo tem a maior nota no OTIS Mock AIME?
16 modelos têm 100% no OTIS Mock AIME, segundo a Epoch AI. É um benchmark saturado: vários modelos de laboratórios diferentes já chegaram ao teto, e a tabela mostra o placar sem posição.
O que o OTIS Mock AIME mede?
O OTIS Mock AIME, no quadro da Epoch AI (CC BY 4.0, versão mais recente consultada), traz problemas de matemática no estilo da olimpíada americana AIME, numa versão de treino feita para o modelo não se apoiar em respostas que já tenha visto. A nota é o percentual de acerto.
Quais modelos entram neste ranking?
Os 182 modelos desta área com nota publicada no OTIS Mock AIME, segundo a Epoch AI. Nenhuma versão herda a nota de outra.
Como ler
- As notas de benchmark são percentuais, e o maior valor é o melhor.
- A posição aparece como faixa, «1º de 182». Dentro da faixa, a diferença para os vizinhos fica dentro da margem do benchmark. O selo «maior nota» marca o modelo com a maior nota do benchmark, e o selo «empate técnico com a maior nota» marca os modelos cuja diferença para ela fica dentro da margem.
- Em benchmark saturado, a tabela mostra o placar com o selo e sem ordem de posição.
Fontes
- Epoch AI, CC BY 4.0, versão mais recente consultada.
- OpenRouter Benchmarks, CC BY 4.0, versão mais recente consultada.
- OpenRouter, dados públicos da API; exports de benchmarks e rankings em CC BY 4.0, versão mais recente consultada.
Datas vêm das fontes: entrada no OpenRouter ou criação do repositório no Hugging Face, que podem não coincidir com o lançamento oficial. Família e versão foram agrupadas por regra a partir do nome.
Como citar
Se usar estes dados, cite a página e a data em que você a consultou.
Adriano Meirinho. «OTIS Mock AIME: placar de modelos de IA». meirinho.com.br. https://meirinho.com.br/ia/modelos/benchmark/otis-aime/. Acesso em 21 de novembro de 2026.
Os dados de terceiros seguem a licença de cada fonte. A tabela completa está em CSV e em JSON.