Modelos de IA

OTIS Mock AIME: placar de modelos de IA

182 modelos de IA no OTIS Mock AIME, segundo a Epoch AI. É um benchmark saturado: vários modelos de laboratórios diferentes já chegaram ao teto.

O OTIS Mock AIME, no quadro da Epoch AI (CC BY 4.0, versão mais recente consultada), traz problemas de matemática no estilo da olimpíada americana AIME, numa versão de treino feita para o modelo não se apoiar em respostas que já tenha visto. A nota é o percentual de acerto. Aqui estão os 182 modelos desta área com nota no OTIS Mock AIME, segundo a Epoch AI. 16 modelos têm 100%, e por isso a tabela mostra o placar sem posição.

OTIS Mock AIME

100%

Claude Fable 5

modelos

182

01

Modelo%Fonte
Claude Fable 5Anthropic · fechado100% maior notaEpoch AI
Claude Fable 5.1Anthropic · fechado100% maior notaEpoch AI
Claude Opus 5.5Anthropic · fechado100% maior notaEpoch AI
Claude Sonnet 5.5Anthropic · fechado100% maior notaEpoch AI
Gemini 4 ArgonGoogle · fechado100% maior notaEpoch AI
Gemini 4 CarbonGoogle · fechado100% maior notaEpoch AI
GPT-5.5OpenAI · fechado100% maior notaEpoch AI
GPT-5.5 ProOpenAI · fechado100% maior notaEpoch AI
GPT-5.6 SolOpenAI · fechado100% maior notaEpoch AI
GPT-6 AstraOpenAI · fechado100% maior notaEpoch AI
GPT-6 SolOpenAI · fechado100% maior notaEpoch AI
GPT-6.1 SolOpenAI · fechado100% maior notaEpoch AI
GPT-6.1 TerraOpenAI · fechado100% maior notaEpoch AI
GPT-6.2 AstraOpenAI · fechado100% maior notaEpoch AI
Kimi K3.1 ProMoonshot AI · aberto100% maior notaEpoch AI
Qwen3.8 MaxAlibaba · fechado100% maior notaEpoch AI
Claude Fable 5.2Anthropic · fechado99,7% empate técnico com a maior notaEpoch AI
GPT-5.6 TerraOpenAI · fechado99,7% empate técnico com a maior notaEpoch AI
Mistral Large 4Mistral AI · aberto99,4% empate técnico com a maior notaEpoch AI
Muse WonderMeta · fechado99,4% empate técnico com a maior notaEpoch AI
Doubao Seed Evolving (Nov 2026)ByteDance · fechado99,2% empate técnico com a maior notaEpoch AI
Grok 4.6xAI · fechado99,2% empate técnico com a maior notaEpoch AI
Muse Spark 1.3Meta · fechado99,2% empate técnico com a maior notaEpoch AI
Claude Haiku 5.5Anthropic · fechado98,9% empate técnico com a maior notaEpoch AI
Claude Opus 5Anthropic · fechado98,9% empate técnico com a maior notaEpoch AI
Gemini 3.8 FlashGoogle · fechado98,9% empate técnico com a maior notaEpoch AI
GPT-6 LunaOpenAI · fechado98,9% empate técnico com a maior notaEpoch AI
Claude Opus 4.8Anthropic · fechado98,3% empate técnico com a maior notaEpoch AI
DeepSeek V4.1 FlashDeepSeek · aberto98,3% empate técnico com a maior notaEpoch AI
GPT-5.6 LunaOpenAI · fechado98,3% empate técnico com a maior notaEpoch AI
Grok 4.7xAI · fechado98,1% empate técnico com a maior notaEpoch AI
Muse Spark OpenMeta · aberto98,1% empate técnico com a maior notaEpoch AI
Claude Opus 4.7Anthropic · fechado97,8% empate técnico com a maior notaEpoch AI
GPT-5.4OpenAI · fechado97,8% empate técnico com a maior notaEpoch AI
Grok 4.5xAI · fechado97,8% empate técnico com a maior notaEpoch AI
Gemini 3.7 FlashGoogle · fechado97,2% empate técnico com a maior notaEpoch AI
Kimi K3Moonshot AI · aberto97,2% empate técnico com a maior notaEpoch AI
DeepSeek V4 ProDeepSeek · aberto96,7% empate técnico com a maior notaEpoch AI
Doubao Seed 2.1 TurboByteDance · fechado96,1% empate técnico com a maior notaEpoch AI
GPT-5.2OpenAI · fechado96,1% empate técnico com a maior notaEpoch AI
Kimi K2.6Moonshot AI · aberto96,1% empate técnico com a maior notaEpoch AI
Doubao Seed 2.1 ProByteDance · fechado95,6% empate técnico com a maior notaEpoch AI
Gemini 3 FlashGoogle · fechado95,6% empate técnico com a maior notaEpoch AI
Gemini 3.1 ProGoogle · fechado95,6% empate técnico com a maior notaEpoch AI
Gemini 3.5 FlashGoogle · fechado95,6% empate técnico com a maior notaEpoch AI
Kimi K2.7 CodeMoonshot AI · aberto95,6% empate técnico com a maior notaEpoch AI
Qwen3.7 MaxAlibaba · fechado95,6% empate técnico com a maior notaEpoch AI
Claude Sonnet 5Anthropic · fechado94,7% empate técnico com a maior notaEpoch AI
Claude Opus 4.6Anthropic · fechado94,4% empate técnico com a maior notaEpoch AI
DeepSeek V4 Flash 0731DeepSeek · aberto94,4% empate técnico com a maior notaEpoch AI
Gemini 3.6 FlashGoogle · fechado94,2% empate técnico com a maior notaEpoch AI
Doubao-Seed-2.0 ProByteDance · fechado93,9% empate técnico com a maior notaEpoch AI
GLM-5.3-FlashZhipu AI (Z.ai) · aberto93,9% empate técnico com a maior notaEpoch AI
GLM 5.1Zhipu AI (Z.ai) · aberto93,3% empate técnico com a maior notaEpoch AI
Grok 4.3 BetaxAI · fechado93,3% empate técnico com a maior notaEpoch AI
Qwen3.6 PlusAlibaba · fechado93,3% empate técnico com a maior notaEpoch AI
Qwen3.7 PlusAlibaba · fechado93,3% empate técnico com a maior notaEpoch AI
Grok 4.20xAI · fechado92,2% empate técnico com a maior notaEpoch AI
Kimi K2.5Moonshot AI · aberto92,2% empate técnico com a maior notaEpoch AI
Gemini 3 ProGoogle · fechado91,4% empate técnico com a maior notaEpoch AI
GPT-5OpenAI · fechado91,4% empate técnico com a maior notaEpoch AI
Doubao Seed 2.0 Lite (Apr 2026)ByteDance · fechado91,1% empate técnico com a maior notaEpoch AI
GLM-5.3Zhipu AI (Z.ai) · aberto91,1% empate técnico com a maior notaEpoch AI
Qwen 3.6 Max (Preview)Alibaba · não informados91,1% empate técnico com a maior notaEpoch AI
Qwen3.6 27BAlibaba · aberto91,1% empate técnico com a maior notaEpoch AI
GPT-5.4 MiniOpenAI · fechado88,9% empate técnico com a maior notaEpoch AI
gpt-oss-120bOpenAI · aberto88,9% empate técnico com a maior notaEpoch AI
Muse SparkMeta · fechado88,9% empate técnico com a maior notaEpoch AI
Qwen3.5 397B A17BAlibaba · aberto88,9% empate técnico com a maior notaEpoch AI
GPT-5.1OpenAI · fechado88,6% empate técnico com a maior notaEpoch AI
DeepSeek V3.2DeepSeek · aberto87,8% empate técnico com a maior notaEpoch AI
GPT-5.4 NanoOpenAI · fechado87,8% empate técnico com a maior notaEpoch AI
GPT-5 MiniOpenAI · fechado86,7% empate técnico com a maior notaEpoch AI
Nemotron 3 UltraNVIDIA · aberto86,7% empate técnico com a maior notaEpoch AI
Qwen3-235B-A22BAlibaba · aberto86,7% empate técnico com a maior notaEpoch AI
Qwen3.5 Plus 2026-02-15Alibaba · não informados86,7% empate técnico com a maior notaEpoch AI
Qwen3.6 35B A3BAlibaba · aberto86,7% empate técnico com a maior notaEpoch AI
Qwen3.7 FlashAlibaba · fechado86,7% empate técnico com a maior notaEpoch AI
GLM-5.2Zhipu AI (Z.ai) · aberto86,4% empate técnico com a maior notaEpoch AI
Claude Opus 4.5Anthropic · fechado86,1% empate técnico com a maior notaEpoch AI
Claude Sonnet 4.6Anthropic · fechado85,8% empate técnico com a maior notaEpoch AI
Gemini 2.5 ProGoogle · fechado84,7% empate técnico com a maior notaEpoch AI
o3OpenAI · fechado84,4% empate técnico com a maior notaEpoch AI
Qwen3.5-FlashAlibaba · não informados84,4% empate técnico com a maior notaEpoch AI
Qwen3.6 FlashAlibaba · não informados84,4% empate técnico com a maior notaEpoch AI
Grok 4xAI · fechado84% empate técnico com a maior notaEpoch AI
GLM 4.7Zhipu AI (Z.ai) · aberto83,3% empate técnico com a maior notaEpoch AI
Kimi K2 ThinkingMoonshot AI · aberto83,1% empate técnico com a maior notaEpoch AI
Gemma 4 26B A4BGoogle · aberto82,2% empate técnico com a maior notaEpoch AI
o4-miniOpenAI · fechado81,7% empate técnico com a maior notaEpoch AI
GPT-5 NanoOpenAI · fechado81,1% empate técnico com a maior notaEpoch AI
Gemini 3.1 Flash LiteGoogle · fechado80% empate técnico com a maior notaEpoch AI
GLM 5Zhipu AI (Z.ai) · aberto80% empate técnico com a maior notaEpoch AI
Claude Sonnet 4.5Anthropic · fechado77,8% empate técnico com a maior notaEpoch AI
Grok-3 minixAI · fechado77,8% empate técnico com a maior notaEpoch AI
o3-miniOpenAI · fechado76,9% empate técnico com a maior notaEpoch AI
o1OpenAI · fechado73,3% empate técnico com a maior notaEpoch AI
Qwen3-MaxAlibaba · fechado73,3% empate técnico com a maior notaEpoch AI
Claude Sonnet 4Anthropic · fechado71,1% empate técnico com a maior notaEpoch AI
Gemini 3.5 Flash LiteGoogle · fechado71,1% empate técnico com a maior notaEpoch AI
MiniMax M3MiniMax · aberto71,1% empate técnico com a maior notaEpoch AI
Qwen3.5-35B-A3BAlibaba · aberto70% empate técnico com a maior notaEpoch AI
Doubao-Seed-1.6ByteDance · fechado69,4% empate técnico com a maior notaEpoch AI
Claude Opus 4.1Anthropic · fechado68,9% Epoch AI
GPT-5.5 InstantOpenAI · fechado68,1% Epoch AI
Qwen3 32BAlibaba · aberto66,9% Epoch AI
Claude Haiku 4.5Anthropic · fechado66,7% Epoch AI
DeepSeek R1DeepSeek · aberto66,4% Epoch AI
Qwen3 14BAlibaba · aberto66,4% Epoch AI
gpt-oss-20bOpenAI · aberto65,3% Epoch AI
Claude Opus 4Anthropic · fechado64,4% Epoch AI
Qwen3 30B A3BAlibaba · aberto62,8% Epoch AI
Qwen3.5-9BAlibaba · aberto61,7% Epoch AI
QwQ-32BAlibaba · aberto59,2% Epoch AI
Claude 3.7 SonnetAnthropic · fechado57,8% Epoch AI
Gemini 2.0 Flash ThinkingGoogle · fechado57,8% Epoch AI
Qwen3-8BAlibaba · aberto56,1% Epoch AI
Qwen3.5-4BAlibaba · aberto55,8% Epoch AI
DeepSeek-R1-Distill-Qwen-32BDeepSeek · aberto55,6% Epoch AI
Grok 3xAI · fechado55,6% Epoch AI
DeepSeek-R1-Distill-Llama-70BDeepSeek · aberto51,4% Epoch AI
DeepSeek-R1-Distill-Qwen-14BDeepSeek · aberto50,6% Epoch AI
o1-miniOpenAI · fechado46,9% Epoch AI
GPT-4.1 MiniOpenAI · fechado44,7% Epoch AI
GPT-4.1OpenAI · fechado38,3% Epoch AI
DeepSeek V3DeepSeek · aberto37,8% Epoch AI
GPT-4.5OpenAI · fechado37,8% Epoch AI
Mistral Medium 3Mistral AI · fechado32,2% Epoch AI
Gemini 2.0 FlashGoogle · fechado31,1% Epoch AI
o1-previewOpenAI · fechado31,1% Epoch AI
Mistral Small 3.2Mistral AI · aberto30,3% Epoch AI
Magistral Small 1.0Mistral AI · aberto30% Epoch AI
GPT-4.1 NanoOpenAI · fechado28,9% Epoch AI
Magistral Small 1.2Mistral AI · aberto28,1% Epoch AI
Gemini 1.5 ProGoogle · fechado23,1% Epoch AI
Gemma 3 27BGoogle · aberto22,5% Epoch AI
DeepSeek-R1-Distill-Qwen-1.5BDeepSeek · aberto21,4% Epoch AI
Llama 4 MaverickMeta · aberto20,6% Epoch AI
Qwen-PlusAlibaba · fechado17,8% Epoch AI
Gemma 3 12BGoogle · aberto16,7% Epoch AI
Gemini 1.5 FlashGoogle · fechado16,2% Epoch AI
Qwen2.5-MaxAlibaba · fechado16,1% Epoch AI
Phi 4Microsoft · aberto13,8% Epoch AI
Grok-2xAI · fechado11,5% Epoch AI
Llama 3.1-405BMeta · aberto9,7% Epoch AI
Claude 3.5 Sonnet (October 2024)Anthropic · fechado8,5% Epoch AI
Qwen2.5-72BAlibaba · aberto8,1% Epoch AI
Qwen3-1.7BAlibaba · aberto8,1% Epoch AI
Llama 4 ScoutMeta · aberto7,8% Epoch AI
Mistral Large 2Mistral AI · aberto7,8% Epoch AI
Gemma 3 4BGoogle · aberto7,5% Epoch AI
Qwen2.5-32BAlibaba · aberto7,4% Epoch AI
GPT-4o-miniOpenAI · fechado6,9% Epoch AI
GPT-4 Turbo (Apr 2024)OpenAI · fechado6,7% Epoch AI
Mistral Small 3Mistral AI · aberto6,7% Epoch AI
Claude 3.5 SonnetAnthropic · fechado6,5% Epoch AI
Qwen-TurboAlibaba · fechado6,1% Epoch AI
Mistral Small 3.1Mistral AI · aberto5,8% Epoch AI
Llama 3.3 70BMeta · aberto5,1% Epoch AI
Claude 3 OpusAnthropic · fechado4,7% Epoch AI
Gemini 1.5 Flash 8BGoogle · fechado4,6% Epoch AI
Tulu 3 (Tülu 3) 70BAi2 (Allen Institute) · aberto4,4% Epoch AI
Claude 3.5 HaikuAnthropic · fechado4,3% Epoch AI
Llama 3-70BMeta · aberto4,3% Epoch AI
Llama 3.1-70BMeta · aberto3,6% Epoch AI
Llama 3.2 90BMeta · aberto2,6% Epoch AI
Claude 2Anthropic · fechado2,5% Epoch AI
Claude 3 SonnetAnthropic · fechado2,5% Epoch AI
Qwen2.5-7BAlibaba · aberto2,5% Epoch AI
Claude 2.1Anthropic · fechado1,9% Epoch AI
Llama 3-8BMeta · aberto1,9% Epoch AI
Mistral LargeMistral AI · fechado1,9% Epoch AI
Claude 3 HaikuAnthropic · fechado1,8% Epoch AI
Llama 3.1-8BMeta · aberto1,7% Epoch AI
Gemma 2 27BGoogle · aberto1,4% Epoch AI
Gemini 1.0 ProGoogle · fechado1,1% Epoch AI
Gemma 3 1BGoogle · aberto1,1% Epoch AI
DeepSeek LLM 67BDeepSeek · aberto0,8% Epoch AI
Gemma 2 9BGoogle · aberto0,6% Epoch AI
Llama 3.2 1BMeta · aberto0,6% Epoch AI
Mistral 7BMistral AI · aberto0,3% Epoch AI
Llama 2-70BMeta · aberto0% Epoch AI

Perguntas frequentes

Qual modelo tem a maior nota no OTIS Mock AIME?

16 modelos têm 100% no OTIS Mock AIME, segundo a Epoch AI. É um benchmark saturado: vários modelos de laboratórios diferentes já chegaram ao teto, e a tabela mostra o placar sem posição.

O que o OTIS Mock AIME mede?

O OTIS Mock AIME, no quadro da Epoch AI (CC BY 4.0, versão mais recente consultada), traz problemas de matemática no estilo da olimpíada americana AIME, numa versão de treino feita para o modelo não se apoiar em respostas que já tenha visto. A nota é o percentual de acerto.

Quais modelos entram neste ranking?

Os 182 modelos desta área com nota publicada no OTIS Mock AIME, segundo a Epoch AI. Nenhuma versão herda a nota de outra.

Como ler

  1. As notas de benchmark são percentuais, e o maior valor é o melhor.
  2. A posição aparece como faixa, «1º de 182». Dentro da faixa, a diferença para os vizinhos fica dentro da margem do benchmark. O selo «maior nota» marca o modelo com a maior nota do benchmark, e o selo «empate técnico com a maior nota» marca os modelos cuja diferença para ela fica dentro da margem.
  3. Em benchmark saturado, a tabela mostra o placar com o selo e sem ordem de posição.

Fontes

  • Epoch AI, CC BY 4.0, versão mais recente consultada.
  • OpenRouter Benchmarks, CC BY 4.0, versão mais recente consultada.
  • OpenRouter, dados públicos da API; exports de benchmarks e rankings em CC BY 4.0, versão mais recente consultada.

Datas vêm das fontes: entrada no OpenRouter ou criação do repositório no Hugging Face, que podem não coincidir com o lançamento oficial. Família e versão foram agrupadas por regra a partir do nome.

Como citar

Se usar estes dados, cite a página e a data em que você a consultou.

Adriano Meirinho. «OTIS Mock AIME: placar de modelos de IA». meirinho.com.br. https://meirinho.com.br/ia/modelos/benchmark/otis-aime/. Acesso em 21 de novembro de 2026.

Os dados de terceiros seguem a licença de cada fonte. A tabela completa está em CSV e em JSON.

Markdown