Modelos de IA

Comparar modelos

Escolha um benchmark com nota publicada, filtre e marque até quatro modelos.

Como ler cada métrica

  1. Escolha um benchmark que já tem nota.
  2. Filtre por nome, laboratório ou pesos.
  3. Marque até quatro modelos.
  4. Preço por token não fecha o custo do trabalho concluído.

Benchmarks com nota

CasoO que medirModelo de referênciaAlternativa abertaFonte
TextoGPQA DiamondGemini 4 Argon 96,4%Kimi K3.1 Pro 94,2%Epoch AI
TextoOTIS Mock AIMEClaude Opus 5.5 100%Kimi K3.1 Pro 100%Epoch AI
TextoFrontierMath (níveis 1 a 3)Claude Fable 5.2 95,1%Kimi K3.1 Pro 78,2%Epoch AI
TextoSimpleQA VerifiedClaude Fable 5.2 94%Kimi K3.1 Pro 62,2%Epoch AI
CódigoSWE-bench VerifiedClaude Opus 4.7 83,5%GLM-5.2 78,7%Epoch AI
TextoGPQA Diamond (OpenRouter)Gemini 4 Argon 96,5%Kimi K3.1 Pro 93,9%OpenRouter Benchmarks
Agentesτ-bench Verified (companhia aérea)Claude Fable 5 82%DeepSeek V4 Flash 0423 81,7%OpenRouter Benchmarks

GPQA Diamond

Como ler cada métrica

GPQA Diamond
Modelo%LaboratórioPesosFonteComparar modelos
Gemini 4 Argon96,4%GooglefechadoEpoch AI
GPT-6 Astra95,8%OpenAIfechadoEpoch AI
Claude Sonnet 5.595,6%AnthropicfechadoEpoch AI
GPT-6.1 Sol95,4%OpenAIfechadoEpoch AI
Gemini 3.8 Flash95,4%GooglefechadoEpoch AI
Gemini 3.7 Flash94,8%GooglefechadoEpoch AI
GPT-5.4 Pro94,6%OpenAIfechadoEpoch AI
Gemini 3.1 Pro94,4%GooglefechadoEpoch AI
GPT-6 Sol94,3%OpenAIfechadoEpoch AI
GPT-6.1 Terra94,3%OpenAIfechadoEpoch AI
Kimi K3.1 Pro94,2%Moonshot AIabertoEpoch AI
Gemini 3.6 Flash94,1%GooglefechadoEpoch AI
GPT-5.594%OpenAIfechadoEpoch AI
Grok 4.694%xAIfechadoEpoch AI
Claude Fable 5.293,9%AnthropicfechadoEpoch AI
Claude Opus 593,9%AnthropicfechadoEpoch AI
GPT-5.5 Pro93,9%OpenAIfechadoEpoch AI
GPT-5.6 Sol93,5%OpenAIfechadoEpoch AI
Grok 4.593,4%xAIfechadoEpoch AI
GPT-5.493,3%OpenAIfechadoEpoch AI
GPT-5.6 Terra93,3%OpenAIfechadoEpoch AI
DeepSeek V4.1 Flash93,2%DeepSeekabertoEpoch AI
Kimi K393,1%Moonshot AIabertoEpoch AI
Doubao Seed Evolving (Nov 2026)93,1%ByteDancefechadoEpoch AI
Gemini 3.5 Flash92,8%GooglefechadoEpoch AI
Qwen3.8 Max92,7%AlibabafechadoEpoch AI
Grok 4.792,7%xAIfechadoEpoch AI
Gemini 3 Pro92,6%GooglefechadoEpoch AI
GLM-5.291,9%Zhipu AI (Z.ai)abertoEpoch AI
DeepSeek V4 Pro91,7%DeepSeekabertoEpoch AI
GPT-5.6 Luna91,6%OpenAIfechadoEpoch AI
GPT-5.291,4%OpenAIfechadoEpoch AI
Claude Opus 4.891%AnthropicfechadoEpoch AI
DeepSeek V4 Flash 073191%DeepSeekabertoEpoch AI
GLM-5.390,9%Zhipu AI (Z.ai)abertoEpoch AI
MiniMax M390,9%MiniMaxabertoEpoch AI
Qwen3.7 Max90,9%AlibabafechadoEpoch AI
Kimi K2.690,8%Moonshot AIabertoEpoch AI
Claude Opus 5.590,6%AnthropicfechadoEpoch AI
GPT-6 Luna90,5%OpenAIfechadoEpoch AI
Claude Opus 4.690,5%AnthropicfechadoEpoch AI
Claude Sonnet 590,5%AnthropicfechadoEpoch AI
GLM-5.3-Flash90,2%Zhipu AI (Z.ai)abertoEpoch AI
Mistral Large 490,2%Mistral AIabertoEpoch AI
Claude Opus 4.790,2%AnthropicfechadoEpoch AI
GLM 5.189,9%Zhipu AI (Z.ai)abertoEpoch AI
Muse Spark89,8%MetafechadoEpoch AI
Claude Haiku 5.589,6%AnthropicfechadoEpoch AI
Doubao Seed 2.1 Turbo89,6%ByteDancefechadoEpoch AI
Gemini 3 Flash89,4%GooglefechadoEpoch AI
Grok 4.2089,3%xAIfechadoEpoch AI
Doubao Seed 2.1 Pro89,3%ByteDancefechadoEpoch AI
Grok 4.3 Beta88,8%xAIfechadoEpoch AI
Muse Spark Open88,6%MetaabertoEpoch AI
Qwen3.6 Plus88,4%AlibabafechadoEpoch AI
Doubao-Seed-2.0 Pro88,2%ByteDancefechadoEpoch AI
Doubao Seed 2.0 Lite (Apr 2026)88,1%ByteDancefechadoEpoch AI
Kimi K2.7 Code87,9%Moonshot AIabertoEpoch AI
Qwen3.7 Plus87,9%AlibabafechadoEpoch AI
GLM 587,8%Zhipu AI (Z.ai)abertoEpoch AI
Kimi K2.587,6%Moonshot AIabertoEpoch AI
GPT-5.187,6%OpenAIfechadoEpoch AI
Claude Sonnet 4.687,4%AnthropicfechadoEpoch AI
Qwen 3.6 Max (Preview)87,4%Alibabanão informadosEpoch AI
Grok 487%xAIfechadoEpoch AI
GPT-5.4 Mini86,9%OpenAIfechadoEpoch AI
Qwen3.5 397B A17B86,4%AlibabaabertoEpoch AI
GPT-586,2%OpenAIfechadoEpoch AI
Claude Opus 4.586%AnthropicfechadoEpoch AI
Claude Fable 585,9%AnthropicfechadoEpoch AI
Qwen3.6 27B85,9%AlibabaabertoEpoch AI
Nemotron 3 Ultra85,4%NVIDIAabertoEpoch AI
Gemini 2.5 Pro85,3%GooglefechadoEpoch AI
Qwen3.6 35B A3B84,8%AlibabaabertoEpoch AI
Qwen 3.5 Plus (hosted 397B-A17B)84,8%Alibabanão informadosEpoch AI
Kimi K2 Thinking84,2%Moonshot AIabertoEpoch AI
Qwen3.5-35B-A3B83,5%AlibabaabertoEpoch AI
DeepSeek V3.283,4%DeepSeekabertoEpoch AI
Gemini 3.5 Flash Lite83,3%GooglefechadoEpoch AI
Qwen3.6 Flash83,3%Alibabanão informadosEpoch AI
GLM 4.783,3%Zhipu AI (Z.ai)abertoEpoch AI
GPT-5.5 Instant82,5%OpenAIfechadoEpoch AI
Claude Sonnet 4.582,3%AnthropicfechadoEpoch AI
Qwen3.5-Flash82,3%Alibabanão informadosEpoch AI
Qwen3.7 Flash82,3%AlibabafechadoEpoch AI
Gemini 3.1 Flash Lite81,8%GooglefechadoEpoch AI
o381,8%OpenAIfechadoEpoch AI
Qwen3-235B-A22B80,1%AlibabaabertoEpoch AI
Claude 3.7 Sonnet79,7%AnthropicfechadoEpoch AI
o4-mini79,6%OpenAIfechadoEpoch AI
Claude Sonnet 479,2%AnthropicfechadoEpoch AI
Qwen3.5-9B79%AlibabaabertoEpoch AI
GPT-5.4 Nano78,5%OpenAIfechadoEpoch AI
Doubao-Seed-1.677,6%ByteDancefechadoEpoch AI
Claude Opus 4.177,3%AnthropicfechadoEpoch AI
o3-mini77%OpenAIfechadoEpoch AI
o176,8%OpenAIfechadoEpoch AI
DeepSeek R176,3%DeepSeekabertoEpoch AI
Claude Opus 476,3%AnthropicfechadoEpoch AI
Grok-3 mini76,3%xAIfechadoEpoch AI
gpt-oss-120b75,8%OpenAIabertoEpoch AI
Gemma 4 31B75,8%GoogleabertoEpoch AI
Grok 375,8%xAIfechadoEpoch AI
GPT-5 Mini75%OpenAIfechadoEpoch AI
Gemma 4 26B A4B73,2%GoogleabertoEpoch AI
Qwen3-Max72,6%AlibabafechadoEpoch AI
Claude Haiku 4.571,2%AnthropicfechadoEpoch AI
Qwen3 30B A3B70,1%AlibabaabertoEpoch AI
GPT-5 Nano69,4%OpenAIfechadoEpoch AI
GPT-4.568,7%OpenAIfechadoEpoch AI
DeepSeek V367,6%DeepSeekabertoEpoch AI
Llama 4 Maverick67%MetaabertoEpoch AI
GPT-4.166,9%OpenAIfechadoEpoch AI
GPT-4.1 Mini65,8%OpenAIfechadoEpoch AI
Qwen3 32B65,7%AlibabaabertoEpoch AI
Gemini 2.0 Pro65,7%GooglefechadoEpoch AI
QWQ-Plus65,4%AlibabafechadoEpoch AI
QwQ-32B65,3%AlibabaabertoEpoch AI
DeepSeek-R1-Distill-Qwen-32B64,1%DeepSeekabertoEpoch AI
Gemini 2.0 Flash64,1%GooglefechadoEpoch AI
Qwen3 14B63,8%AlibabaabertoEpoch AI
o1-mini62,4%OpenAIfechadoEpoch AI
gpt-oss-20b60,8%OpenAIabertoEpoch AI
Mistral Medium 359,5%Mistral AIfechadoEpoch AI
Gemini 1.5 Pro57,2%GooglefechadoEpoch AI
Gemini 2.0 Flash Thinking57,1%GooglefechadoEpoch AI
Qwen3-8B56,8%AlibabaabertoEpoch AI
DeepSeek V356,5%DeepSeekabertoEpoch AI
Phi 456,1%MicrosoftabertoEpoch AI
Magistral Small 1.056,1%Mistral AIabertoEpoch AI
Qwen2.5-Max56,1%AlibabafechadoEpoch AI
DeepSeek-R1-Distill-Llama-70B55,7%DeepSeekabertoEpoch AI
Claude 3.5 Sonnet (October 2024)55,3%AnthropicfechadoEpoch AI
Claude 3.5 Sonnet54%AnthropicfechadoEpoch AI
Grok-253,8%xAIfechadoEpoch AI
Qwen3-4B52,3%AlibabaabertoEpoch AI
Llama 4 Scout51,8%MetaabertoEpoch AI
Mistral Large 251,3%Mistral AIabertoEpoch AI
Llama 3.1-405B50,9%MetaabertoEpoch AI
o1-preview50,3%OpenAIfechadoEpoch AI
GPT-4o49,2%OpenAIfechadoEpoch AI
Mistral Small 3.249,1%Mistral AIabertoEpoch AI
Qwen2.5-72B49,1%AlibabaabertoEpoch AI
GPT-4.1 Nano48,9%OpenAIfechadoEpoch AI
Qwen-Plus48,1%AlibabafechadoEpoch AI
Gemma 3 27B47,7%GoogleabertoEpoch AI
Magistral Small 1.247,6%Mistral AIabertoEpoch AI
Mistral Small 3.147,5%Mistral AIabertoEpoch AI
Llama 3.3 70B47,4%MetaabertoEpoch AI
Mistral Small 347,3%Mistral AIabertoEpoch AI
Gemini 1.5 Flash47,3%GooglefechadoEpoch AI
Claude 3 Opus47,2%AnthropicfechadoEpoch AI
GPT-4 Turbo (Apr 2024)46,6%OpenAIfechadoEpoch AI
Tulu 3 (Tülu 3) 70B46,3%Ai2 (Allen Institute)abertoEpoch AI
Qwen2.5-32B46,1%AlibabaabertoEpoch AI
DeepSeek-R1-Distill-Qwen-14B44,7%DeepSeekabertoEpoch AI
Llama 3.1-70B44,2%MetaabertoEpoch AI
WizardLM-2 8x22B43,4%MicrosoftabertoEpoch AI
GPT-4 Turbo (Nov 2023)42,4%OpenAIfechadoEpoch AI
Qwen-Turbo41,8%AlibabafechadoEpoch AI
Llama 3.2 90B41%MetaabertoEpoch AI
Qwen2-72B40,8%AlibabaabertoEpoch AI
Claude 3 Sonnet40,6%AnthropicfechadoEpoch AI
Llama 3-70B40,6%MetaabertoEpoch AI
Gemma 3 12B39,5%GoogleabertoEpoch AI
Mistral Large38,8%Mistral AIfechadoEpoch AI
Claude 3.5 Haiku38,1%AnthropicfechadoEpoch AI
Qwen3-1.7B38%AlibabaabertoEpoch AI
GPT-4o-mini37,7%OpenAIfechadoEpoch AI
Gemma 2 27B36,5%GoogleabertoEpoch AI
Claude 3 Haiku36,3%AnthropicfechadoEpoch AI
GPT-435,7%OpenAIfechadoEpoch AI
Qwen2.5-7B35,5%AlibabaabertoEpoch AI
Claude 234,7%AnthropicfechadoEpoch AI
Mixtral 8x22B34,1%Mistral AIabertoEpoch AI
Gemini 1.0 Pro34%GooglefechadoEpoch AI
DeepSeek-R1-Distill-Qwen-1.5B33,6%DeepSeekabertoEpoch AI
Claude 2.133%AnthropicfechadoEpoch AI
Gemini 1.5 Flash 8B33%GooglefechadoEpoch AI
Yi-1.5-34B32%01.AIabertoEpoch AI
Qwen1.5-32B30,7%AlibabaabertoEpoch AI
Mixtral 8x7B30,6%Mistral AIabertoEpoch AI
Mistral Nemo29,9%Mistral AIabertoEpoch AI
Qwen1.5-72B28,8%AlibabaabertoEpoch AI
GPT-3.5 Turbo28%OpenAIfechadoEpoch AI
phi-3-medium 14B27,6%MicrosoftabertoEpoch AI
Gemma 2 9B27,5%GoogleabertoEpoch AI
Ministral 8B27,1%Mistral AIabertoEpoch AI
Llama 3.1-8B27%MetaabertoEpoch AI
Llama 2-70B26,3%MetaabertoEpoch AI
Llama 3-8B26,1%MetaabertoEpoch AI
Ministral 3B25,3%Mistral AIfechadoEpoch AI
DeepSeek LLM 67B24,6%DeepSeekabertoEpoch AI
Llama 3.2 1B23,9%MetaabertoEpoch AI
Gemma 3 4B23,2%GoogleabertoEpoch AI
Gemma 3 1B19,9%GoogleabertoEpoch AI
Mistral 7B15,2%Mistral AIabertoEpoch AI
Yi-34B14,7%01.AIabertoEpoch AI

OTIS Mock AIME

Como ler cada métrica

OTIS Mock AIME
Modelo%LaboratórioPesosFonteComparar modelos
Claude Opus 5.5100%AnthropicfechadoEpoch AI
Claude Sonnet 5.5100%AnthropicfechadoEpoch AI
GPT-6.1 Sol100%OpenAIfechadoEpoch AI
GPT-6 Astra100%OpenAIfechadoEpoch AI
GPT-5.5100%OpenAIfechadoEpoch AI
Gemini 4 Argon100%GooglefechadoEpoch AI
Qwen3.8 Max100%AlibabafechadoEpoch AI
Kimi K3.1 Pro100%Moonshot AIabertoEpoch AI
Claude Fable 5100%AnthropicfechadoEpoch AI
Claude Fable 5.1100%AnthropicfechadoEpoch AI
GPT-5.5 Pro100%OpenAIfechadoEpoch AI
GPT-5.6 Sol100%OpenAIfechadoEpoch AI
GPT-6 Sol100%OpenAIfechadoEpoch AI
GPT-6.1 Terra100%OpenAIfechadoEpoch AI
Claude Fable 5.299,7%AnthropicfechadoEpoch AI
GPT-5.6 Terra99,7%OpenAIfechadoEpoch AI
DeepSeek V4.1 Flash99,4%DeepSeekabertoEpoch AI
Mistral Large 499,4%Mistral AIabertoEpoch AI
Muse Wonder99,4%MetafechadoEpoch AI
Grok 4.699,2%xAIfechadoEpoch AI
Muse Spark 1.399,2%MetafechadoEpoch AI
Doubao Seed Evolving (Nov 2026)99,2%ByteDancefechadoEpoch AI
Claude Haiku 5.598,9%AnthropicfechadoEpoch AI
GPT-6 Luna98,9%OpenAIfechadoEpoch AI
Gemini 3.8 Flash98,9%GooglefechadoEpoch AI
Claude Opus 598,9%AnthropicfechadoEpoch AI
DeepSeek V4 Pro98,6%DeepSeekabertoEpoch AI
Claude Opus 4.898,3%AnthropicfechadoEpoch AI
GPT-5.6 Luna98,3%OpenAIfechadoEpoch AI
Grok 4.798,1%xAIfechadoEpoch AI
Muse Spark Open98,1%MetaabertoEpoch AI
Claude Opus 4.797,8%AnthropicfechadoEpoch AI
GPT-5.497,8%OpenAIfechadoEpoch AI
Grok 4.597,8%xAIfechadoEpoch AI
Kimi K397,2%Moonshot AIabertoEpoch AI
Gemini 3.7 Flash97,2%GooglefechadoEpoch AI
GPT-5.296,1%OpenAIfechadoEpoch AI
Kimi K2.696,1%Moonshot AIabertoEpoch AI
Doubao Seed 2.1 Turbo96,1%ByteDancefechadoEpoch AI
Gemini 3.1 Pro95,6%GooglefechadoEpoch AI
Gemini 3.5 Flash95,6%GooglefechadoEpoch AI
Kimi K2.7 Code95,6%Moonshot AIabertoEpoch AI
Qwen3.7 Max95,6%AlibabafechadoEpoch AI
Doubao Seed 2.1 Pro95,6%ByteDancefechadoEpoch AI
Gemini 3 Flash95,6%GooglefechadoEpoch AI
Claude Sonnet 594,7%AnthropicfechadoEpoch AI
Claude Opus 4.694,4%AnthropicfechadoEpoch AI
DeepSeek V4 Flash 073194,4%DeepSeekabertoEpoch AI
Gemini 3.6 Flash94,2%GooglefechadoEpoch AI
GLM-5.3-Flash93,9%Zhipu AI (Z.ai)abertoEpoch AI
Doubao-Seed-2.0 Pro93,9%ByteDancefechadoEpoch AI
Qwen3.6 Plus93,3%AlibabafechadoEpoch AI
Qwen3.7 Plus93,3%AlibabafechadoEpoch AI
GLM 5.193,3%Zhipu AI (Z.ai)abertoEpoch AI
Grok 4.3 Beta93,3%xAIfechadoEpoch AI
Kimi K2.592,2%Moonshot AIabertoEpoch AI
Grok 4.2092,2%xAIfechadoEpoch AI
GPT-591,4%OpenAIfechadoEpoch AI
Gemini 3 Pro91,4%GooglefechadoEpoch AI
GLM-5.391,1%Zhipu AI (Z.ai)abertoEpoch AI
Qwen3.6 27B91,1%AlibabaabertoEpoch AI
Doubao Seed 2.0 Lite (Apr 2026)91,1%ByteDancefechadoEpoch AI
Qwen 3.6 Max (Preview)91,1%Alibabanão informadosEpoch AI
gpt-oss-120b88,9%OpenAIabertoEpoch AI
GPT-5.4 Mini88,9%OpenAIfechadoEpoch AI
Qwen3.5 397B A17B88,9%AlibabaabertoEpoch AI
Muse Spark88,9%MetafechadoEpoch AI
GPT-5.188,6%OpenAIfechadoEpoch AI
DeepSeek V3.287,8%DeepSeekabertoEpoch AI
GPT-5.4 Nano87,8%OpenAIfechadoEpoch AI
Qwen3-235B-A22B86,7%AlibabaabertoEpoch AI
Nemotron 3 Ultra86,7%NVIDIAabertoEpoch AI
GPT-5 Mini86,7%OpenAIfechadoEpoch AI
Qwen3.6 35B A3B86,7%AlibabaabertoEpoch AI
Qwen3.7 Flash86,7%AlibabafechadoEpoch AI
Qwen 3.5 Plus (hosted 397B-A17B)86,7%Alibabanão informadosEpoch AI
GLM-5.286,4%Zhipu AI (Z.ai)abertoEpoch AI
Claude Opus 4.586,1%AnthropicfechadoEpoch AI
Claude Sonnet 4.685,8%AnthropicfechadoEpoch AI
Gemini 2.5 Pro84,7%GooglefechadoEpoch AI
o384,4%OpenAIfechadoEpoch AI
Qwen3.5-Flash84,4%Alibabanão informadosEpoch AI
Qwen3.6 Flash84,4%Alibabanão informadosEpoch AI
Grok 484%xAIfechadoEpoch AI
GLM 4.783,3%Zhipu AI (Z.ai)abertoEpoch AI
Kimi K2 Thinking83,1%Moonshot AIabertoEpoch AI
Gemma 4 26B A4B82,2%GoogleabertoEpoch AI
o4-mini81,7%OpenAIfechadoEpoch AI
GPT-5 Nano81,1%OpenAIfechadoEpoch AI
Gemini 3.1 Flash Lite80%GooglefechadoEpoch AI
GLM 580%Zhipu AI (Z.ai)abertoEpoch AI
Claude Sonnet 4.577,8%AnthropicfechadoEpoch AI
Grok-3 mini77,8%xAIfechadoEpoch AI
o3-mini76,9%OpenAIfechadoEpoch AI
Gemma 4 31B73,3%GoogleabertoEpoch AI
Qwen3-Max73,3%AlibabafechadoEpoch AI
o173,3%OpenAIfechadoEpoch AI
Gemini 2.5 Flash73,1%GooglefechadoEpoch AI
MiniMax M371,1%MiniMaxabertoEpoch AI
Gemini 3.5 Flash Lite71,1%GooglefechadoEpoch AI
Claude Sonnet 471,1%AnthropicfechadoEpoch AI
Qwen3 30B A3B70,3%AlibabaabertoEpoch AI
Qwen3.5-35B-A3B70%AlibabaabertoEpoch AI
Doubao-Seed-1.669,4%ByteDancefechadoEpoch AI
Claude Opus 4.168,9%AnthropicfechadoEpoch AI
GPT-5.5 Instant68,1%OpenAIfechadoEpoch AI
Qwen3 32B66,9%AlibabaabertoEpoch AI
Claude Haiku 4.566,7%AnthropicfechadoEpoch AI
DeepSeek R166,4%DeepSeekabertoEpoch AI
Qwen3 14B66,4%AlibabaabertoEpoch AI
gpt-oss-20b65,3%OpenAIabertoEpoch AI
Claude Opus 464,4%AnthropicfechadoEpoch AI
Qwen3.5-9B61,7%AlibabaabertoEpoch AI
QwQ-32B59,2%AlibabaabertoEpoch AI
Claude 3.7 Sonnet57,8%AnthropicfechadoEpoch AI
Gemini 2.0 Flash Thinking57,8%GooglefechadoEpoch AI
Qwen3-8B56,1%AlibabaabertoEpoch AI
Qwen3.5-4B55,8%AlibabaabertoEpoch AI
DeepSeek-R1-Distill-Qwen-32B55,6%DeepSeekabertoEpoch AI
Grok 355,6%xAIfechadoEpoch AI
DeepSeek-R1-Distill-Llama-70B51,4%DeepSeekabertoEpoch AI
DeepSeek-R1-Distill-Qwen-14B50,6%DeepSeekabertoEpoch AI
o1-mini46,9%OpenAIfechadoEpoch AI
GPT-4.1 Mini44,7%OpenAIfechadoEpoch AI
GPT-4.138,3%OpenAIfechadoEpoch AI
DeepSeek V337,8%DeepSeekabertoEpoch AI
GPT-4.537,8%OpenAIfechadoEpoch AI
Mistral Medium 332,2%Mistral AIfechadoEpoch AI
Gemini 2.0 Flash31,1%GooglefechadoEpoch AI
o1-preview31,1%OpenAIfechadoEpoch AI
Mistral Small 3.230,3%Mistral AIabertoEpoch AI
Magistral Small 1.030%Mistral AIabertoEpoch AI
GPT-4.1 Nano28,9%OpenAIfechadoEpoch AI
Magistral Small 1.228,1%Mistral AIabertoEpoch AI
Gemini 1.5 Pro23,1%GooglefechadoEpoch AI
Gemma 3 27B22,5%GoogleabertoEpoch AI
DeepSeek-R1-Distill-Qwen-1.5B21,4%DeepSeekabertoEpoch AI
Llama 4 Maverick20,6%MetaabertoEpoch AI
Qwen-Plus17,8%AlibabafechadoEpoch AI
Gemma 3 12B16,7%GoogleabertoEpoch AI
Gemini 1.5 Flash16,2%GooglefechadoEpoch AI
Qwen2.5-Max16,1%AlibabafechadoEpoch AI
DeepSeek V315,8%DeepSeekabertoEpoch AI
Phi 413,8%MicrosoftabertoEpoch AI
Grok-211,5%xAIfechadoEpoch AI
Llama 3.1-405B9,7%MetaabertoEpoch AI
Claude 3.5 Sonnet (October 2024)8,5%AnthropicfechadoEpoch AI
Mistral Large 28,5%Mistral AIabertoEpoch AI
Qwen2.5-72B8,1%AlibabaabertoEpoch AI
Qwen3-1.7B8,1%AlibabaabertoEpoch AI
Llama 4 Scout7,8%MetaabertoEpoch AI
Gemma 3 4B7,5%GoogleabertoEpoch AI
Qwen2.5-32B7,4%AlibabaabertoEpoch AI
GPT-4o-mini6,9%OpenAIfechadoEpoch AI
Mistral Small 36,7%Mistral AIabertoEpoch AI
GPT-4 Turbo (Apr 2024)6,7%OpenAIfechadoEpoch AI
Claude 3.5 Sonnet6,5%AnthropicfechadoEpoch AI
GPT-4o6,4%OpenAIfechadoEpoch AI
Qwen-Turbo6,1%AlibabafechadoEpoch AI
Mistral Small 3.15,8%Mistral AIabertoEpoch AI
Llama 3.3 70B5,1%MetaabertoEpoch AI
Claude 3 Opus4,7%AnthropicfechadoEpoch AI
Gemini 1.5 Flash 8B4,6%GooglefechadoEpoch AI
Tulu 3 (Tülu 3) 70B4,4%Ai2 (Allen Institute)abertoEpoch AI
Claude 3.5 Haiku4,3%AnthropicfechadoEpoch AI
Llama 3-70B4,3%MetaabertoEpoch AI
Llama 3.1-70B3,6%MetaabertoEpoch AI
Llama 3.2 90B2,6%MetaabertoEpoch AI
Claude 22,5%AnthropicfechadoEpoch AI
Claude 3 Sonnet2,5%AnthropicfechadoEpoch AI
Qwen2.5-7B2,5%AlibabaabertoEpoch AI
GPT-3.5 Turbo2,2%OpenAIfechadoEpoch AI
Mistral Large1,9%Mistral AIfechadoEpoch AI
Claude 2.11,9%AnthropicfechadoEpoch AI
Llama 3-8B1,9%MetaabertoEpoch AI
Claude 3 Haiku1,8%AnthropicfechadoEpoch AI
Llama 3.1-8B1,7%MetaabertoEpoch AI
Gemma 2 27B1,4%GoogleabertoEpoch AI
GPT-41,1%OpenAIfechadoEpoch AI
Gemini 1.0 Pro1,1%GooglefechadoEpoch AI
Gemma 3 1B1,1%GoogleabertoEpoch AI
DeepSeek LLM 67B0,8%DeepSeekabertoEpoch AI
Gemma 2 9B0,6%GoogleabertoEpoch AI
Llama 3.2 1B0,6%MetaabertoEpoch AI
Mistral 7B0,3%Mistral AIabertoEpoch AI
Llama 2-70B0%MetaabertoEpoch AI

FrontierMath (níveis 1 a 3)

Como ler cada métrica

FrontierMath (níveis 1 a 3)
Modelo%LaboratórioPesosFonteComparar modelos
Claude Fable 5.295,1%AnthropicfechadoEpoch AI
GPT-6.1 Sol93,7%OpenAIfechadoEpoch AI
GPT-6 Astra93,7%OpenAIfechadoEpoch AI
Claude Opus 5.591,2%AnthropicfechadoEpoch AI
GPT-6.1 Terra90,9%OpenAIfechadoEpoch AI
Claude Fable 5.190,2%AnthropicfechadoEpoch AI
GPT-6 Sol89,8%OpenAIfechadoEpoch AI
GPT-5.6 Sol89,1%OpenAIfechadoEpoch AI
Claude Sonnet 5.588,8%AnthropicfechadoEpoch AI
GPT-5.5 Pro87,7%OpenAIfechadoEpoch AI
Claude Fable 587%AnthropicfechadoEpoch AI
Gemini 4 Argon86%GooglefechadoEpoch AI
GPT-5.6 Terra86%OpenAIfechadoEpoch AI
Claude Opus 585,6%AnthropicfechadoEpoch AI
GPT-5.585,3%OpenAIfechadoEpoch AI
GPT-5.4 Pro82,5%OpenAIfechadoEpoch AI
Muse Wonder82,1%MetafechadoEpoch AI
GPT-5.6 Luna82,1%OpenAIfechadoEpoch AI
Claude Opus 4.880%AnthropicfechadoEpoch AI
GPT-6 Luna78,9%OpenAIfechadoEpoch AI
GPT-5.478,6%OpenAIfechadoEpoch AI
Kimi K3.1 Pro78,2%Moonshot AIabertoEpoch AI
Claude Haiku 5.575,1%AnthropicfechadoEpoch AI
Qwen3.8 Max74,7%AlibabafechadoEpoch AI
Muse Spark 1.374,4%MetafechadoEpoch AI
GPT-5.2 Pro74%OpenAIfechadoEpoch AI
Kimi K372,2%Moonshot AIabertoEpoch AI
Gemini 3.7 Flash71,6%GooglefechadoEpoch AI
DeepSeek V4.1 Flash71,2%DeepSeekabertoEpoch AI
Claude Opus 4.770,2%AnthropicfechadoEpoch AI
Muse Spark Open69,8%MetaabertoEpoch AI
GLM-5.368,8%Zhipu AI (Z.ai)abertoEpoch AI
Gemini 3.8 Flash68,4%GooglefechadoEpoch AI
GPT-5.267,4%OpenAIfechadoEpoch AI
Grok 4.666%xAIfechadoEpoch AI
Claude Opus 4.666%AnthropicfechadoEpoch AI
Claude Sonnet 565,6%AnthropicfechadoEpoch AI
DeepSeek V4 Pro64,6%DeepSeekabertoEpoch AI
Qwen3.7 Max64,6%AlibabafechadoEpoch AI
Gemini 3.5 Flash62,8%GooglefechadoEpoch AI
Gemini 3.1 Pro59,6%GooglefechadoEpoch AI
GLM-5.259,2%Zhipu AI (Z.ai)abertoEpoch AI
Gemini 3.6 Flash58,9%GooglefechadoEpoch AI
Mistral Large 458,6%Mistral AIabertoEpoch AI
DeepSeek V4 Flash 073157,5%DeepSeekabertoEpoch AI
Kimi K2.657,2%Moonshot AIabertoEpoch AI
Grok 4.557,2%xAIfechadoEpoch AI
GLM-5.3-Flash55,8%Zhipu AI (Z.ai)abertoEpoch AI
GPT-5 Pro55,8%OpenAIfechadoEpoch AI
GPT-555,4%OpenAIfechadoEpoch AI
Kimi K2.7 Code54%Moonshot AIabertoEpoch AI
Grok 4.753%xAIfechadoEpoch AI
GPT-5.4 Mini51,2%OpenAIfechadoEpoch AI
Gemini 3 Flash51,2%GooglefechadoEpoch AI
GPT-5 Mini46,7%OpenAIfechadoEpoch AI
GPT-5.4 Nano44,9%OpenAIfechadoEpoch AI
Grok 4.2044,9%xAIfechadoEpoch AI
Grok 4.3 Beta42,8%xAIfechadoEpoch AI
Qwen3.6 Plus38,2%AlibabafechadoEpoch AI
GLM 5.136,8%Zhipu AI (Z.ai)abertoEpoch AI
o4-mini36,1%OpenAIfechadoEpoch AI
Qwen3.6 27B35,1%AlibabaabertoEpoch AI
Claude Opus 4.534,4%AnthropicfechadoEpoch AI
Qwen3.7 Plus34,4%AlibabafechadoEpoch AI
o333,3%OpenAIfechadoEpoch AI
Qwen3.5 397B A17B31,2%AlibabaabertoEpoch AI
Gemini 3.1 Flash Lite27,7%GooglefechadoEpoch AI
GPT-5.5 Instant26,3%OpenAIfechadoEpoch AI
Gemini 3.5 Flash Lite26%GooglefechadoEpoch AI
Gemini 2.5 Pro24,6%GooglefechadoEpoch AI
Claude Sonnet 4.523,9%AnthropicfechadoEpoch AI
Qwen3.6 Flash22,5%Alibabanão informadosEpoch AI
Qwen3.6 35B A3B20,4%AlibabaabertoEpoch AI
GPT-5 Nano20%OpenAIfechadoEpoch AI
Qwen3.7 Flash19,3%AlibabafechadoEpoch AI
Qwen3-Max18,9%AlibabafechadoEpoch AI
o3-mini18,6%OpenAIfechadoEpoch AI
Qwen3.5-Flash18,2%Alibabanão informadosEpoch AI
o114,7%OpenAIfechadoEpoch AI
Claude Opus 4.112,6%AnthropicfechadoEpoch AI
GPT-4.1 Mini6,7%OpenAIfechadoEpoch AI
GPT-4.16%OpenAIfechadoEpoch AI
GPT-4o-mini0,7%OpenAIfechadoEpoch AI
GPT-4 Turbo (Apr 2024)0,7%OpenAIfechadoEpoch AI
GPT-4o0,4%OpenAIfechadoEpoch AI
GPT-3.5 Turbo0%OpenAIfechadoEpoch AI

SimpleQA Verified

Como ler cada métrica

SimpleQA Verified
Modelo%LaboratórioPesosFonteComparar modelos
Claude Fable 5.294%AnthropicfechadoEpoch AI
Gemini 4 Argon76%GooglefechadoEpoch AI
GPT-6 Astra75,6%OpenAIfechadoEpoch AI
GPT-6.1 Sol73,9%OpenAIfechadoEpoch AI
Gemini 3.1 Pro73,5%GooglefechadoEpoch AI
Claude Opus 5.572,2%AnthropicfechadoEpoch AI
Claude Fable 5.170,8%AnthropicfechadoEpoch AI
Claude Fable 570,7%AnthropicfechadoEpoch AI
Gemini 3.8 Flash69,7%GooglefechadoEpoch AI
GPT-5.6 Sol69,7%OpenAIfechadoEpoch AI
Gemini 3.7 Flash69,2%GooglefechadoEpoch AI
Gemini 3 Flash66,8%GooglefechadoEpoch AI
Gemini 3.5 Flash66,2%GooglefechadoEpoch AI
Gemini 3.6 Flash66,2%GooglefechadoEpoch AI
GPT-5.563%OpenAIfechadoEpoch AI
Kimi K3.1 Pro62,2%Moonshot AIabertoEpoch AI
GPT-6 Sol60,7%OpenAIfechadoEpoch AI
Muse Spark 1.260,3%MetafechadoEpoch AI
Claude Opus 559,9%AnthropicfechadoEpoch AI
Muse Spark 1.157,8%MetafechadoEpoch AI
GPT-6.1 Terra57,3%OpenAIfechadoEpoch AI
Muse Spark Open56,6%MetaabertoEpoch AI
Grok 4.756%xAIfechadoEpoch AI
Qwen3.7 Max55,8%AlibabafechadoEpoch AI
Claude Opus 4.853%AnthropicfechadoEpoch AI
DeepSeek V4 Pro52,9%DeepSeekabertoEpoch AI
Qwen 3.6 Max (Preview)52%Alibabanão informadosEpoch AI
Claude Opus 4.751,7%AnthropicfechadoEpoch AI
Kimi K350,6%Moonshot AIabertoEpoch AI
GPT-550,1%OpenAIfechadoEpoch AI
o349,4%OpenAIfechadoEpoch AI
Grok 4.649,3%xAIfechadoEpoch AI
Qwen3-Max48,7%AlibabafechadoEpoch AI
Grok 4.548,3%xAIfechadoEpoch AI
GPT-5.148%OpenAIfechadoEpoch AI
Qwen3.8 Max47,3%AlibabafechadoEpoch AI
Claude Opus 4.647%AnthropicfechadoEpoch AI
Claude Sonnet 5.546,5%AnthropicfechadoEpoch AI
GPT-5.4 Pro46,3%OpenAIfechadoEpoch AI
Claude Opus 4.545,7%AnthropicfechadoEpoch AI
GPT-5.445,1%OpenAIfechadoEpoch AI
Doubao Seed 2.1 Pro44,7%ByteDancefechadoEpoch AI
Qwen3.6 Plus44,1%AlibabafechadoEpoch AI
GPT-5.6 Terra43,2%OpenAIfechadoEpoch AI
DeepSeek V4.1 Flash42,9%DeepSeekabertoEpoch AI
Doubao Seed Evolving (Nov 2026)41,9%ByteDancefechadoEpoch AI
GPT-6 Luna41,4%OpenAIfechadoEpoch AI
o141,1%OpenAIfechadoEpoch AI
GLM-5.341%Zhipu AI (Z.ai)abertoEpoch AI
GPT-5.6 Luna41%OpenAIfechadoEpoch AI
Qwen3-235B-A22B40,4%AlibabaabertoEpoch AI
Doubao-Seed-2.0 Pro39,4%ByteDancefechadoEpoch AI
GPT-5.237,1%OpenAIfechadoEpoch AI
Kimi K2.7 Code36,5%Moonshot AIabertoEpoch AI
Claude Sonnet 4.635,5%AnthropicfechadoEpoch AI
Kimi K2.634,9%Moonshot AIabertoEpoch AI
Kimi K2.534,3%Moonshot AIabertoEpoch AI
GLM-5.234,2%Zhipu AI (Z.ai)abertoEpoch AI
GLM 5.134%Zhipu AI (Z.ai)abertoEpoch AI
Claude Sonnet 533,7%AnthropicfechadoEpoch AI
DeepSeek V4 Flash 073133,6%DeepSeekabertoEpoch AI
Grok 4.3 Beta33,2%xAIfechadoEpoch AI
GLM 4.732,2%Zhipu AI (Z.ai)abertoEpoch AI
Doubao Seed 2.0 Lite (Apr 2026)31,5%ByteDancefechadoEpoch AI
GPT-4.131,1%OpenAIfechadoEpoch AI
Claude Sonnet 4.530,7%AnthropicfechadoEpoch AI
Grok 4.2030,2%xAIfechadoEpoch AI
Doubao Seed 2.1 Turbo29,7%ByteDancefechadoEpoch AI
GPT-5.4 Mini29,4%OpenAIfechadoEpoch AI
GPT-4o26%OpenAIfechadoEpoch AI
Qwen 3.5 Plus (hosted 397B-A17B)25,4%Alibabanão informadosEpoch AI
Claude Haiku 5.523,8%AnthropicfechadoEpoch AI
Mistral Large 422,4%Mistral AIabertoEpoch AI
GPT-5 Mini21,6%OpenAIfechadoEpoch AI
Qwen3.5-Flash20,3%Alibabanão informadosEpoch AI
o4-mini19,6%OpenAIfechadoEpoch AI
Doubao-Seed-1.617,4%ByteDancefechadoEpoch AI
Qwen3.6 Flash15,9%Alibabanão informadosEpoch AI
o3-mini15,3%OpenAIfechadoEpoch AI
Claude Haiku 4.513,2%AnthropicfechadoEpoch AI
GPT-4.1 Mini12,7%OpenAIfechadoEpoch AI
Claude 3 Opus12,6%AnthropicfechadoEpoch AI
GPT-5 Nano11,7%OpenAIfechadoEpoch AI
GPT-5.4 Nano11,7%OpenAIfechadoEpoch AI
Gemma 4 31B10,4%GoogleabertoEpoch AI
GPT-4o-mini8,3%OpenAIfechadoEpoch AI
GPT-4.1 Nano6%OpenAIfechadoEpoch AI

SWE-bench Verified

Como ler cada métrica

SWE-bench Verified
Modelo%LaboratórioPesosFonteComparar modelos
Claude Opus 4.783,5%AnthropicfechadoEpoch AI
GPT-5.580,6%OpenAIfechadoEpoch AI
Gemini 3.5 Flash79,3%GooglefechadoEpoch AI
GLM-5.278,7%Zhipu AI (Z.ai)abertoEpoch AI
Claude Opus 4.678,7%AnthropicfechadoEpoch AI
DeepSeek V4 Pro77,6%DeepSeekabertoEpoch AI
Qwen3.7 Max77,3%AlibabafechadoEpoch AI
GPT-5.476,9%OpenAIfechadoEpoch AI
Kimi K2.676,7%Moonshot AIabertoEpoch AI
Claude Opus 4.576,7%AnthropicfechadoEpoch AI
Qwen 3.6 Max (Preview)76,7%Alibabanão informadosEpoch AI
Gemini 3.1 Pro75,6%GooglefechadoEpoch AI
Gemini 3 Flash75,4%GooglefechadoEpoch AI
Claude Sonnet 4.675,2%AnthropicfechadoEpoch AI
GPT-5.3-Codex74,8%OpenAIfechadoEpoch AI
GLM 5.174,2%Zhipu AI (Z.ai)abertoEpoch AI
GPT-5.273,8%OpenAIfechadoEpoch AI
Kimi K2.573,8%Moonshot AIabertoEpoch AI
GPT-573,6%OpenAIfechadoEpoch AI
Claude Opus 4.173,3%AnthropicfechadoEpoch AI
Gemini 3 Pro72,9%GooglefechadoEpoch AI
GLM 572,1%Zhipu AI (Z.ai)abertoEpoch AI
Claude Sonnet 4.571,3%AnthropicfechadoEpoch AI
Claude Opus 470,7%AnthropicfechadoEpoch AI
GPT-5.168%OpenAIfechadoEpoch AI
GPT-5 Mini64,7%OpenAIfechadoEpoch AI
o362,3%OpenAIfechadoEpoch AI
Claude 3.7 Sonnet61%AnthropicfechadoEpoch AI
Qwen3.6 Plus57,9%AlibabafechadoEpoch AI
Gemini 2.5 Pro57,6%GooglefechadoEpoch AI
GPT-4.148,5%OpenAIfechadoEpoch AI
GPT-4o31%OpenAIfechadoEpoch AI

GPQA Diamond (OpenRouter)

Como ler cada métrica

GPQA Diamond (OpenRouter)
Modelo%LaboratórioPesosFonteComparar modelos
Gemini 4 Argon96,5%GooglefechadoOpenRouter Benchmarks
Gemini 3.8 Flash95,6%GooglefechadoOpenRouter Benchmarks
GPT-6 Astra Pro95,5%OpenAInão informadosOpenRouter Benchmarks
Gemini 3.1 Pro95,2%GooglefechadoOpenRouter Benchmarks
GPT-6.1 Sol94,8%OpenAIfechadoOpenRouter Benchmarks
Ling 3.1 Flash94,8%Ant Groupnão informadosOpenRouter Benchmarks
GPT-6 Astra94,7%OpenAIfechadoOpenRouter Benchmarks
Gemini 3.7 Flash94,3%GooglefechadoOpenRouter Benchmarks
GPT-5.6 Sol Pro94,1%OpenAInão informadosOpenRouter Benchmarks
GPT-5.593,9%OpenAIfechadoOpenRouter Benchmarks
Kimi K3.1 Pro93,9%Moonshot AIabertoOpenRouter Benchmarks
Kimi K393,5%Moonshot AIabertoOpenRouter Benchmarks
Gemini 3.6 Flash93,4%GooglefechadoOpenRouter Benchmarks
Claude Sonnet 5.593%AnthropicfechadoOpenRouter Benchmarks
DeepSeek V4.1 Flash92,8%DeepSeekabertoOpenRouter Benchmarks
Grok 4.692,8%xAIfechadoOpenRouter Benchmarks
GPT-5.6 Sol92,8%OpenAIfechadoOpenRouter Benchmarks
Gemini 3.5 Flash92,6%GooglefechadoOpenRouter Benchmarks
GLM-5.3-Flash92,5%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
GPT-6 Sol92,5%OpenAIfechadoOpenRouter Benchmarks
Nemotron 3.5 Super VL92,2%NVIDIAabertoOpenRouter Benchmarks
DeepSeek V4 Pro91,9%DeepSeekabertoOpenRouter Benchmarks
Grok 4.791,9%xAIfechadoOpenRouter Benchmarks
GPT-6.1 Terra91,9%OpenAIfechadoOpenRouter Benchmarks
Qwen3.8 2.4T A95B91,8%AlibabaabertoOpenRouter Benchmarks
MiniMax M391,3%MiniMaxabertoOpenRouter Benchmarks
Muse Spark Open91%MetaabertoOpenRouter Benchmarks
GPT-5.6 Luna Pro91%OpenAInão informadosOpenRouter Benchmarks
DeepSeek V4 Flash Vision Exp90,9%DeepSeekabertoOpenRouter Benchmarks
Kimi K2.7 Code90,9%Moonshot AIabertoOpenRouter Benchmarks
Qwen3.7 Max90,9%AlibabafechadoOpenRouter Benchmarks
Hy490,7%TencentabertoOpenRouter Benchmarks
MiMo V2.6 Pro90,6%XiaomiabertoOpenRouter Benchmarks
Qwen3.8 Flash90,5%AlibabaabertoOpenRouter Benchmarks
Gemini 3 Flash Preview90,4%Googlenão informadosOpenRouter Benchmarks
GPT-5.490,3%OpenAIfechadoOpenRouter Benchmarks
Claude Opus 5.590,2%AnthropicfechadoOpenRouter Benchmarks
Kimi K2.590,2%Moonshot AIabertoOpenRouter Benchmarks
Claude Opus 4.890,1%AnthropicfechadoOpenRouter Benchmarks
DeepSeek V4 Flash 042390,1%DeepSeekabertoOpenRouter Benchmarks
Claude Fable 5.189,9%AnthropicfechadoOpenRouter Benchmarks
Claude Opus 589,9%AnthropicfechadoOpenRouter Benchmarks
Claude Opus 4.789,8%AnthropicfechadoOpenRouter Benchmarks
Kimi K2.689,7%Moonshot AIabertoOpenRouter Benchmarks
GLM-5.289,7%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
MiniMax M3.1 Flash89,3%MiniMaxabertoOpenRouter Benchmarks
GPT-5.6 Terra89,3%OpenAIfechadoOpenRouter Benchmarks
GPT-6 Luna Pro89%OpenAInão informadosOpenRouter Benchmarks
Nova Micro 1.088,9%Amazonnão informadosOpenRouter Benchmarks
GPT-5.6 Luna88,7%OpenAIfechadoOpenRouter Benchmarks
GPT-6 Luna88,2%OpenAIfechadoOpenRouter Benchmarks
Qwen3.5 397B A17B88,1%AlibabaabertoOpenRouter Benchmarks
GLM-5.387,9%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
Qwen3.7 Plus87,9%AlibabafechadoOpenRouter Benchmarks
Claude Fable 587,4%AnthropicfechadoOpenRouter Benchmarks
Qwen3.8 27B87,2%AlibabaabertoOpenRouter Benchmarks
Claude Haiku 5.587,1%AnthropicfechadoOpenRouter Benchmarks
GPT-5.187%OpenAIfechadoOpenRouter Benchmarks
Claude Sonnet 586,9%AnthropicfechadoOpenRouter Benchmarks
MiMo-V2.5-Pro86,5%XiaomiabertoOpenRouter Benchmarks
Claude Opus 4.586,4%AnthropicfechadoOpenRouter Benchmarks
Claude Opus 4.686,4%AnthropicfechadoOpenRouter Benchmarks
MiniMax M2.786,1%MiniMaxabertoOpenRouter Benchmarks
Gemma 4 31B85,9%GoogleabertoOpenRouter Benchmarks
GPT-585,7%OpenAIfechadoOpenRouter Benchmarks
MiMo-V2.6-Flash85,2%XiaomiabertoOpenRouter Benchmarks
Qwen3.6 27B85,1%AlibabaabertoOpenRouter Benchmarks
Qwen3.6 35B A3B85,1%AlibabaabertoOpenRouter Benchmarks
MiniMax M2.585%MiniMaxabertoOpenRouter Benchmarks
MiMo-V2.584,9%XiaomiabertoOpenRouter Benchmarks
Ling 3.0 Flash VL84,8%Ant GroupabertoOpenRouter Benchmarks
Qwen3.5-122B-A10B84,8%AlibabaabertoOpenRouter Benchmarks
Gemini 3.5 Flash Lite84,4%GooglefechadoOpenRouter Benchmarks
GLM 4.684,3%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
GPT-5.4 Mini84,2%OpenAIfechadoOpenRouter Benchmarks
GLM 5.184,1%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
GLM 4.783,8%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
DeepSeek V3.283%DeepSeekabertoOpenRouter Benchmarks
Qwen3.5-35B-A3B82,9%AlibabaabertoOpenRouter Benchmarks
Gemini 2.5 Pro82,6%GooglefechadoOpenRouter Benchmarks
DeepSeek V3.1 Terminus82,4%DeepSeekabertoOpenRouter Benchmarks
Gemini 3.1 Flash Lite82,1%GooglefechadoOpenRouter Benchmarks
Muse Glimmer 30B82,1%MetaabertoOpenRouter Benchmarks
Claude Sonnet 4.581,7%AnthropicfechadoOpenRouter Benchmarks
DeepSeek V3.181,7%DeepSeekabertoOpenRouter Benchmarks
GPT-5 Mini81%OpenAIfechadoOpenRouter Benchmarks
Qwen3.5-9B81%AlibabaabertoOpenRouter Benchmarks
GLM 581%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
DeepSeek R179,7%DeepSeekabertoOpenRouter Benchmarks
Qwen3 235B A22B Thinking 250779,1%AlibabaabertoOpenRouter Benchmarks
Gemma 4 26B A4B78,8%GoogleabertoOpenRouter Benchmarks
GPT-5.4 Nano77,7%OpenAIfechadoOpenRouter Benchmarks
gpt-oss-120b77,4%OpenAIabertoOpenRouter Benchmarks
Qwen3-235B-A22B77,4%AlibabaabertoOpenRouter Benchmarks
Gemini 2.5 Flash76,7%GooglefechadoOpenRouter Benchmarks
Ling 3.0 Flash76,5%Ant GroupabertoOpenRouter Benchmarks
Qwen3 Coder Next76,3%AlibabaabertoOpenRouter Benchmarks
Mistral Small 475,8%Mistral AIabertoOpenRouter Benchmarks
Nemotron 3.5 Lightning74,8%NVIDIAabertoOpenRouter Benchmarks
Claude Haiku 4.573%AnthropicfechadoOpenRouter Benchmarks
Qwen3 Next 80B A3B Instruct71,8%AlibabaabertoOpenRouter Benchmarks
Qwen3 VL 235B A22B Instruct71,1%AlibabaabertoOpenRouter Benchmarks
Claude Sonnet 4.670,6%AnthropicfechadoOpenRouter Benchmarks
GPT-5 Nano70,5%OpenAIfechadoOpenRouter Benchmarks
Nemotron 3 Nano 30B A3B68,8%NVIDIAabertoOpenRouter Benchmarks
gpt-oss-20b68,7%OpenAIabertoOpenRouter Benchmarks
DeepSeek V366,9%DeepSeekabertoOpenRouter Benchmarks
Qwen3 VL 30B A3B Instruct66,8%AlibabaabertoOpenRouter Benchmarks
GLM 4.6V66,8%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
DeepSeek V366,7%DeepSeekabertoOpenRouter Benchmarks
Llama 4 Maverick66,7%MetaabertoOpenRouter Benchmarks
GPT-4.166%OpenAIfechadoOpenRouter Benchmarks
Granite 4.2 8B65,7%IBMabertoOpenRouter Benchmarks
GPT-4.1 Mini65,2%OpenAIfechadoOpenRouter Benchmarks
Qwen3 30B A3B Instruct 250764,8%AlibabaabertoOpenRouter Benchmarks
Qwen3 32B63,3%AlibabaabertoOpenRouter Benchmarks
Qwen3-Coder61,2%AlibabaabertoOpenRouter Benchmarks
Qwen3 14B61,2%AlibabaabertoOpenRouter Benchmarks
Qwen3 30B A3B60,9%AlibabaabertoOpenRouter Benchmarks
Gemini 2.5 Flash Lite59,6%Googlenão informadosOpenRouter Benchmarks
GLM 4.7 Flash58%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
Qwen3 VL 8B Instruct53,9%AlibabaabertoOpenRouter Benchmarks
Qwen3 Coder 30B A3B Instruct53,4%AlibabaabertoOpenRouter Benchmarks
GPT-4o52,7%OpenAIfechadoOpenRouter Benchmarks
GPT-4.1 Nano50,5%OpenAIfechadoOpenRouter Benchmarks
Llama 3.3 70B Instruct49,8%MetaabertoOpenRouter Benchmarks
Qwen2.5 72B Instruct47,7%AlibabaabertoOpenRouter Benchmarks
Qwen2.5 VL 72B Instruct45,7%AlibabaabertoOpenRouter Benchmarks
GPT-4o-mini43,6%OpenAIfechadoOpenRouter Benchmarks
Gemma 3 12B40,6%GoogleabertoOpenRouter Benchmarks
Hy-MT2-30B-A3B38,9%TencentabertoOpenRouter Benchmarks
Llama 3.1 8B Instruct29%MetaabertoOpenRouter Benchmarks
Llama 3.2 3B Instruct28,6%MetaabertoOpenRouter Benchmarks
Gemma 3 4B27,1%GoogleabertoOpenRouter Benchmarks
Nano Banana 2 Lite (Gemini 3.1 Flash Lite Image)11,6%Googlenão informadosOpenRouter Benchmarks

τ-bench Verified (companhia aérea)

Como ler cada métrica

τ-bench Verified (companhia aérea)
Modelo%LaboratórioPesosFonteComparar modelos
Claude Fable 582%AnthropicfechadoOpenRouter Benchmarks
DeepSeek V4 Flash 042381,7%DeepSeekabertoOpenRouter Benchmarks
Gemini 3.7 Flash80,7%GooglefechadoOpenRouter Benchmarks
Qwen3.5 397B A17B80,2%AlibabaabertoOpenRouter Benchmarks
GPT-5.180%OpenAIfechadoOpenRouter Benchmarks
Ling 3.1 Flash79,3%Ant Groupnão informadosOpenRouter Benchmarks
Claude Fable 5.179,2%AnthropicfechadoOpenRouter Benchmarks
Qwen3.6 27B79%AlibabaabertoOpenRouter Benchmarks
MiMo V2.6 Pro78,9%XiaomiabertoOpenRouter Benchmarks
Claude Sonnet 5.578,8%AnthropicfechadoOpenRouter Benchmarks
GLM-5.378,8%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
Gemini 4 Argon78,7%GooglefechadoOpenRouter Benchmarks
Kimi K3.1 Pro78,7%Moonshot AIabertoOpenRouter Benchmarks
Claude Opus 578,7%AnthropicfechadoOpenRouter Benchmarks
Qwen3.5-35B-A3B78,7%AlibabaabertoOpenRouter Benchmarks
DeepSeek V4 Pro78,6%DeepSeekabertoOpenRouter Benchmarks
Gemini 3.5 Flash Lite78,3%GooglefechadoOpenRouter Benchmarks
MiMo-V2.6-Flash78,2%XiaomiabertoOpenRouter Benchmarks
Qwen3.8 27B78%AlibabaabertoOpenRouter Benchmarks
DeepSeek V4.1 Flash77,8%DeepSeekabertoOpenRouter Benchmarks
Claude Opus 4.777,8%AnthropicfechadoOpenRouter Benchmarks
Qwen3.5-122B-A10B77,7%AlibabaabertoOpenRouter Benchmarks
Hy477,6%TencentabertoOpenRouter Benchmarks
Claude Opus 4.877,5%AnthropicfechadoOpenRouter Benchmarks
Qwen3.8 2.4T A95B77,4%AlibabaabertoOpenRouter Benchmarks
Kimi K2.7 Code77,3%Moonshot AIabertoOpenRouter Benchmarks
Muse Glimmer 30B77,2%MetaabertoOpenRouter Benchmarks
Gemini 3.1 Pro77%GooglefechadoOpenRouter Benchmarks
Gemma 4 31B77%GoogleabertoOpenRouter Benchmarks
GLM 576,9%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
Gemini 3.8 Flash76,7%GooglefechadoOpenRouter Benchmarks
GLM-5.276,7%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
Nova Micro 1.076,7%Amazonnão informadosOpenRouter Benchmarks
DeepSeek V4 Flash Vision Exp76,7%DeepSeekabertoOpenRouter Benchmarks
Claude Opus 4.576,6%AnthropicfechadoOpenRouter Benchmarks
Qwen3.8 Flash76,4%AlibabaabertoOpenRouter Benchmarks
GLM-5.3-Flash76,3%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
MiniMax M376,3%MiniMaxabertoOpenRouter Benchmarks
Gemini 3.6 Flash76,3%GooglefechadoOpenRouter Benchmarks
Kimi K376,2%Moonshot AIabertoOpenRouter Benchmarks
Qwen3.6 35B A3B76,2%AlibabaabertoOpenRouter Benchmarks
GLM 4.776%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
Claude Opus 4.675,8%AnthropicfechadoOpenRouter Benchmarks
GLM 5.175,8%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
Muse Spark Open75,7%MetaabertoOpenRouter Benchmarks
Qwen3.5-9B75,7%AlibabaabertoOpenRouter Benchmarks
Claude Sonnet 575,4%AnthropicfechadoOpenRouter Benchmarks
Claude Opus 5.575,3%AnthropicfechadoOpenRouter Benchmarks
Grok 4.775,3%xAIfechadoOpenRouter Benchmarks
Grok 4.675,3%xAIfechadoOpenRouter Benchmarks
GPT-5.3-Codex75,3%OpenAIfechadoOpenRouter Benchmarks
GPT-5.475%OpenAIfechadoOpenRouter Benchmarks
Claude Sonnet 4.574,9%AnthropicfechadoOpenRouter Benchmarks
Kimi K2.674,9%Moonshot AIabertoOpenRouter Benchmarks
Nemotron 3.5 Super VL74,9%NVIDIAabertoOpenRouter Benchmarks
Claude Sonnet 4.674,8%AnthropicfechadoOpenRouter Benchmarks
GPT-5.574,7%OpenAIfechadoOpenRouter Benchmarks
DeepSeek V3.274,7%DeepSeekabertoOpenRouter Benchmarks
MiniMax M3.1 Flash74,7%MiniMaxabertoOpenRouter Benchmarks
MiMo-V2.574,7%XiaomiabertoOpenRouter Benchmarks
GPT-5.6 Sol74,2%OpenAIfechadoOpenRouter Benchmarks
MiMo-V2.5-Pro74,1%XiaomiabertoOpenRouter Benchmarks
Claude Haiku 5.574%AnthropicfechadoOpenRouter Benchmarks
Ling 3.0 Flash74%Ant GroupabertoOpenRouter Benchmarks
Kimi K2.573,8%Moonshot AIabertoOpenRouter Benchmarks
MiniMax M2.773,4%MiniMaxabertoOpenRouter Benchmarks
Gemini 3 Flash Preview73,3%Googlenão informadosOpenRouter Benchmarks
GLM 4.673,3%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
DeepSeek V3.173,1%DeepSeekabertoOpenRouter Benchmarks
DeepSeek V3.1 Terminus73%DeepSeekabertoOpenRouter Benchmarks
Gemini 3.5 Flash73%GooglefechadoOpenRouter Benchmarks
Gemini 3.1 Flash Lite72,7%GooglefechadoOpenRouter Benchmarks
GPT-5.6 Luna72,7%OpenAIfechadoOpenRouter Benchmarks
GPT-6 Astra Pro72,7%OpenAInão informadosOpenRouter Benchmarks
Qwen3.7 Plus72,7%AlibabafechadoOpenRouter Benchmarks
GPT-5 Mini72,4%OpenAIfechadoOpenRouter Benchmarks
GPT-5.6 Terra72,3%OpenAIfechadoOpenRouter Benchmarks
Ling 3.0 Flash VL72%Ant GroupabertoOpenRouter Benchmarks
Qwen3.7 Max72%AlibabafechadoOpenRouter Benchmarks
GPT-5.6 Sol Pro71,7%OpenAInão informadosOpenRouter Benchmarks
Nemotron 3.5 Lightning71,5%NVIDIAabertoOpenRouter Benchmarks
GPT-6.1 Sol70,7%OpenAIfechadoOpenRouter Benchmarks
GPT-570,7%OpenAIfechadoOpenRouter Benchmarks
GPT-5.6 Luna Pro70,7%OpenAInão informadosOpenRouter Benchmarks
Gemma 4 26B A4B70,6%GoogleabertoOpenRouter Benchmarks
GPT-6 Sol70,2%OpenAIfechadoOpenRouter Benchmarks
GPT-6.1 Terra70%OpenAIfechadoOpenRouter Benchmarks
GPT-6 Astra69,7%OpenAIfechadoOpenRouter Benchmarks
GLM 4.7 Flash69,7%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
GPT-6 Luna Pro69,3%OpenAInão informadosOpenRouter Benchmarks
MiniMax M2.569,2%MiniMaxabertoOpenRouter Benchmarks
GPT-6 Luna68,4%OpenAIfechadoOpenRouter Benchmarks
gpt-oss-120b67,3%OpenAIabertoOpenRouter Benchmarks
GPT-5.4 Mini66,7%OpenAIfechadoOpenRouter Benchmarks
Claude Haiku 4.566,4%AnthropicfechadoOpenRouter Benchmarks
GPT-5.4 Nano65,6%OpenAIfechadoOpenRouter Benchmarks
Granite 4.2 8B64%IBMabertoOpenRouter Benchmarks
Qwen3 235B A22B Thinking 250761,7%AlibabaabertoOpenRouter Benchmarks
Qwen3 Coder Next60,7%AlibabaabertoOpenRouter Benchmarks
GLM 4.6V60,7%Zhipu AI (Z.ai)abertoOpenRouter Benchmarks
Gemini 2.5 Pro60%GooglefechadoOpenRouter Benchmarks
Gemini 2.5 Flash59,1%GooglefechadoOpenRouter Benchmarks
DeepSeek R158%DeepSeekabertoOpenRouter Benchmarks
Qwen3 32B54,3%AlibabaabertoOpenRouter Benchmarks
Gemini 2.5 Flash Lite53,7%Googlenão informadosOpenRouter Benchmarks
gpt-oss-20b53,5%OpenAIabertoOpenRouter Benchmarks
GPT-4.152,3%OpenAIfechadoOpenRouter Benchmarks
Nemotron 3 Nano 30B A3B52%NVIDIAabertoOpenRouter Benchmarks
GPT-5 Nano48,3%OpenAIfechadoOpenRouter Benchmarks
Qwen3-Coder48%AlibabaabertoOpenRouter Benchmarks
Gemma 3 12B48%GoogleabertoOpenRouter Benchmarks
Qwen3 VL 235B A22B Instruct48%AlibabaabertoOpenRouter Benchmarks
Qwen3-235B-A22B47,9%AlibabaabertoOpenRouter Benchmarks
Qwen3 Next 80B A3B Instruct47,5%AlibabaabertoOpenRouter Benchmarks
Qwen3 30B A3B47%AlibabaabertoOpenRouter Benchmarks
Mistral Small 446%Mistral AIabertoOpenRouter Benchmarks
Qwen3 Coder 30B A3B Instruct46%AlibabaabertoOpenRouter Benchmarks
GPT-4.1 Mini45,1%OpenAIfechadoOpenRouter Benchmarks
Qwen3 14B44%AlibabaabertoOpenRouter Benchmarks
DeepSeek V343,8%DeepSeekabertoOpenRouter Benchmarks
Llama 4 Maverick43,4%MetaabertoOpenRouter Benchmarks
GPT-4o43,2%OpenAIfechadoOpenRouter Benchmarks
DeepSeek V343%DeepSeekabertoOpenRouter Benchmarks
Qwen3 30B A3B Instruct 250741,5%AlibabaabertoOpenRouter Benchmarks
Qwen3 VL 30B A3B Instruct41,3%AlibabaabertoOpenRouter Benchmarks
Llama 3.3 70B Instruct39,9%MetaabertoOpenRouter Benchmarks
Qwen3 VL 8B Instruct32,7%AlibabaabertoOpenRouter Benchmarks
GPT-4o-mini30,7%OpenAIfechadoOpenRouter Benchmarks
Qwen2.5 72B Instruct27,3%AlibabaabertoOpenRouter Benchmarks
Llama 3.1 8B Instruct23,5%MetaabertoOpenRouter Benchmarks
GPT-4.1 Nano14%OpenAIfechadoOpenRouter Benchmarks

Modelo contra modelo

Fontes

  • Epoch AI, CC BY 4.0, versão mais recente consultada.
  • OpenRouter Benchmarks, CC BY 4.0, versão mais recente consultada.
  • OpenRouter, dados públicos da API; exports de benchmarks e rankings em CC BY 4.0, versão mais recente consultada.

Datas vêm das fontes: entrada no OpenRouter ou criação do repositório no Hugging Face, que podem não coincidir com o lançamento oficial. Família e versão foram agrupadas por regra a partir do nome.