Glossário
SimpleQA Verified
O SimpleQA Verified, no quadro da Epoch AI (CC BY 4.0, versão mais recente consultada), faz perguntas curtas de fato, com uma única resposta certa, revisadas para tirar erros do gabarito. A nota é o percentual de acerto.
O que mede
O SimpleQA Verified, no quadro da Epoch AI (CC BY 4.0, versão mais recente consultada), faz perguntas curtas de fato, com uma única resposta certa, revisadas para tirar erros do gabarito. A nota é o percentual de acerto.
Quando importa
Pesa quando inventar um fato sai caro, como numa resposta de suporte ou numa pesquisa que vai para o cliente. Mede memória de fatos. Um modelo forte em raciocínio ainda pode ir mal aqui.
Como ler
A nota é o percentual de fatos curtos acertados, no quadro da Epoch AI, na versão mais recente consultada. Com nota baixa, eu usaria busca ou documentos junto, mesmo que o raciocínio seja forte.
Quem lidera
- Claude Fable 5.2 Anthropic94%
- Gemini 4 Argon Google76%
- GPT-6 Astra OpenAI75,6%
- GPT-6.1 Sol OpenAI73,9%
- Gemini 3.1 Pro Google73,5%
- Claude Opus 5.5 Anthropic72,2%
- Claude Fable 5.1 Anthropic70,8%
- Claude Fable 5 Anthropic70,7%
- Gemini 3.8 Flash Google69,7%
- GPT-5.6 Sol OpenAI69,7%
Fonte: Epoch AI, versão mais recente consultada.