Mercado · IA na prática
Visa lança benchmark de compras com agentes de IA
A Visa lançou em 5 de novembro o Agentic Commerce Benchmark, um teste padronizado de compras com IA.
O que as fontes registram
A Visa lançou em 5 de novembro o Agentic Commerce Benchmark, um teste padronizado de compras com IA. Na primeira rodada, 22 modelos de 12 laboratórios enfrentaram 15 desafios, como escolher TV, notebook ou eletrodoméstico. A taxa geral de aprovação ficou em 57,2%: os melhores passaram em 82,2% das tentativas e os piores em 28,9%.
Leitura do Adriano
O ponto que mais me chamou atenção foi a consistência. Cada modelo teve três tentativas por cenário, e as três passaram juntas em apenas 34,2% dos casos. Em cerca de 54% das falhas, o modelo ainda recomendou uma compra. O teste cobre a descoberta dos requisitos do cliente e a decisão correta de comprar ou de não comprar.
A Visa planeja estender a avaliação a checkout, pagamento e colocação de pedido. Para quem constrói produto e infraestrutura de pagamentos, a consistência dessas decisões merece atenção antes de ampliar a autonomia dos agentes.