Mercado · IA en la práctica
Visa lanza un benchmark de compras con agentes de IA
Visa lanzó el 5 de noviembre el Agentic Commerce Benchmark, una prueba estandarizada de compras con IA.
Lo que registran las fuentes
Visa lanzó el 5 de noviembre el Agentic Commerce Benchmark, una prueba estandarizada de compras con IA. En la primera ronda, 22 modelos de 12 laboratorios enfrentaron 15 desafíos, como elegir un televisor, un portátil o un electrodoméstico de uso personal. La tasa general de aprobación fue del 57,2%: los mejores pasaron el 82,2% de los intentos y los peores, el 28,9%.
Lectura de Adriano
Lo que más me llamó la atención fue la consistencia. Cada modelo tuvo tres intentos por escenario, y los tres juntos solo aprobaron en el 34,2% de los casos. En cerca del 54% de los fallos, el modelo aún recomendó una compra. La prueba cubre el descubrimiento de los requisitos del cliente y la decisión correcta de comprar o de no comprar.
Visa planea extender la evaluación a checkout, pago y colocación del pedido. Para quien construye producto e infraestructura de pagos, la consistencia de estas decisiones merece atención antes de ampliar la autonomía de los agentes.