Visas test: AI-shoppingagenter klarar knappt hälften
I Visas Agentic Commerce Benchmark klarade utvalda modeller i snitt 57,2 procent av försöken när de skulle handla bland annat tv, laptop och personvårdsprodukter.
I Visas nya mätning Agentic Commerce Benchmark landade utvalda AI-modeller på 57,2 procent godkända försök. Det är Visas eget branschtest för hur bra modeller klarar realistiska köp.

Första omgången omfattade 22 modeller från 12 labb och 15 shoppinguppgifter, till exempel att köpa en tv, en laptop eller en personvårdsprodukt. Modellerna ska lista ut kundens behov i en konversation. Passar inget ska de avstå från att köpa, och de måste enligt Visa ta fram tillräckligt med information för att motivera beslutet. Siffrorna kommer från Visas investor relations.
Bäst 82 procent, sämst 29
De bästa modellerna klarade 82,2 procent av försöken, de sämsta 28,9 procent. De fem modeller som grävde fram flest dolda köpfaktorer i samtalet hade i snitt 70,2 procent godkända försök. De fem som grävde fram minst klarade under hälften, 44,4 procent.
Dyrare modeller gick bättre men var ingen garanti: de fem dyraste per körning klarade 67,1 procent, de fem billigaste 50,2 procent.
Misslyckanden som ändå blir köp
Enligt Visa slutade omkring 54 procent av de misslyckade körningarna ändå i att AI:n gjorde ett köp. Antingen rekommenderades något som inte uppfyllde kraven, eller så hade agenten inte fått fram alla krav. När varje modell fick tre försök på samma scenario klarades alla tre bara i 34,2 procent av fallen över alla modeller och scenarier.
Visa ger ett tv-exempel: kunden nämner att en släkting rekommenderat ett märke och att hen har medlemskap hos en leverantör, men lämnar budget och krav som HDR10+ och spelstöd osagda. Agenten ska få fram det i dialogen.
Visa planerar att lägga till fler produktkategorier och utöka testet till checkout, betalning och orderläggning. Mer om agentisk handel finns på