Onderzoek: AI beveelt merken willekeurig aan

Klanten gebruiken steeds vaker AI om een product te vinden. Maar hoe jouw merk opduikt in AI, is anders dan je denkt.

Stel je voor: je vraagt ChatGPT om de beste koptelefoons aan te bevelen voor op reis. Je krijgt een keurig lijstje met vijf merken. Dan vraag je het opnieuw. En je krijgt een ander lijstje. Met andere merken. In een andere volgorde.

Dat is precies wat nieuw onderzoek suggereert. De onderzoekers lieten 600 vrijwilligers dezelfde vragen stellen aan drie AI-modellen: ChatGPT, Claude en Google AI. De vrijwilligers voerden in totaal bijna 3.000 prompts in, over uiteenlopende categorieën als keukenartikelen, sciencefiction, gezondheidszorg en mode.

De uitkomst? Willekeur.

Als je een AI-model 100 keer dezelfde vraag stelt, is bijna elk antwoord uniek. De lijst is anders. De volgorde is anders. En zelfs het aantal aanbevelingen varieert van twee tot meer dan tien. De kans dat de onderzoekers twee keer hetzelfde lijstje kregen bleek minder dan 1 op 100. En de kans dat twee lijstjes in dezelfde volgorde staan? Eerder 1 op 1.000.

Dat is geen fout, maar een eigenschap. AI-modellen zijn in essentie kansmachines. Ze zijn ontworpen om variatie te produceren, niet om een stabiele, geordende ranglijst te geven. AI-modellen als zoekmachines behandelen is dan ook een vergissing.

Wat ik bedoel: het nauwkeurig bijhouden van je ranking in AI-antwoorden heeft weinig zin. De onderzoekers noemen het een “fool’s errand”. En toch claimen allerlei AI-trackingtools dat ze dit kunnen. Er wordt naar schatting al meer dan $100 miljoen per jaar besteed aan dit soort diensten. De onderzoekers zijn........

© Marketingfacts