Visa представила спеціалізований бенчмарк Visa Agentic Commerce Benchmark, покликаний оцінити, наскільки ефективно ШІ-агенти справляються з реальними сценаріями купівлі товарів. Результати першого раунду тестування виявилися далекими від ідеалу й наочно демонструють розрив між амбіціями автономної комерції та поточним рівнем технологій.
У випробуваннях взяли участь 22 моделі від 12 лабораторій — чимала вибірка, що охоплює широкий спектр провідних гравців ринку штучного інтелекту. Середній показник успішності становив лише 57,2% пройдених спроб. Інакше кажучи, майже кожне друге завдання з підбору товарів завершилося провалом.
Що стоїть за цифрою 57,2%
Показник трохи вище половини — це не просто статистична похибка, а системний сигнал. Агентна комерція передбачає, що ШІ самостійно інтерпретує запит користувача, орієнтується в каталогах, порівнює параметри й ухвалює рішення про покупку. Саме на цьому багатоступеневому шляху моделі й демонструють уразливість: помилки накопичуються на кожному етапі, знижуючи підсумкову надійність.
Для платіжної індустрії та e-commerce це принципово важливий висновок. Автономні агенти обіцяють радикально змінити користувацький досвід, але за поточної точності масове довіря до них передчасне. Бізнес-моделі, побудовані на повній передачі закупівельних і купівельних функцій ШІ, поки не можуть опиратися на стабільний результат.
Бенчмарк Visa задає важливий орієнтир для всієї галузі: він переводить дискусію про агентну комерцію з площини маркетингових обіцянок у площину вимірюваних метрик. Подальші раунди тестування покажуть, наскільки швидко моделі здатні подолати поріг надійності, необхідний для реальних транзакцій.
Аналіз Cryptalist: Результат у 57,2% відображає фундаментальну незрілість агентних ШІ-рішень для комерції: розрив між демонстраційними можливостями та продакшн-надійністю залишається значним. Для ринку це сигнал про те, що інфраструктура автономних платежів і закупівель формуватиметься поступово, а попит зміститься в бік гібридних моделей за участю людини. Інвесторам і платіжним платформам варто закладати тривалий горизонт впровадження агентної комерції.