Платіжна система Visa перевірила 22 моделі штучного інтелекту від 12 розробників і з’ясувала, що вони провалюють 42,8% тестових завдань із покупок. Успішними виявилися 57,2% перевірок, повідомили у пресслужбі компанії.
Тестування провели в межах нового галузевого стандарту Visa Agentic Commerce Benchmark. Він оцінює, чи здатні ШІ-агенти визначати потреби покупців на основі розмови, збирати достатньо інформації для обґрунтованого вибору та відмовлятися від покупки, якщо жоден товар не відповідає вимогам клієнта.
Під час першого етапу моделі виконували завдання з вибору телевізора, ноутбука та приладу для догляду за собою. Найкращі моделі успішно проходили 82,2% тестів, тоді як показник найслабших становив лише 28,9%.
Visa виявила, що 54% невдалих спроб усе одно завершувалися покупкою. ШІ-агенти обирали товари, які не відповідали визначеним потребам клієнта, або не з’ясовували всіх його вимог. Дорожчі моделі показали кращі результати: п’ять найдорожчих успішно пройшли 67,1% тестів проти 50,2% у п’яти найдешевших.
