В «умных» магазинах Amazon покупки клиентов вместо ИИ проверяла тысяча индусов — The Information

Бигтех-гигант Amazon использовал тысячу индусов для проверки «автоматической ИИ-системы» оплаты товаров в своих супермаркетах — сообщает The Information со ссылкой на документы компании. Фирма уже переходит на обычную технологию самообслуживания.

Технологию Just Walk Out начали применять ещё в 2016 году. Разработчики позиционировали её как способ быстрого шоппинга в динамичных точках: посетителям необходимо было отсканировать код из своего приложения, набрать продукты и просто выйти из магазина. После этого Amazon автоматически снимал сумму со счёта клиента и присылал чек. В случае ошибки клиенты могли направить жалобу и получить возмещение за неправильно «пробитые» позиции.

Примечательно, что компания всегда писала, что Just walk out была сложным «сочетанием технологий», которые позволяли отслеживать клиентов. Тем не менее, в фирме никогда не упоминали, что отслеживанием покупателей занимаются реальные люди. В статье, которая вышла на сайте Amazon, говорилось, что возможность автоматического списания включала в себя «компьютерное зрение, распознавание объектов, современные датчики, модели глубокого машинного обучения и генеративного искусственного интеллекта», но участие сотрудников не упоминалось. 

Менеджеры, которые комментировали применение «революционной» технологии, также не сообщали о реальных людях. При этом в компании настаивали на том, что посещение магазинов остаётся «конфиденциальным» для клиентов, так как инженеры якобы научили алгоритмы машинного обучения  отличать людей друг от друга и «гарантируют, что в виртуальную корзину будет добавлен правильный товар — и всё это без каких-либо конкретных знаний о человеке».

«Внутри магазина вы обнаружите несколько специальных камер, закреплённых на потолке, с видом на всю площадь магазина. Вице-президент компании Just Walk Out Technology Джон Дженкинс говорит, что сочетание компьютерного зрения и машинного обучения позволяет системе знать, “кто что берет, и правильно взимать с них плату, когда они уходят”. Когда вы берёте банку газировки, технология Just Walk Out добавляет её в вашу “виртуальную корзину”. Если вы решите вернуть его на полку, технология автоматически удалит товар», — говорилось в статье.

Как оказалось, отслеживать покупателей магазина помогал не только ИИ, но и около тысячи сотрудников компании из Индии: по данным The Information, в 2022 году около 70% всех покупок «пробивали» или проверяли именно индусы. Более того, по данным журналистов, компания не планировала отказываться от этой практики и хотела только снизить долю транзакций с участием людей до 50%.

Представитель Amazon в комментарии для СМИ назвал эту информацию ложной. По его словам, сотрудники в Индии «в основном помогают обучать модель», которую затем используют для автоматической продажи товаров. Он подчёркивает, что индусы вмешивались только в «небольшой части» случаев, когда технология компьютерного зрения «не могла с полной уверенностью определить», что покупает человек. 

Примечательно, что компания уже начала постепенно отказываться от Just Walk Out в пользу другой технологи — Dash Carts, при использовании которой клиенты сами «пробивают» товар с помощью сканера, который встроен непосредственно в тележку супермаркета.