Компания Wildberries тестирует обновленную функцию поиска по фото в мобильном приложении. Основное нововведение — возможность добавить к загруженному изображению текстовое уточнение. Система анализирует и картинку, и текст, что позволяет точнее подбирать товары.
Пользователь может загрузить фото футболки и ввести уточнение «с длинным рукавом» или «без принта». Либо найти диван, уточнив, что нужна модель без подлокотников. Такой подход помогает в ситуациях, когда у человека нет точного описания или идеального изображения: достаточно показать похожий вариант и задать направление поиска словами.
Технология объединяет визуальный анализ изображения и обработку смысловых уточнений. Это позволяет интерпретировать запрос точнее, чем при классическом поиске. Кроме того, поиск по фото стал доступнее: кнопка Wildberries появилась в меню «Поделиться» на смартфоне. Теперь можно выбрать любое изображение в галерее, браузере или другом приложении, нажать Wildberries и сразу перейти к результатам поиска.
Интерес к фотопоиску на платформе растет. Сейчас этой функцией ежедневно пользуются 1,7 миллиона человек, а за последний год месячная аудитория увеличилась более чем в два раза.
В компании отмечают, что стремятся к тому, чтобы поиск понимал не только картинку, но и намерение пользователя. По словам руководителя команды рекомендаций Wildberries Максима Пасашкова, человек не всегда может точно сформулировать запрос — ему проще показать пример и уточнить, что именно изменить. С помощью искусственного интеллекта этот сценарий становится более естественным и удобным.
Новые функции уже тестируются в мобильном приложении. В ближайшее время они станут доступны всем пользователям Wildberries.