Комментарии 9
Ждал больше информации по разработке, а тут просто реклама.
Интересный подход, спасибо. Лично я предпочитаю пользоваться функцией поиска по картинке в поисковиках с фильтром по сайту.
Но стало интересно: ксли кто из читателей в теме - есть ли статьи со стороны маркетплейсов как у них внутри поиск по фото организован?
Да, но поиск у этого бота не работает. Все, что он делает, это описывает словами то, что увидел на загруженной картинке. Очень общими словами, точно такую же функцию выполняет просто переход по каталогу до нужного уровня детализации. Ключевое в поиске по картинке - это поиск, собственно, картинки, с максимально точным совпадением. Этого боту не удается.
Ты ищешь по картинке ТОЛЬКО по причине, что понимаешь, нельзя написать "серьга в форме капли на половину по горизонтали из изумруда, а вторая половина из металла, плавная граница разделения" (представили) - а поисковая выдача будет просто пустой!
Проблема - правильно проиндексировать предмет словами. Продавец на МП в лучшем случае напишет "серьга капля металлическая". А если прогнать через модель все картинки и получить достаточно точное их описание (ограничившись не 5 словами, как мы искусственно обрезали в боте) то ты улучшаешь и весь поиск в целом, и выдачу даешь сразу с фильтрами заполненными, и поиск по картинке делаешь ОЧЕВИДНО работающим, просто потому что описание предмета будет всегда примерно одинаковое.
Понятно, тут сталкивается множество якодзун - как товар может описать покупатель, как его обвешивает продавец, какие фильтры доступны на самой площадке, как разметил картинку бот / ии / кто-то еще. Больнее всего это пока что выглядит на ВБ - причем поиск по картинке у них не такой болезненный, как поиск по кивордам и фильтрам. А лучше всего получается - у алика и google lens. Есть подозрение, что поиск у бота / вб и у алика / гугла строится на разных подходах, но я как простой обыватель рассуждаю.
кстати да,не раз заходя на вб или озон замечал что поиск по фото вообще не проработан и не оптимизированн,как сказал автор потребуется не так уж и много времени на реализацию такого поиска,не понимаю почему не нашли еще того,кто сможет написать им программу для этого ,людям же это жизнь облегчит хахаха
Попробовал загрузить ваше фото с грилем из примера в бота. Результат:
И это же фото загрузил в поиск по фото WB. Результат:
:
Поиск по фото для Ozon и WB за 3 часа