2021-06-27 02:41:04
Мой опыт работы в фотобанке наконец пригодился. Марк Цукерберг анонсировал поиск по фото в Instagram. А я могу рассказать вам, как это устроено в сети. Простыми словами.
Главная цель — помочь пользователям находить релевантные запросам товары. Про «покажи мне Эйфелеву башню» речи не идёт. За ней к Яндексу.
Конечно, есть подвох. Поиск по изображениям неидеален.
Напомню, что при запуске подобной функции в Google, поисковик сначала нарвался на скандал, выдав фото горилл по запросам «чёрный мужчина» и «чёрная женщина».
Instagram благоразумно начал готовиться к запуску заранее, тренировать AI. Он учился считывает изображение и присваивать ему невидимые теги, вроде «дом», «женщина в красном», «мужчина рядом с деревом», «красная футболка».
Вы можете сами проверить, насколько он точен. Эти теги эти фиксируются как альтернативные и служат не только для оптимизации выдачи в ленте, но и для помощи людям с нарушением зрения.
Зайдите в настройки телефона, раздел «специальные возможности», включите функцию VoiceOver. Теперь перейдите в приложение, откройте свой аккаунт и прослушайте описание постов.
Поиск по картинке будет сначала делить загружаемое изображение на фрагменты, затем сравнивать их с теми, что уже есть в базе. При этом, он будет учитывать и пиксели, и теги, и описание внутри карточки товара.
Качество поиска зависит от количества похожих фото, чем больше, тем лучше. Например, маленькое чёрное платье (не факт, что ваше) он найдёт быстрее, чем редкий свитшот с эксклюзивным принтом.
Интересно, как поиск будет реагировать на реплики известных брендов. И не станет ли сеть случайно продвигать фейковые сумки Chanel, например.
Сразу за поиском подключится реклама магазинов, которая будет опираться на наши с вами предпочтения в покупках и поиске. Не удивляйтесь, если после поиска по картинке того самого маленького чёрного платья, вы мгновенно начнёте видеть рекламу похожей одежды.
75 views23:41
П
