Теги → визуальный поиск

Shutterstock тестирует поиск на основе расположения объектов на изображении

Многие компании используют возможности машинного обучения для того, чтобы помечать и искать визуальный контент. Например, Pinterest и Google позволяют находить похожие картинки. Shutterstock использует технологию несколько иначе: сервис фотостоков определяет схемы размещения предметов на изображении.

Новый инструмент доступен на тестовом сайте компании, который называется Shutterstock Labs. Вы можете добавить в строку поиска несколько предметов, а затем перетаскивать соответствующие им иконки, чтобы уточнять расположение объектов. Также можно указать место, где на картинке не должно быть ничего — например, чтобы добавить туда текст.

Судя по бета-версии инструмента, нововведение реализовано просто и работает быстро. Тем не менее, оно не всегда полезно. Вы можете указать расположение вина и сыра на столе, но у вас нет возможности работать с более сложными композициями — в том числе в трёхмерном пространстве. К тому же, иногда еле заметное смещение одной из иконок довольно сильно меняет все результаты.

Shutterstock отметила, что не собиралась тренировать алгоритм таким образом, чтобы он мог определять расположение предметов в пространстве — система должна была уметь только различать объекты. Информация о размещении вещей была получена в ходе анализа и позже идентифицирована как полезная категория.

На eBay можно будет искать похожие товары по собственным фотографиям

В приложениях торговой площадки eBay появится два новых инструмента, использующих технологии распознавания изображений. Image Search позволит использовать фотографию кроссовок или сумки для поиска похожих товаров. Благодаря функции Find It On eBay можно будет выбрать на любом сайте картинку и отправить её в сервис. Так вы получите список похожих по внешнему виду предметов.

Обе функции задействуют возможности машинного обучения. Они ищут по 1,1 миллиарда активных лотов на сайте, а также по закрытым продажам.

«Мы хотим, чтобы по картинке можно было купить что угодно в Интернете», — заявил Мохан Пэтт (Mohan Patt), вице-президент eBay по покупательскому опыту.

Во время демонстрации Пэтт сфотографировал высокие чёрные сапоги, отправил их в eBay и тут же получил более 500 предложений примерно таких же сапог. Инструменты можно будет использовать во всех категориях, но модели искусственного интеллекта в первую очередь нацелены на вещи вроде одежды и мебели.

Оба нововведения демонстрируют, что компания подобралась на шаг ближе к концепции, предложенной ранее в этом году генеральным директором Девином Уэнигом (Devin Wenig). Согласно ней, люди смогут фотографировать предметы, которые хотят продать, а программа будет автоматически заполнять всю информацию — название, описание и даже стоимость.

Функция Image Search станет доступна на Android и iOS осенью. В случае с Find It On eBay обладателям устройств от Apple придётся подождать. Пока инструментами смогут пользоваться только жители США.

Визуальный поиск Pinterest заработал в браузерных расширениях сервиса

Сервис Pinterest, позволяющий сохранять изображения и другой контент на своеобразных виртуальных досках, объявил о намерении оснастить технологией визуального поиска свои браузерные расширения. Первое в планах компании — расширение для Chrome.

«Как и в Pinterest, вы можете использовать визуальный поиск для идентификации определённых объектов, продуктов, узоров и цветов на изображении и получать доступ к похожим предметам и идеям в режиме реального времени, — написал главный инженер компании Кент Брюстер (Kent Brewster). — Вы также можете осуществлять поиск, используя всю видимую веб-страницу — просто щёлкните правой кнопкой мыши по фоновой части страницы и выберите поиск».

Pinterest в последние годы активно работала с визуальным поиском. Недавно компания добавила в свой сервис функцию Lens, позволяющую захватывать контент с помощью камер устройств на базе iOS и Android и искать пины с внешне похожим контентом.

Впервые визуальный поиск появился в Pinterest в 2015 году. При просмотре изображения пользователь может нажать на кнопку с увеличительным стеклом и выделить прямоугольником то, что его интересует на картинке. После этого сервис покажет пины, похожие на то, что выделил пользователь. Более того, распознанные предметы отмечаются белыми точками.

Как и в приложении сервиса, при осуществлении визуального поиска на сайтах, отличных от Pinterest, можно выбирать объекты и категории, щёлкая по вкладкам разного цвета. Идентификация объектов в реальном времени — те самые белые точки на предметах — будет добавлена в браузерные расширения Pinterest позже.

Pinterest представила Lens — аналог Shazam для реальных объектов

Pinterest представила Lens — новый инструмент визуального поиска, использующий машинное зрение для обнаружения объектов в реальном мире и предлагающий пользователю просмотреть похожие предметы в сервисе. Функция, находящаяся на данный момент в стадии бета-тестирования и представленная в мобильном приложении Pinterest, является своего рода Shazam для поиска объектов. Достаточно направить камеру на еду, мебель или даже ночное небо, чтобы сервис показал похожие предметы.

Во время демонстрации сооснователь Pinterest Эван Шарп (Evan Sharp) использовал Lens для обнаружения граната. Так ему удалось найти в сервисе гранатовый хлеб, гранатовые сэндвичи и советы по чистке гранатов. Также он показал, как мальчик направляет телефон в ночное небо, после чего сервис находит целый ряд ночных пейзажей. «Это позволяет вашим глазам осуществлять поиск», — заявил Шарп.

По словам компании, появление Lens привело к созданию новой категории результатов поиска, показывающей объекты в каком-либо контексте. Например, направив камеру на настенные часы, пользователь может найти фотографии комнат, в которых часы являются частью декора. Аналогично функция работает с одеждой — при захвате свитера Pinterest представит изображения свитеров в различных стилях.

Lens базируется на технологии визуального поиска, которую компания представила ещё в ноябре 2015 года. Pinterest постоянно улучшает технологию: так, связанные пины теперь можно находить, нажимая на кружок в правом нижнем углу каждой публикации. Также была добавлена возможность определять предметы на изображениях и сразу их покупать.

Функция Lens доступна в приложениях Pinterest для iOS и Android — пока, правда, только в США.

window-new
Soft
Hard
Тренды 🔥
У Alibaba похитили огромный массив пользовательских данных, но никто не пострадал 3 мин.
Создатель The Last Night напомнил об игре и анонсировал версии для новых консолей 11 мин.
Honor официально подтвердила возвращение сервисов Google на свои устройства с 25 июня — тогда будет представлен Honor 50 17 мин.
Rockstar отключит сервера GTA Online, L.A. Noire и Max Payne 3 для PS3 и Xbox 360 до конца года 41 мин.
Первое упоминание новой Metroid Dread нашли в номере Game Informer 16-летней давности 2 ч.
Спустя десять лет 2D-слешер BloodRayne Betrayal получит ремастер с новым уровнем сложности 3 ч.
Playground Games объяснила, почему выбрала Мексику для Forza Horizon 5 3 ч.
Подробности Battlefield 2042: боты в матчах вместо недостающих игроков, интерактивные объекты и монетизация 4 ч.
Разработчикам хоррора Abandoned пришлось открещиваться от связи не только с Кодзимой, но ещё и Silent Hill 4 ч.
«Думаю, будет более крепкая лексика»: разработчики подтвердили, что в S.T.A.L.K.E.R. 2: Heart of Chernobyl будут маты 4 ч.