«Мультипоиск» в Google Lens позволяет задавать вопросы о фотографиях и теперь доступен в бета-версии на Android и iOS

Одним из самых интересных анонсов на сентябрьской презентации Google, посвященной Поиску, стало крупное обновление Lens, которое позволяет сделать фото и задать о нём вопросы. «Мультипоиск» в Google Lens теперь доступен для бета-тестирования на Android и iOS.

Мультипоиск — это «совершенно новый способ поиска» от Google, который призван помочь в ситуациях, когда у вас «не хватает слов, чтобы описать то, что вы ищете». Всё начинается со снимка (или импорта существующего изображения) в Google Lens, после чего нужно смахнуть вверх панель результатов и нажать новую кнопку «Дополнить поиск» вверху.

Это позволит вам задать «вопрос об объекте перед вами» или уточнить поиск по цвету, бренду или визуальному признаку». Примеры:

  • Сделайте скриншот стильного оранжевого платья и добавьте запрос «зеленый», чтобы найти его в другом цвете.
  • Сфотографируйте свой обеденный гарнитур и добавьте запрос «журнальный столик», чтобы найти подходящий стол.  
  • Сфотографируйте розмарин и добавьте запрос «инструкции по уходу».

Сегодня особо выделяются сценарии использования, связанные с модой и домашним декором, при этом Google отмечает, что в настоящее время «наилучшие результаты достигаются при поиске товаров». Тем не менее, последний пример означает, что вам не нужно сначала использовать Lens для определения растения, а затем, после его идентификации, выполнять отдельный текстовый поиск по запросу «инструкции по уходу».

В Google заявляют, что мультипоиск в Lens стал возможен благодаря «последним достижениям в области искусственного интеллекта». Тем не менее, он пока не использует модель Multitask Unified Model (MUM) и не может обрабатывать сложные запросы. Например, именно MUM отвечала за демонстрацию, в которой можно было сфотографировать сломанные детали велосипеда и получить инструкции по ремонту.

На сегодняшний день мультипоиск в Google Lens официально является бета-версией, доступной на английском языке в США. Доступ к нему можно получить через приложение Google на Android и iOS.

Другие материалы о Google Lens: