
На конференции I/O в мае Google анонсировала Multitask Unified Model (MUM) как большое улучшение поиска. MUM будет интегрирован в Google Lens «в начале следующего года».
После съемки в Lens или анализа существующего изображения/скриншота, свайп вверх продолжит отображать «Визуальные совпадения». В верхней части панели скоро появится новая кнопка «Добавить вопросы», открывающая очень удобный интерфейс. Эти «Похожие запросы» или любой введенный запрос позволяют уточнить поиск.
Сегодня на мероприятии Search On 2021 Google продемонстрировала два примера. Оба предназначены для комбинирования визуального и текстового ввода.
Самый впечатляющий пример — фотография сломанной детали велосипеда с вопросом: «Как это починить». Google правильно определит, что именно нужно исправить и как это сделать, используя видео, результаты форумов и другие справочные статьи в Интернете.
Объединяя изображения и текст в один запрос, мы упрощаем визуальный поиск и позволяем задавать вопросы более естественным образом.

Другой пример включает в себя съемку изображения стиля — например, на рубашке — и поиск других предметов одежды («носки с таким узором»), которые имеют такой же дизайн.
MUM в Google Lens будет доступен в ближайшие месяцы. Компания активно тестирует и проводит «строгое тестирование и оценку» модели ИИ перед запуском.
Другие анонсы Search On 2021 сегодня включают:
- Google Lens появится в Chrome и будет интегрирован в браузер приложения Google на iOS
- Карты добавляют «Пожар» как основной слой, предоставляя инструмент «Кроны деревьев» для 100 городов
- Поиск запускает редизайн с большим количеством изображений, предложений и разделом «Что нужно знать»
- Новое приложение Google «Address Maker» позволит сообществам быстро создавать функциональные адреса
- Панель «Об этом результате» объяснит, почему каждая ссылка появилась в вашем поиске


Подробнее о Google Lens:
- Lens получил элементы Material You, виджет поиска и ярлык Pixel Launcher [U]
- Первая реклама Google в TikTok активно продвигает Google Lens [Видео]
- Google Lens появится в настольном Chrome в качестве нового интегрированного инструмента поиска изображений
- Редизайн «приложения» Lens делает акцент на анализе скриншотов, а не на живом видоискателе