Режим ИИ Google добавляет мультимодальный поиск Google Lens 

Режим ИИ был запущен в тестовом режиме месяц назад, и теперь Google расширяет доступ для бесплатных пользователей Labs, а также добавляет визуальный поиск Lens.

На момент запуска он был доступен только для подписчиков Google One AI Premium. Как мы ранее замечали, Google сегодня подтвердил, что он «будет доступен миллионам пользователей Labs в США», которые не платят.

Тем временем, Режим ИИ добавляет мультимодальный ввод и понимание, позволяющее делать новые фотографии с помощью Google Lens или загружать существующие изображения. Это дает возможность «легко задавать сложные вопросы о том, что вы видите».

За кулисами Google использует мультимодальные возможности Gemini для «понимания всей сцены на изображении, включая контекст взаимосвязи объектов, их уникальные материалы, цвета, формы и расположение».

Реклама — прокрутите вниз для получения дополнительного контента

Lens точно идентифицирует каждый объект на изображении. Используя нашу технику развертывания запросов, Режим ИИ затем отправляет несколько запросов об изображении в целом и объектах на изображении, получая больший охват и глубину информации, чем традиционный поиск в Google. В результате получается чрезвычайно тонкий и контекстуально релевантный ответ, который помогает вам сделать следующий шаг.

На приведенном выше примере Режим ИИ «точно определяет каждую книгу на полке и отправляет запросы, чтобы узнать о книгах и получить похожие рекомендации с высоким рейтингом». Конечным результатом является «список рекомендуемых книг со ссылками для более подробного ознакомления и покупки», при этом вы можете задавать последующие вопросы.

Начиная с сегодняшнего дня, Google Lens в Режиме ИИ доступен на Android и iOS. Перейдите на главную страницу Режима ИИ, где вы найдете новый значок Lens в нижнем поле поиска. Это приведет вас к обычному интерфейсу Google Lens. Когда пользователи нажимают и удерживают кнопку спуска затвора, они могут произнести свой запрос.

Сегодня Google также поделился некоторыми шаблонами использования после месяца публичного тестирования. Люди говорят, что им нравится «чистый дизайн, быстрая реакция и возможность понимать сложные и нюансированные вопросы». Запросы в Режиме ИИ, как утверждается, «вдвое длиннее традиционных поисковых запросов в Google» (в среднем). Он используется для исследовательских, открытых вопросов и «более сложных задач — таких как сравнение двух продуктов, изучение инструкций и планирование поездки».