Google AI Mode и Lens работают над собственным разговорным режимом камеры «Live» 

В прошлом месяце AI Mode получил интеграцию с Google Lens (как показано выше) для обеспечения мультимодального поиска. В настоящее время Google работает над «Live для AI Mode». 

Об APK Insight: В этой статье «APK Insight» мы декомпилировали последнюю версию приложения, загруженную Google в Play Store. Когда мы декомпилируем эти файлы (называемые APK для приложений Android), мы можем увидеть различные строки кода, которые намекают на возможные будущие функции. Имейте в виду, что Google может выпустить эти функции, а может и не выпустить, и наша интерпретация того, что они собой представляют, может быть несовершенной. Мы постараемся включить те, которые ближе к завершению, чтобы показать вам, как они будут выглядеть, если будут выпущены. Имея это в виду, читайте дальше.


По сути, похоже, что Google Поиск получает эквивалентную возможность Gemini Live-Project Astra. Однако разница, похоже, заключается в акценте на поиске, а не на предоставлении личной помощи.

Строки в последней бета-версии приложения Google (версия 16.17) объясняют, как: «С помощью Live вы можете вести голосовой разговор в реальном времени с AI Mode, чтобы найти именно то, что вы ищете. Нажмите кнопку отключения звука, чтобы отключить микрофон, нажмите «Закрыть», чтобы выйти.

Реклама — прокрутите, чтобы увидеть больше контента

Из обычного дисклеймера мы получаем официальное название: «Live для AI Mode является экспериментальным и может допускать ошибки».

Live требует AI Mode

Примечательно, что Google встраивает эту функцию Live в Google Lens:

  • Начните говорить, чтобы искать
  • Чтобы начать поиск и услышать результаты, увеличьте громкость на устройстве
  • Нажмите, чтобы прервать воспроизведение ответа.
  • «Невозможно задать последующий вопрос. Ваш следующий вопрос начнет новый поиск»

Как и в Gemini Live, есть напоминание увеличить громкость и возможность прерывать ответы. Также будет уведомление управления, пока это активно:

  • Live
  • Завершить сеанс
  • Отключить микрофон

Вы также сможете делиться своим экраном в дополнение к камере:

  • Скрінкаст
  • Видео

Обращает на себя внимание возможность включить «Транскрипцию» для чтения ваших разговоров, причем Google показывает «ссылки для изучения веб-сайта во время чата».

  • Нажмите на ссылки, чтобы изучить веб-сайт во время чата
  • Нажмите «отключить звук», чтобы возобновить общение
  • Говорите или нажмите на волну, чтобы прервать
  • Нажмите «транскрипция», чтобы прочитать ваши разговоры
  • Отключить видео
  • Включить видео

Спасибо JEB Decompiler, который помогает в некоторых разборах APK Insight.