Поскольку Pixel 6 и 6 Pro официально выйдут завтра, Google сегодня подробно рассказал о новых функциях, где его кастомный SoC Tensor используется для улучшения и работы камеры.
Google уже рассказывал о некоторых из этих улучшений на мероприятии Pixel Launch Event, но начал с повторного объяснения того, как Live HDR+ Video стал возможен благодаря процессору обработки изображений (ISP) Tensor, который напрямую включает ускоритель, работающий по алгоритму HDRNet. Он работает в режиме 4K60 и во всех других видеорежимах, а также в «популярных социальных и чат-приложениях». Тем временем Tensor обеспечивает тональное отображение и стабилизацию в реальном времени.
Конечно, Night Sight использует сенсор задней камеры, который пропускает на 2,5 раза больше света, но также получает преимущества от новой системы автофокусировки с лазерным определением (LDAF) и ISP Tensor. В частности, есть «новые алгоритмы определения движения для захвата более коротких экспозиций, которые не так размыты».
Говоря об улучшениях объектива/сенсора, 4-кратный телеобъектив 6 Pro использует «обновленную версию» Super Res Zoom с HDR+ Bracketing, что обеспечивает 20-кратное цифровое зумирование.
Real Tone, для которого Google показывает рекламу, является результатом того, что Tensor обеспечивает «продвинутую модель распознавания лиц на основе машинного обучения, которая более точно автоматически экспонирует фотографии людей с темным цветом кожи». Также существует обновленный алгоритм автоматического баланса белого для «обнаружения и коррекции неточных оттенков кожи». Аналогично, Frequent Faces «научится лучше автоматически балансировать цвета кожи людей, которых вы фотографируете чаще всего».
Tensor управляет функцией Face Unblur, определяя, когда кто-то быстро движется, чтобы запустить как основную камеру (для яркого, но размытого изображения), так и сверхширокоугольную (темную, но более резкую). Затем машинное обучение объединяет их, чтобы создать резкое лицо и хорошо экспонированную фотографию.
Сверхширокоугольная фронтальная камера Pixel 6 Pro может использоваться в режиме улучшения речи, где TPU Tensor «одновременно обрабатывает аудио- и визуальные сигналы для выделения речи» и снижает фоновый шум до 80%. Google нацеливает эту функцию на блогеров.
В режимах Motion Modes «Action Pan» (слева) и «Long Exposure» (справа) Tensor «выполняет расчеты векторов движения, интерполяцию кадров, сегментацию объектов, подавление дрожания рук и рендеринг размытия».
Помимо захвата, Magic Eraser использует «новейшие алгоритмы для определения уверенности, сегментации и дорисовки». Модели машинного обучения на устройстве позволяют этой функции работать без подключения к интернету, или, практически говоря, на «фотографиях, которые еще не были синхронизированы».
Больше о Pixel 6:
- Google Tensor показывает потрясающие результаты в тесте скорости Pixel 6 Pro, всего на несколько секунд отставая от iPhone 13 Pro [Видео]
- Google Pixel 6 Pro отлично подходит в качестве камеры дрона [Видео]
- Сравнение кадров: телеобъектив Pixel 6 Pro дополняет возможности, но достаточно ли 4x?
- Обзор Pixel 6 Pro: флагман, который Google нужен прямо сейчас, — это тот, которого заслуживают покупатели