Как обычно, в центре внимания смартфонов Google Pixel 3 и Pixel 3 XL оказалась камера. Рик Остерлох даже заявил при презентации устройств, что компания «создала лучшую камеру и поместила ее в самый полезный телефон». Спустя несколько дней после мероприятия мы продолжаем собирать информацию о камере. Вот еще несколько деталей о камере Pixel 3, которые вы могли не знать.
Pixel Visual Core получает новую нагрузку
В Google Pixel 2 и Pixel 2 XL компания представила свой первый пользовательский чипсет — Pixel Visual Core. Задача этого чипсета заключалась в улучшении качества фотографий на телефоне, но в основном он использовался для предоставления сторонним приложениям доступа к функции HDR+ от Google.
Однако в камере Pixel 3 Pixel Visual Core стал гораздо важнее. Google сообщил нам, что это не новый чипсет, но, по данным WIRED, в этот раз нагрузка на него значительно возросла. По-видимому, Pixel Visual Core используется в камере Pixel 3 для улучшения некоторых новых функций, включая Top Shot и Photobooth.
В этом году Visual Core был обновлен, и он обрабатывает больше задач, связанных с камерой. Top Shot — одна из таких функций. Она записывает Motion Photo, а затем автоматически выбирает лучшее статичное изображение из серии. Она ищет кадры с открытыми глазами и широкими улыбками, отклоняя снимки с развевающимися волосами или размытыми лицами из-за слишком сильного движения.
Как работают Night Sight и Super Res Zoom
В той же статье WIRED раскрываются некоторые детали других примечательных режимов камеры Google — Night Sight и Super Res Zoom.
Сначала о первом: Night Sight предназначен для радикального улучшения съемки при слабом освещении. Как отметил Google, эта функция появится не сразу с телефоном, но теперь у нас есть некоторые детали о ее работе. По-видимому, Google использует более длительную выдержку и множество отдельных фотографий для создания ночной фотографии, которая показывает детали без необходимости использования вспышки.
Если вы пытаетесь сделать снимок в темноте — настолько темной, что фотографии на вашем смартфоне обычно выглядели бы отвратительно, как описал мне один менеджер продукта Google — камера Pixel 3 предложит вам функцию под названием Night Sight. Она не будет доступна с момента выпуска телефона, но ожидается, что появится позже в этом году. Night Sight требует твердой руки, поскольку использует более длительную выдержку, но она объединяет множество фотографий, чтобы создать ночной снимок, который не выглядит, ну, отвратительно. И все это без использования вспышки телефона.
Кроме того, Super Res Zoom на самом деле требует большего, чем просто программное обеспечение. По-видимому, ему нужен объектив, который более резкий, чем сенсор камеры, и он улучшает фотографию, используя машинное обучение для имитации движений руки.
Super Res Zoom, еще одна новая функция Pixel 3, — это не просто программная настройка. Она требует объектива, который немного резче, чем сенсор камеры, чтобы разрешение не ограничивалось сенсором. Но она улучшает разрешение на фотографии, на которую вы сильно увеличили масштаб, используя машинное обучение для компенсации движения руки. (Если смартфон установлен на штативе или устойчивой поверхности, вы можете видеть легкое движение кадра, так как камера имитирует движение вашей руки.)
DPReview также поговорили с Google о Super Res Zoom, раскрыв несколько дополнительных деталей и показав примеры снимков этой функции.
Но Google — и исследовательская команда Пеймана Миланфара, работающая над этой конкретной функцией — не остановились на этом. «Мы получаем красный, зеленый и синий фильтр за каждым пикселем только из-за того, как мы трясем линзу, поэтому дебайеринг больше не нужен», — объясняет Марк. Если у вас достаточно образцов, вы можете ожидать, что любой элемент сцены попадет на красный, зеленый и синий пиксель. После выравнивания у вас будет информация R, G и B для любого данного элемента сцены, что устраняет необходимость дебайеринга. Само по себе это приводит к увеличению разрешения (поскольку вам не нужно интерполировать пространственные данные из соседних пикселей) и снижению шума, поскольку математика, необходимая для дебайеринга, сама по себе является источником шума. Преимущества, по сути, аналогичны тем, которые вы получаете при съемке в режимах сдвига пикселей на специализированных камерах.
Есть небольшая загвоздка — по крайней мере, на данный момент. Super Res активируется только при увеличении 1,2x или более. Не в стандартном режиме «уменьшенный» с эквивалентом 28 мм. Как и ожидалось, чем ниже уровень увеличения, тем больше вы будете впечатлены получаемыми изображениями Super Res, и, естественно, разрешающая способность объектива будет ограничением. Но утверждается, что вы можете получить «цифровое увеличение, примерно сопоставимое с 2-кратным оптическим зумом», по словам Айзека Рейнольдса, и все это происходит прямо на телефоне.
В камере Pixel 3 есть «датчик мерцания»
Вы когда-нибудь снимали фото в помещении и видели странные полосы на кадре? Это может быть вызвано определенными типами освещения, но, по-видимому, для камеры Pixel 3 это не будет проблемой. WIRED объясняет, что обновленный сенсор в Pixel 3 разработан для предотвращения эффекта мерцания на фотографиях и видео.
12,2-мегапиксельная задняя камера была улучшена, а сенсор камеры — «сенсор нового поколения», хотя Рейнольдс признал, что он «имеет много таких же функций». В Pixel 3 также есть датчик мерцания, который предназначен для смягчения эффекта мерцания, возникающего при съемке фото или видео при определенном комнатном освещении.
Google считает вторую заднюю камеру «ненужной»
Одна из вещей, которая до сих пор удивляет многих, — это отсутствие второй камеры в Pixel 3. В то время как большинство флагманов теперь имеют как минимум две камеры сзади, Pixel по-прежнему имеет одну… сзади, по крайней мере.
Представители Google заявляют, что считают второй сенсор «ненужным» благодаря программным улучшениям, включенным в устройство. Результаты говорят сами за себя, но было бы неплохо получить на задней панели такой же широкоугольный объектив, как и на передней, не так ли? Возможно, в следующем году.
Кроме того, Google Pixel 3 по-прежнему имеет одну заднюю камеру, в то время как все его высококлассные конкуренты в сфере смартфонов используют двойное или даже тройное количество объективов. Google утверждает, что им не нужен еще один объектив — «мы сочли его ненужным», — говорит Кейроз, — благодаря опыту компании в области технологий машинного обучения. Телефоны Pixel уже извлекают достаточно информации о глубине из двухпиксельного сенсора камеры, а затем запускают алгоритмы машинного обучения, обученные на более чем миллионе фотографий, для создания желаемого фотоэффекта.
Если вы еще не видели, посмотрите этот демонстрационный ролик
Возможности видеосъемки камер Pixel от Google никогда не были их сильной стороной, но похоже, что в этом году ситуация может немного улучшиться. Google сотрудничал с режиссером Теренсом Маликом для создания короткого демонстрационного ролика, и, надо сказать, это просто потрясающе.
Функция Google «Motion Focus» играет огромную роль в создании этого короткометражного фильма.
https://youtu.be/lNg3Cb76G6M
Подробнее о Google Pixel 3:
- Камера Pixel 3 получила функции Top Shot и Night Sight на базе ИИ, Google Lens
- Подробности о Google Pixel 3: значительно улучшенные дисплеи, образцы «Night Sight», история «Now Playing» и другое
- Первый взгляд: Google Pixel 3 и 3 XL — именно то, что мы ожидали [Видео]
- Первые впечатления от Google Pixel 3 и Pixel 3 XL: изначально восхитительны так, как Pixel 2 не был