Ранее в этом году Google потерял «ведущего инженера», отвечавшего за исследования, которые легли в основу технологий обработки изображений Pixel. Марк Левуа теперь работает в Adobe и дал очень интересное интервью изданию The Verge о своей карьере и о том, что ждет фотографию в будущем.
Одночасовой подкаст определенно стоит прослушать полностью, но Левуа высказал несколько особенно интересных моментов и поделился своим мнением о Pixel.
По слухам, Pixel 5 будет использовать тот же сенсор изображения Sony IMX363 для основной камеры, что и Pixel 3, 4 и 4a. Когда Нилай Патель из The Verge задал ему вопрос, Левуа дал общее обоснование этой практики:
Индустрия мобильных сенсоров достаточно зрелая. Она развивается, но прирост улучшений со временем уменьшается. Один из переменных факторов, представляющих особый интерес, — это шум считывания. По мере снижения шума считывания можно делать снимки при всё более низком освещении. И вот, если Sony или кто-то другой выпустит сенсор с более низким шумом считывания, многие им воспользуются…
Улучшения в сенсорах происходят, но я не уверен, что они являются поворотными. Они инкрементальны.
Что касается причин ухода Левуа из Google, он назвал «интеллектуальное беспокойство», что соответствует траектории его долгой карьеры в различных областях.
Я думаю, пришло время объявить победу и двигаться дальше. Наблюдалось снижение отдачи от этих базовых вещей, таких как высокодинамичная съемка и съемка при слабом освещении, и пришло время искать новый рубеж.
Что касается того, что будет дальше, он ссылается на научные статьи, в которых рассматриваются методы удаления отражений от окон, резких теней, а также переосвещение и удаление других отвлекающих объектов. Google Фото заметно пытался сделать последнее с помощью удаления препятствий, но его работа еще не принесла результатов.
Он считает, что эти возможности будут действительно полезны, приведя факт о Ларри Пейдже:
Я думаю, что еще многое предстоит сделать. И я считаю, что это выходит за рамки базовых вещей, но это функции, которые проходят то, что Ларри Пейдж в Google называл «тестом на зубную щетку». Вы используете их дважды в день, и это улучшает вашу жизнь. Другими словами, это функция, которую люди действительно хотят или в которой нуждаются.
На вопрос о пользе добавления производителями смартфонов большего количества объективов и сенсоров Левуа ответил:
Потенциально да, потенциально нет. Pixel 4 в прошлом году действительно добавил телеобъектив, и это помогло. Google выпустил телеобъектив в сочетании с технологией Super Res Zoom, разработанной моей командой, и они отлично работали вместе. Так что, безусловно, есть что сказать о большем количестве аппаратного обеспечения.
Сенсор глубины может помочь в различных задачах. Я думаю, аппаратное обеспечение важно, но я думаю, что то, что я показал за последние 10 лет, — это важность программного обеспечения. Так что, я думаю, эти два элемента работают вместе.
Что касается видео, он дал общий ответ о связанных с этим трудностях:
Видео — это совсем другая игра. Вычислительная фотография, которую мы делали в Google для Pixel, в основном касалась фотосъемки. В Google были другие команды, которые работали над видео, но они могли сделать меньше, потому что им приходилось делать это в реальном времени.
The Verge также спросил, работал ли Левуа над аппаратным обеспечением камеры в Google или имел ли он какое-либо влияние на него:
Я давал им советы. Слушали ли они их, это другой вопрос.