Камера iPhone 11 скоро получит Deep Fusion. В чем ее магия?

iPhone 11 и iPhone 11 Pro (Max) продаются уже вторую неделю, но в них по-прежнему отсутствует одна из самых интересных функций — Deep Fusion. Однако, согласно последним сообщениям, Apple уже подготовила эту функцию и вскоре предложит ее в будущей бета-версии iOS 13, скорее всего, в iOS 13.2.

Deep Fusion — это название новой системы обработки изображений для фотографий iPhone 11 (Pro), которая в полной мере использует возможности процессора A13 Bionic, в частности Neural Engine. С помощью машинного обучения отснятая фотография обрабатывается попиксельно, тем самым оптимизируя текстуры, детали и возможные шумы в каждой части изображения. Таким образом, эта функция будет полезна, особенно при съемке внутри зданий или при среднем освещении. Он активируется полностью автоматически и пользователь не сможет его деактивировать — практически он даже не знает, что Deep Fusion активен в данной ситуации.

Процесс фотосъемки с Deep Fusion ничем не отличается. Пользователь просто нажимает кнопку спуска затвора и некоторое время ждет создания изображения (аналогично Smart HDR). Хотя весь процесс занимает всего около секунды, телефон, а точнее процессор, успевает выполнить ряд сложных операций.

Весь процесс выглядит следующим образом:

1. Еще до того, как вы нажмете кнопку спуска затвора камеры, на заднем плане будут сделаны три снимка с короткой выдержкой.
2. Впоследствии при нажатии кнопки спуска затвора на заднем плане делаются еще три классических фотографии.
3. Сразу после этого телефон делает еще один снимок с длинной выдержкой, чтобы запечатлеть все детали.
4. Трио классических фотографий и фотография с длинной выдержкой объединены в одно изображение, которое Apple называет «синтетическим длинным».
5. Deep Fusion выбирает один снимок наилучшего качества с короткой выдержкой (выбирает из трех, снятых до нажатия кнопки спуска затвора).
6. В дальнейшем выбранный кадр объединяется с созданным «синтетическим длинным» (таким образом объединяются два кадра).
7. Объединение двух изображений происходит в четыре этапа. Изображение создается попиксельно, детали выделяются, а чип А13 получает инструкции, как именно следует объединить две фотографии.

Хотя этот процесс довольно сложен и может показаться трудоемким, в целом он занимает немного больше времени, чем захват изображения с использованием Smart HDR. В результате сразу после нажатия кнопки спуска пользователю сначала показывается классическая фотография, но вскоре она заменяется детальным изображением Deep Fusion.

Примеры фотографий Apple Deep Fusion (и Smart HDR):

Фотогалерея

DeepFusion_example_2-2

Полный размер

DeepFusion_example_1-2

Полный размер

slide_1__fuigw9q9nx2e_large_2x

Smart HDR

Стоит отметить, что преимуществами Deep Fusion в основном будет пользоваться телеобъектив, однако даже при съемке классическим широкоугольным объективом новинка окажется кстати. Напротив, новый сверхширокоугольный объектив вообще не будет поддерживать Deep Fusion (так же, как он не поддерживает ночную съемку) и вместо этого будет использовать Smart HDR.

Таким образом, новый iPhone 11 будет предлагать три разных режима, которые активируются в разных условиях. Если сцена слишком яркая, телефон будет использовать Smart HDR. Deep Fusion активируется при съемке в помещении и в условиях умеренно низкой освещенности. Как только вы фотографируете вечером или ночью при слабом освещении, активируется ночной режим.

источник: Грань

Обсуждение статьи

[Иржи Пилар]

Демо-версии выглядят очень забавно по сравнению с классическим режимом. Потому что этого результата можно было добиться и классическим способом, используя внешний источник света.

J.

[Петр]

Слушай, конечно, я обычно беру с собой двоих-троих, особенно на пляж..