Apple의 딥 퓨전 카메라 기술이 iOS 13.2 업데이트를 통해 드디어 공개되었습니다. iPhone 11 또는 iPhone 11 Pro 사용자는 이 혁신적인 이미지 처리 기술을 활용하여 더욱 뛰어난 사진을 얻을 수 있게 되었습니다. 딥 퓨전 카메라의 작동 원리를 자세히 알아보겠습니다.
딥 퓨전이란 무엇인가?
스마트폰 카메라 기술은 나날이 발전하고 있지만, 아직까지는 전문 카메라의 수준에 완전히 도달하지 못했습니다. 그러나 Apple은 매년 iPhone 카메라의 성능을 향상시키기 위해 지속적으로 노력하고 있습니다.
이 새로운 기능은 iPhone 11, iPhone 11 Pro 및 iPhone 11 Pro Max에서 사용 가능합니다. 이 모델들은 Apple의 iOS 13과 함께 출시되었으며, 향상된 센서, 초광각 렌즈, 야간 모드, 슬로 모션 셀카 등 다양한 카메라 기능이 개선되었습니다. 하지만 최신 플래그십 모델에 기본으로 탑재되지 않고, 2019년 10월 28일에 배포된 iOS 13.2 업데이트를 통해 처음으로 선보인 기술이 바로 딥 퓨전 카메라입니다.
Apple의 필 쉴러는 딥 퓨전 카메라 기술을 “컴퓨터 사진의 놀라운 과학”이라고 묘사했습니다. 많은 스마트폰 제조사들이 매우 어두운 환경에서의 야간 모드와 매우 밝은 환경에서의 HDR 기술을 통해 이미지 품질을 향상시키는 데 상당한 진전을 이루었지만, 대부분의 사진은 그 중간 밝기 환경에서 촬영됩니다. 딥 퓨전 카메라는 특히 실내 촬영과 같은 중간 또는 저조도 환경에서 촬영된 사진의 노이즈를 줄이고 디테일을 크게 향상시키는 데 특화되어 있습니다.
이를 입증하기 위해 Apple은 스웨터를 입은 사람들의 사진 샘플을 공개했습니다. 스웨터는 사진에서 디테일이 쉽게 손실되는 의류 중 하나입니다. 딥 퓨전 카메라로 촬영한 스웨터와 기타 항목은 더욱 섬세하고 자연스러운 질감을 유지하는 것을 확인할 수 있습니다.
딥 퓨전 카메라의 작동 원리
Apple에 따르면 딥 퓨전 모드는 iPhone 11의 강력한 A13 Bionic 칩을 활용하여 “사진의 각 픽셀 단위로 처리하여 질감, 디테일, 노이즈를 최적화”합니다. 이는 기본적으로 iPhone 카메라의 스마트 HDR 기능과 유사하게 작동합니다. 다양한 노출 값으로 여러 장의 사진을 촬영한 다음, 이를 결합하여 최종 이미지의 선명도를 극대화하는 방식입니다. 하지만 딥 퓨전은 처리해야 하는 정보량이 훨씬 많다는 차이점이 있습니다.
딥 퓨전이 백그라운드에서 수행하는 작업은 매우 복잡합니다. 중간 밝기 환경에서 사용자가 셔터 버튼을 누르는 순간, 카메라는 즉시 9장의 사진(노출 시간이 짧은 이미지 4장, 중간 이미지 4장, 노출 시간이 긴 이미지 1장)을 촬영합니다. 그런 다음, 노출 시간이 긴 이미지와 짧은 이미지 중에서 가장 좋은 부분을 선택하여 융합합니다. 이후 프로세서는 픽셀 단위로 분석하여 두 이미지에서 가장 뛰어난 요소를 추출, 조합하여 가능한 한 디테일이 풍부한 사진을 만들어냅니다. 이 모든 과정은 1초 이내에 완료됩니다.
사진을 촬영한 직후, 앨범 내에서 이미지 후처리가 시작됩니다. 따라서 카메라 롤에서 사진을 확인할 때쯤이면 딥 퓨전 효과가 이미 적용되어 있는 상태입니다. 이는 상용 스마트폰에 탑재된 가장 강력한 프로세서 중 하나인 A13 Bionic 칩 덕분에 가능한 일입니다.
iPhone에서 딥 퓨전 기능을 사용하는 방법
딥 퓨전 기능을 사용하려면 iPhone 11, iPhone 11 Pro 또는 iPhone 11 Pro Max 모델이 필요합니다. 향후 출시될 iPhone 모델에서도 이 기능을 사용할 수 있을 가능성이 높지만, 이전 모델의 하드웨어는 딥 퓨전 기능을 지원하지 않습니다.
또한 iPhone에 iOS 13.2 이상 버전이 설치되어 있어야 합니다. 이전 버전의 iOS를 사용 중인 경우 딥 퓨전 기능을 사용할 수 없습니다. 휴대폰을 업데이트하려면 설정 > 일반 > 소프트웨어 업데이트 메뉴로 이동하면 됩니다. Wi-Fi 연결이 필요합니다.
휴대폰이 최신 버전으로 업데이트되면 설정 > 카메라 메뉴에서 “프레임 밖에서 사진 캡처” 기능을 비활성화해야 합니다. 이 기능은 편리하지만 딥 퓨전 모드와는 호환되지 않습니다.
딥 퓨전 카메라 사용법
Apple이 올해 공개한 또 다른 기능 중 하나는 여러 장의 사진을 결합하여 밝은 이미지를 만드는 야간 모드입니다. 이 기능은 카메라 소프트웨어 내 토글을 통해 수동으로 활성화하거나 매우 어두운 환경에서 자동으로 활성화됩니다.
하지만 야간 모드와는 달리, 딥 퓨전 모드는 사용자가 수동으로 활성화할 수 없습니다. 또한 활성화되었다는 별도의 표시도 나타나지 않습니다. Apple의 인공지능(AI)은 이미지에 딥 퓨전이 가장 적합한 시점을 자동으로 감지하여 사용자에게는 보이지 않는 방식으로 사진을 촬영합니다. 이는 사용자가 특정 모드를 선택하는 것에 대한 걱정 없이 일반적인 조명 환경에서 최상의 사진을 찍을 수 있도록 하기 위한 설계입니다.
딥 퓨전 카메라를 사용할 수 없는 몇 가지 조건도 있습니다. 현재는 광각 렌즈와 망원 렌즈만 딥 퓨전 기능을 지원합니다. 초광각 카메라로 촬영한 사진은 조명 조건이 충분한 경우 기본적으로 스마트 HDR 모드로 설정됩니다.
또한, 각 이미지를 처리하는 데 1초 정도의 시간이 소요되므로 버스트 사진 모드에서는 딥 퓨전 기능을 사용할 수 없습니다.
딥 퓨전 기능이 작동하는지 확인하는 방법
대부분의 경우, 딥 퓨전 기능이 실제로 작동하고 있는지 사용자가 직접 인지하기는 어렵습니다. 이론적으로 이 기술은 모바일 사진 분야에서 큰 도약이지만, 실제로 대부분의 사람들은 그 차이점을 쉽게 알아차리지 못할 수 있습니다. 특히, 두 사진을 나란히 놓고 비교하지 않으면 더욱 그렇습니다.
딥 퓨전 기능은 텍스처가 풍부한 물체에서 그 효과가 두드러지게 나타납니다. 머리카락, 섬세한 직물, 질감이 있는 벽, 동물 털, 일부 음식 항목과 같은 것들을 확대하여 보면 더욱 자세하게 표현되는 것을 확인할 수 있습니다. 다가오는 연말에는 스웨터를 입은 사람들의 매우 디테일한 이미지를 많이 볼 수 있을 것으로 기대됩니다.
다른 스마트폰에서도 딥 퓨전을 사용할 수 있을까?
딥 퓨전 기능은 iPhone 11, 11 Pro, 11 Pro Max 모델에서만 사용할 수 있습니다. iPhone X 및 XS와 같은 이전 모델에는 최신 카메라 처리 기능을 지원하는 A13 Bionic 칩이 탑재되어 있지 않습니다. 향후 소프트웨어 업데이트를 통해 딥 퓨전 기능을 추가하는 것은 불가능합니다.
만약 iPhone 사용자가 아니라면, 당연히 딥 퓨전 기능을 사용할 수 없습니다. 하지만 Google Pixel 시리즈와 같은 다른 스마트폰 제조업체들은 아마도 Apple의 새로운 기술을 경쟁 대상으로 여기고, 이에 대항하기 위해 새로운 이미지 처리 기술을 개발할 것입니다.