iPhone 11發表時，曾特別提到一個名為「Deep Fusion」的拍照演算過程，透過A13仿生晶片的神經網路引擎，結合機器學習，逐一處理畫面中的每個像素，優化細節及噪點，生成一張最佳成相。解釋裡囊括了目前計算攝影裡常見的幾項要素：神經網路、機器學習、合成演算、優化細節，聽起來很厲害，這功能蘋果預計秋季會透過軟體更新到iPhone 11上（應該就是10月份了）。
不過上週蘋果就先將Deep Fusion這個iPhone 11系列專屬的攝影演算法，推送給iOS13.2的開發版及公測版用戶，因此我們有機會可以在正式發佈前先測試看看這個蘋果口中「瘋狂的攝影算法」功力有多強大。
哪時啟動?
根據TheVerge(應該是引述於蘋果)的解說，Deep Fusion會根據你用哪顆鏡頭，以及拍攝時的光線自行啟動，條件是：使用廣角（1X）或望遠（2X）鏡頭，在中等亮度下拍攝時會啟用，若用超廣角拍攝則不會套用Deep Fusion，且因為需要A13的演算能力，因此這目前是iPhone 11系列專屬的功能。
至於中等亮度的範圍，有看到報導說是10～600Lux之間，但我一直沒找到官方文件來確認，不過大致是介於啟用夜間模式以上，到室內的亮度。
也是根據TheVerge的報導，不同鏡頭、環境亮度各自搭配哪些演算法，大致是：
廣角（1X）：
● 明亮時使用SmartHDR
●中等亮度～低光使用Deep Fusion
●低光使用夜間模式
望遠（2X）：
●非常明亮時會使用SmartHDR
●大部分光線下使用Deep Fusion
●低光時使用1X及夜間模式鏡在拍
超廣角（0.5X）：
●都是使用SmartHDR，不會套用Deep Fusion或是夜間模式
這是我們為了要比較有無Deep Fusion的差別，而且拍攝時畫面上並不會顯示目前有沒有啟動Deep Fusion中，所以才要瞭解什麼樣的環境下會/ 不會啟動。
但對一般使用者來說，蘋果認為拍就對了，因為不管什麼組合，背後都有一個目前能做到的最佳演算法來提供成像，使用者不用去擔心環境亮度跟手持的問題，只要找舒服的光源、想拍的主題跟構圖就好了。
怎麼運作?
Deep Fusion也是透過多幀合成來優化照片，但更細緻的部份是，在按下快門前它會持續捕捉(或說保留)四張短曝光，以及四張標準曝光的畫面，按下快門時，則會捕捉一張長曝光的畫面。取短曝光畫面的銳利度，以及長曝光畫面的暗部清晰度，加上標準曝光的畫面，進行合成，並逐一處理個別像素，增加細節或是調節曝光，比方天空降低一點曝光，髮絲、皮膚、質料...等則取長曝光提高清晰度。與一般HDR分別調整亮暗部不同，Deep Fusion還會調整個別畫素。
而這一切在拍的時候都不會察覺，就跟一般拍照過程無異，也不會有轉圈圈時間，只有在拍完照，馬上點開看照片時，才會發現一個很短暫的清晰化時間。
試拍對照
我這裡以已經更新到iOS13.2，有Deep Fusion的iPhone 11，以及仍在iOS13.1，沒有Deep Fusion的iPhone 11 Pro Max來對照，但是我想讓大家盲測一下，點開可看大圖，把眼鏡擦乾淨吧
▼第一組
▼第二組
▼第三組
因為拍照當下並不知道環境亮度是多少，所以其實不太清楚iPhone 11到底有沒有啟動Deep Fusion，上面的盲測，我比較有把握，應該有啟動的，只有第二組，第一的戶外白天，跟第三的夜間，我其實不太確定有沒有Deep Fusion…所以猜錯或看不出來，並不是你眼力差
所以這是耍人的盲測嗎...不是，只要想交代，在我看了一輪照片後，也發現Deep Fusion的確在室內光線下發揮得最好。點開都可看原圖。
【室內，中等亮度】
人物這組非常明顯，放大來看看。分享前必須美顏...
▼這在180~200Lux間的亮度拍的，白天以窗戶餘光照明的室內。
▼這組接近5點半傍晚了。
▼這組天色更黑但還沒全黑，屋簷下有照明的環境。
【戶外明亮】
說是明亮，其實當時有微微的多雲。
【夜間低光】
拍這些時都有啟動夜間模式。
這樣看下來，在室內拍人物、傍晚、餐廳室內這樣的亮度下，差異尤其明顯。夜間低光照也有差別，但因為低光拍攝時都有啟動夜間模式，我不太確定是否跟Deep Fusion有關，還是單純iOS13.2又優化了夜間模式....（照理說啟用夜間模式後就不會套用Deep Fusion說...）
搞不清楚到底有沒有套用，這個我們來煩惱就好，對一般iPhone 11們的使用者來說，更新到iOS13.2後，室內拍照的細節就會更好，這是確定的。
可能有同學覺得動不動就用演算法，都不紀實了...但其實，iPhone 11的成像，即使套用了Deep Fusion這種每個像素都在算的演算法，還是蠻接近真實的，我並不覺得演算法跟真實是互斥的啦...
結尾離題了，總之iPhone 11系列的用戶們，可以開心期待iOS13.2的到來啦～
留言列表
