白天也能懂夜的黑,這款 AI 讓你隨心所欲改光源

40

轉載從: Tech News 科技新報

白天也能懂夜的黑,這款 AI 讓你隨心所欲改光源

好的攝影師最懂得找好的光,而工程師則設法讓人工智慧幫忙,讓照片永遠都有最好的光。這款新 AI,能在修圖時,直接幫照片重新「調光」,而且成果讓人驚豔。

攝影圈的專有名詞「黃金時刻」,指的是一天中的清晨和黃昏,這兩個時刻陽光足夠卻不刺眼,想要拍出好照片,絕不能錯過這兩個「黃金時刻」。然而,來自聖地牙哥大學和 Google 團隊的工程師,將可能改變這個準則。這些懶得早起的工程師,運用人工智慧的輔助,設計出一套新演算法,能在拍照之後自由調整光源,直接顛覆攝影原理。

透過這個系統,使用者可在事後,調整色溫、亮度和光線角度。團隊領導人孫天成表示,這套系統能用事後提供的環境光源設定,替照片重新打光,效果也是目前類似工具中最逼真的。

白天也能懂夜的黑,這款 AI 讓你隨心所欲改光源

▲ 最左邊是原始照片,右邊 3 張是調光後的成果。(Source:arxiv.org

這套系統的關鍵技術是神經網路建構,原理是提供機器「同一張肖像的不同光源照片」,透過深度學習後,讓機器學會生成不同光源的照片。要做到這點,他們首先架構一個由 304 顆 LED 組成的舞台,搭配一個 7 台相機的攝影系統,全部用程式化控制,在 6 秒鐘之內,拍攝一系列不同光源組成的照片。模特兒只需在 6 秒鐘內保持穩定即可,因此確保每張照片裡,只有光源是唯一變因。為了更貼近現實世界,他們找來 20 多位不同種族、不同性別的模特兒,搭配不同的面部表情,以此為機器學習的訓練資料。

接著他們再丟入幾個公開的臉部照片資料庫,強化這個系統的辨識力,最終他們生成了 226,800 張照片為訓練資料,扎實的訓練資料讓他們在接下來的實測獲得好成果。這個功能和目前拍照軟體常用到的濾鏡、光源調整最大的差異在於,調整的不僅是照片顏色,而是盡可能模擬真實光源的變化,包含角度、亮度和色溫,藉此創造出不同場景的氛圍。在下面影片,可以看到更多測試成果。

值得一提的是,研究團隊成員有一半來自 Google,團隊的負責人目前也是 Google 實習生,這套系統未來有很大機會,率先在強打拍照功能的 Google Pixel 搭載。

然而這套系統也還有一些問題,從實測照片可以發現,用來調光的照片,本身都是在光源充足的情況下拍攝的。研究團隊報告也指出,當輸入照片有大片陰影時,生成的照片便會嚴重失真。然而一般使用者最常面臨的困境,其實常常是光源不足,未來這套系統如果真的在夜拍強者 Pixel 搭載,並獲得廣大 Android 用戶的資料協助訓練,將有機會進一步拉大 Pixel 的夜拍優勢。

(首圖來源:影片截圖)