MIT 開發出 AI 圖片編輯器,能將圖片中人物背景自動分層

作者 | 發布日期 2018 年 08 月 23 日 17:38 | 分類 AI 人工智慧 , 尖端科技 follow us in feedly

麻省理工(MIT)電腦科學與人工智慧實驗室(CSAIL)最近開發出一種 AI 輔助圖片編輯器「Semantic Soft Segmentation」(SSS),未來使用者在圖片編輯時可以自動選擇對象,不需要花時間再用編輯工具慢慢選取。



許多使用 Photoshop 的人應該都有相同的經驗,為了更換背景或貼上配件,必須得花費許多時間慢慢圈選物品邊界,影片製作也相同,修改者必須捕捉到前景和背景間的微妙轉換,才能夠讓圖片、影片的合成看起來不會太突兀。

CSAIL 研究員 Yagiz Aksoy 指出,處理圖片棘手問題在於並非每個像素都只屬於一個「對象」,在許多情況下,很難確定哪些像素是背景的一部分或是特定人物的一部分,這是因為柔和的轉換會導致兩個事物共享邊緣周圍的像素。

而 CSAIL 的 SSS 透過機器學習圖片編輯過程,能自動完成許多繁瑣細節,編輯器會自動將對象和背景分成不同部分以便選擇;與大多數照片編輯軟體的磁性套索或魔術套索工具不同,使用者不需要任何操作,AI 就可以自行運作。

當然,這些簡單的操作背後涉及許多複雜的演算法和運算,團隊使用神經網路處理圖片特徵並確定圖像的柔化邊緣,系統會分析原始圖片的紋理和顏色,並將其與神經網路收集有關圖片中實際物體的訊息互相結合。

目前 SSS 還只能用於靜態圖片,處理上也需花費 4 分鐘,一些擅長 PS 圖片的專家處理上或許還能更有效率。但這項 AI 技術並不是難以實現的困難項目,應用層面也顯而易見,無論照相 App 的濾鏡轉換或製作海報需去背,甚至延伸到電影後製環節都有可能派上用場。

團隊打算持續研究並加速過程,未來讓使用者只需點擊一下就可簡單劃分圖層,除此之外,團隊也打算應用到影片,讓未來電影製作變得更簡單。

(首圖來源:MIT CSAIL

延伸閱讀: