影片一鍵變漫畫,Google Storyboard 會和 Prisma 一樣紅嗎?

作者 | 發布日期 2017 年 12 月 12 日 22:33 | 分類 AI 人工智慧 , app , 軟體、系統 follow us in feedly

又一個好玩的 P 圖應用軟體來襲,這個應用還來自 Google 。



Google 12 日發表 AI 影像處理應用 Storyboard(Android)。該應用可從影片自動選擇有趣的片段,然後將每幀照片轉換為漫畫風格。目前有 6 種漫畫風格可選,轉換時間只需幾秒。

▲ Google Storyboard。

由於是第一版,Storyboard 功能還很單薄。用戶只能上傳影片然後等待轉出來的效果,沒有辦法自己選擇來安排漫畫內容,也沒辦法後製,例如加上文字、編寫故事;但即使沒有這些功能,Storyboard 依然很可能刷爆 Instagram、Facebook 和朋友圈。

▲ Prisma。

Storyboard 與 2016 年紅爆朋友圈的 Prisma 異曲同工。

Prisma 能在十幾秒內將普通照片轉換成名畫風格。Prisma 不僅深得用戶喜歡,採用的黑科技也獲得業界矚目。Prisma 主要採用 CNN(卷積神經網路技術)將用戶上傳的圖片分離和重新組合,再將名畫風格轉換到用戶圖片。Prisma 爆紅的原因在於巧妙利用深度神經網路抽取高層圖片表達的能力,而之前非深度學習的方法只能抓到目標圖片低階的圖片特徵,無法獨立對圖片的語意內容和風格變化有效地建模和合成。

然而 Prisma 好景不長,大家玩一陣就膩了。如今,Prisma 將重心移轉到 B2B,為開發者提供 SDK。

但是,Prisma 引爆的圖片藝術風格轉換潮流卻沒有消退。人工智慧領域引起革命的深度學習技術已將眾多工作推向實用,各大巨頭公司也積極布局機器視覺和影像處理領域。

Prisma 大紅的 3 個月後,Google 發表了一種新的遷移網路(來自論文《A Learned Representation for Artistic Style》),同時學習多種風格的簡單方法,可讓單個深度卷積風格遷移網路同時學習多種藝術風格。這種方法能達成即時風格插補,不僅可用於靜態影像,還可用於影片。

實際使用中,用戶可用 13 種不同繪畫風格,透過調整器調整這些風格的相對強度。多種風格即時結合,最後得到一個匯出。與之前快速遷移風格的方法不同,這種同時建模多種風格的方法讓用戶能即時與風格遷移演算法互動,且可基於多個風格混合自由創造。

此次 Storyboard 想必是 Google 對此技術的應用。

Prisma 專注於西方名畫,在名畫風格有深度積累,Google 選擇漫畫風格則是另辟蹊徑。從 Google 的技術積累來看,Storyboard 不久應該就能推出編輯功能,用戶就可根據自己的想法建立漫畫。

值得一提的是,Google 今年 8 月還收購了一家俄羅斯電腦視覺公司 AIMatter,其主要產品是影像濾鏡 Fabby,最強大的功能是「去背」,將對象從背景區分出來,可快速更換背景。除了美圖秀秀等圖片美化編輯程式都有的降噪、化妝、臉部美容等,Fabby 還有性別辨識、臉部辨識等功能。

▲ AIMatter。

其實,Google 於 2015 年推出的 Google Photos 就應用了人工智慧,其人工神經網路訓練系統可搜尋海量的影像資料,辨識照片中的人和物體。Storyboard 或許也會應用到 Google Photos。

除 Google 外,Facebook 也跟進 AI 影像處理應用。2017 年 1 月,為了讓你用手機拍片時,有種手持梵谷畫筆的奇妙感受,Facebook 首創一個全新的深度學習行動平台──Caffe2go。利用 Caffe2go,處理的照片不用再上傳伺服器,手機上就能進行風格轉換演算法,完成即時擷取、分析和處理畫素特徵。Prisma 的圖片處理需要等十幾秒,有了 Caffe2go,Facebook 可對影片即時轉換風格。但從官方公布的影片來看,每幀的效果都不一樣,人物也變得模糊,效果並不好。

▲ Caffe2go。

除 Storyboard 外,Google 還同時發表 Selfissimo!(iOS / Android)和 Scrubbies(iOS),這兩款應用沒那麼黑科技,但還是有使用價值。

Selfissimo! 是一款自動拍照的應用,點擊螢幕啟動拍攝後,每當你擺好一個動作(靜止下來),系統就會自動按下快門,可惜目前只能拍黑白照片。

Scrubbies 可透過單指、雙指左右拖曳做到畫面重播/快轉迴圈。

人們拍攝、記錄、編輯和分享圖片的欲望無限,技術和應用的創新如何滿足這些欲望讓人期待。就在近幾天,美圖秀秀也推出了「繪畫機器人」,用人工智慧將普通人臉照變成漫畫風格。但這個效果似乎沒有 Prisma 當初那麼紅。

除了人工智慧技術不斷進步,如何找到真正有創意、有價值的應用方式,或許更重要。

(本文由 雷鋒網 授權轉載;首圖來源:Google

延伸閱讀: