分析你眼中的世界,靠瞳孔反射即可建構 3D 圖像

作者 | 發布日期 2023 年 06 月 30 日 9:00 | 分類 AI 人工智慧 line share follow us in feedly line share
分析你眼中的世界,靠瞳孔反射即可建構 3D 圖像


透過神經輻射場(NeRF)技術訓練人工智慧,可以將平面圖片或影片轉換為 3D 模型,但現在馬里蘭大學讓人工智慧技術再進化,光靠瞳孔反射就能建構出相機視線外的 3D 圖像。

在該實驗中,團隊拍下參與者在房內走動的多張清晰照片,再放大局部照片聚焦在眼睛反射,之後去除照片中的虹膜、添加可能的色彩跟細節,調整曲面失真狀況,之後就能創建相機視線外的 3D 圖像。

這項技術挑戰頗多,包括還需要評估參與者的視角、分辨眼睛虹膜與場景反射的糾纏紋理,但團隊指出,成年人的角膜形狀大小接近,只要計算圖像中人的角膜的像素大小,就可以精準計算出視線,而為了消除照片中虹膜,也同時訓練學習虹膜紋理的 2D 紋理圖

(Source:Seeing the World Through Your Eyes

雖然以結果來說,3D 模型解析度不一定很高,只能略為分辨物體為何,但還不詳細,團隊目前還是需要搭配燈光才能呈現。

雖然還不確定這項技術最終能用在哪種場合,可能是間諜或傭兵電影橋段之類,也有助於警方辦案,但團隊也用 Miley Cyrus 和 Lady Gaga MV 片段測試,但影片解析度仍不夠高,只能知道 Miley 可能正盯著照明網格,而 Lady Gaga 看著的物體很接近人體軀幹。

但無論如何,隨著科技演進,從眼睛反射獲得的訊息也會愈來愈多,先前日本也有發生靠著眼睛反射與窗戶反射追蹤騷擾偶像的案例,只能說現在手機攝影品質愈來愈高,拍照時也要注意可能會洩漏出的資訊。

(首圖來源:pixabay