Magic Leap 硬體規格曝光,互動設計與 ARKit 相似

作者 | 發布日期 2018 年 07 月 13 日 15:12 | 分類 xR/AR/VR/MR , 穿戴式裝置 line share follow us in feedly line share
Magic Leap 硬體規格曝光,互動設計與 ARKit 相似


7 月 11 日,Magic Leap 在 Twitch 進行第 3 次直播,這次大概是 Magic Leap 對外公布硬體、軟體消息最多的一次!

核心訊息如下:

  • 發貨時間:Magic Leap One 創造者版將於今夏交付(9 月 22 日前)。
  • 硬體規格:計算單元 LightPack 搭載 Nvidia Tegra X2 多核心處理器。
  • 軟體配置:基於 Linux 操作系統的 64 位元作業系統。
  • 內容:Magic Kit 第一款教程內容 Dodge 亮相,可同時辨識多個平面,放置虛擬內容,創造房間級體驗。

問題點:

  • 1 小時的直播,Magic Leap One 創造者版頭顯的配戴時間不到 1 分鐘,像玩具擺設。
  • Dodge 展示依然是錄好的影片,沒有用頭顯即時展示。
  • 與 ARKit 的互動設計沒多大差別。

4 月,Magic Leap 宣布每個月的第一個星期三在 Twitch 直播。由於前兩期直播毫無技術、產品細節,純談概念畫大餅而被業界嚴重吐槽。

7 月 12 日,Magic Leap 第三次直播,終於拿出一點誠意,開始談到硬體核心和軟體操作。

直播一開始,主持人給了最關鍵的消息,Magic Leap 將在今夏交付 Magic Leap One 創造者版,主持人開玩笑說夏天是正常的夏季時段(6 月 21 日至 9 月 22 日),而不是佛羅里達州橫跨一年四季的夏天。算了一下,我們最多還有 102 天就能看到完整的產品。

直播分成幾小節,分別介紹 CPU 和 GPU、開發者社群動態、全新的內容 Dodge。

搭載 Nvidia Tegra X2 多核處理器

(Source:Magic Leap

之前曾報導,Magic Leap One 創造者版採用分體式設計,包含 AR 眼鏡 Lightwear、一個 6Dof 搖桿和一個別在腰間的處理器 Lightpack。

Magic Leap 一直宣傳空間計算、數位光場等酷炫的 AR 技術,必定需要強大的晶片計算能力支援。目前,HoloLens 為了達到不錯的空間感知和光學顯示效果,幾乎把一台電腦塞進頭顯,也造成頭顯重達 500 多克。Magic Leap 採用分體,把計算單元放在 Lightpack,設計成別在腰間,一定程度上減輕了頭顯的重量,但是我們之前一直不知道 Magic Leap 將採用什麼樣的晶片方案。

Magic Leap 負責開發人員技術戰略的 Alan Kimball 解釋,計算單元 LightPack 採用 Nvidia Tegra X2,是功能強大的模組,包含 3 個處理器:四核 ARM A57 CPU、雙核 Denver 2 CPU 和基於 NVIDIA Pascal 的 GPU,有 256 個 CUDA 核心。他還提到每個內核有不同能耗和性能特徵,開發人員可根據需要選擇內核,代碼可在 GPU 執行、也可在 ARM 執行或是 Denver。

HoloLens 目前版本採用英特爾 Atom 處理器晶片,對比來看,Magic Leap 採用的 Nvidia Tegra X2 性能更強大,但由於 HoloLens 還設計了配合 Atom 使用的 HPU(全息圖像處理單元),又增強了全息顯示的能力。之前也有報導,微軟正為 HoloLens 研發專用 AI 晶片。Magic Leap One 的計算能力如何,還得看真機效果。

此外,直播還介紹了 Magic Leap 的底層軟體架構是基於 Linux 操作系統的 64 位元操作系統,有統一的內存系統。他們沒有透露該裝置將包含多少記憶體,但暗示沒有人抱怨記憶體不夠。Magic Leap 之前曾承諾幾個小時的續航時間,具體將取決於使用的應用程式。

互動設計曝光

從 2014 年起,Magic Leap 放出不少展示 AR 效果的影片,有在體育館濺起水花的大鯨魚、有手心裡的大象、有躲在辦公室桌子後面的機器人。這些早期影片給人的印象是 Magic Leap 的 AR 效果簡直棒呆了,十分逼真,還能被真實物體遮擋,完全與真實世界融合。但是,這些物體究竟如何放置在現實環境的?

2017 年 6 月,蘋果發表 ARKit,定義了 AR 的基本互動設計:平面辨識、運動追蹤和光照估計。

這一次,Magic Leap 拿出第一款給開發者的 Demo,我們也終於看到 Magic Leap 針對自己的空間計算、數位光場的 AR 互動設計。

Magic Leap 首席互動和體驗設計師 Colman Bryant 介紹了 Magic Leap 開發者套件的第一個教學內容 Dodge,在他看來,Dodge 代表了 Magic Leap 混合實境應用最基本的體驗。

很多人期待能以 Magic Leap 頭顯的視角進行現場即時 Demo 展示,可惜,被稱為「影像」公司的 Magic Leap 這次還是選擇錄好的影片 Demo。Magic Leap 的 SDK 有影片錄製功能,這次 Demo 是由 Magic Leap 鏡頭錄製,再將 AR 內容與鏡頭錄製的真實場景相結合。所以我們看到的影片視角也就是戴著 Magic Leap 的人之視角。

從展示來看,Magic Leap One 和蘋果 ARKit 類似,第一步都是辨識房間內的實際表面,支援水平和垂直平面,然後在其上顯示 3D 數位對象。

從圖中可看到,辨識平面時會有藍色網格,然後是更密集的紅色網格,當系統判定這是可用的平面時會變成綠色。

與蘋果 ARKit 和 Google ARCore 不同的一點是,Magic Leap One 可支援同時辨識多個平面地點,使虛擬內容可創建至整個房間範圍。

創建好平面之後,我們看到 Dodge 從沙發、地板等不同的點出現,然後向人猛丟石塊,還會砸得地面砰砰作響。由於 Magic Leap 有 3D 空間音效,所以即使眼睛並沒有注視虛擬物體,音效也會指引你找到虛擬物體出現的方向。Bryant 介紹說 Dodge 這個 Demo 只是「種子」,開發者可利用 Dodge 的教學文件,開發出更好玩的遊戲。

Bryant 也展示了手勢辨識,和 HoloLens 唯一的手勢很像,捏住拇​​指和食指表示點擊。據說 Magic Leap 的手勢辨識 SDK 還可以追蹤單個手指和關節、拳頭和其他手勢,還包括眼動追蹤和頭部追蹤。

據了解,要將內容加載到 Magic Leap One,可使用 LightPack 的 USB-C 連接埠或透過 Wi-Fi 傳輸文件。由於多個 Magic Leap Ones 可加入相同的 Wi-Fi 網路,開發人員表示,多人遊戲和共享混合現實環境是可能的,而且很有趣。

小結

從 Dodge 展示的互動設計來看,Magic Leap 與 ARKit 沒有太大差別,創新之處在於 Magic Leap 可以同時支援多個平面辨識,創建房間級體驗,但要掃描多個地點也會讓用戶感到操作困難吧。

雖然公布了硬體和軟體相關消息,但 Magic Leap 最主要的空間計算、數位光場等最核心技術依然是個謎,正是這些技術決定了 Magic Leap 是否值得接近 10 億美元的估值。

從之前公布的專利文件看來,Magic Leap 並沒有採用宣傳多年的光纖維掃描,而是採用多層光波導方式。HoloLens 眼鏡採用全息光波導,有傳言稱蘋果也將生產光波導方案的眼鏡,在這不禁為 Magic Leap 的未來感到擔憂。

(本文由 雷鋒網 授權轉載;首圖來源:Magic Leap

延伸閱讀: