體驗LeapMotion手勢追蹤,在VR世界里拈花不再是夢
LeapMotion 在積蓄了很久后,正式發布了為 VR 而生的手勢追蹤開發套件 Orion。Orion 據稱可以實現完整十指追蹤,識別角度、有障礙物、背景混亂和燈光環境出現異常時,仍能夠進行準確的手勢追蹤。今天,小編有幸收到 Leap Motion 的邀請,親自體驗了 Orion,并與 Leap Motion 聯合創始人兼 CEO Michael Buckwald 進行了交流。
Orion 性能與體驗
Leap Motion 執行助理 Caleb Kruse 先生首先演示了兩個 Demo。
第一個 Demo 是連接 PC 的 LeapMotion 演示。Kruse 為我們展示了拈花指法:畫面中顯示的是一朵花,通過 Leap Motion 映射到虛擬世界中的手,用大拇指和食指可以摘取一片花瓣,或者從莖處摘取整朵花。
第二個 Demo 是連接 Oculus 的 Leap Motion 演示。Kruse 演示了基于 Orion 在虛擬世界中,用雙手創建盒子,抓取盒子堆積木,拋接盒子等動作,整個過程流暢自然,與 Leap Motion 官方發布的宣傳視頻幾乎是一樣的。
Kruse 演示后,小編親自體驗了連接 Oculus 的 Demo。Demo 中可以做的事情和演示視頻是一樣的,我們重點嘗試了 Orion 的各個方面,有幾點發現:
- 正常雙手展開的各種條件下,由于刷新率達到了 120HZ,對雙手的追蹤延時很小,幾乎可以理解為同步。
- 大拇指藏在手掌中、握拳、手掌垂直于臉、雙手交叉握在一起的幾種特殊情況下,可以正確地識別出手指位置。但是在握拳、手掌垂直于臉的情況下,伸出單個手指還是有錯誤的情況發生。
- 雙手放在橙色的桌子上,可以準確地識別到手,沒有飄移或跳動;
- 在戴著 Oculus 平視的條件下,在大臂垂直,小臂水平這個高度左右,依然可以識別出雙手。這主要是由于 Orion 支持的視場角達到了 150 度。
- 雙手在面前重疊時,離眼睛較遠的手會消失。這點很好理解,看不見了當然無法識別出來。
- 手以握的姿勢抓取盒子可以比較好的識別。大拇指、食指、中指 3 只手指可以捏取盒子,雙手合抱盒子也可以,拋接盒子也能做到,純大拇指和食指捏取盒子還不行。
- 總體來說,除了手指重貼度很高的個別情況,多數情況下的手運動都可以正常追蹤,也很流暢,并可以實現抓取,拋接等動作,感覺就像是能看到自己的實際手差不多。
與CEO Michael Buckwald的交流
體驗完后,我們也就關心的幾個問題與 Leap Motion CEO Michael 進行了交流。
問:Orion 與原 Leap Motion 硬件兼容性如何?
答:Orion 的更新主要在軟件和算法層面,使用的還是原來的硬件設備。原 Leap Motion 設備擁有者下載新的固件和開發包就可以。以后也會考慮更新硬件。
問:Orion 里雙手與物體交互部分是 Leap Motion 開發的,還是 Unity 引擎自帶的?
答:Orion 由雙手追蹤引擎和互動引擎兩部分組成。互動引擎基于物理引擎開發,對于識別抓取這類動作設計了相應算法并封裝,供開發者使用,開發者不需要自己想辦法進行碰撞檢測來判定抓取這類交互動作。互動引擎部分會在不久后放出。
問:長時間使用手作為交互,會不會胳膊導致很累?
答:人在正常說話時,經常也會不自覺地使用很多手勢,并不會覺得累。所以這里面的關鍵在與應用的設計,使得手的動作幅度不大,而且足夠自然的情況下,應該不會感覺到累。Orion 識別的精度足夠高,微小動作也可以很好識別,應用設計者可以避免動作幅度很大的交互動作。
問:輸入方案中,Oculus、HTC Vive 等目前使用的都是手柄,Orion 的雙手輸入跟手柄輸入是替代關系么?
答:對于玩射擊游戲,最合適的輸入還是仿真槍,玩賽車游戲,最合適的輸入是方向盤,Oculus 的手柄也有其適用的場景,但要實現精細的人手動作,如抓、推等動作,或者在飛機上等很多場景下,更合適的是 Orion 的雙手追蹤方案。
問:Leap Motion 最初作為 PC 輸入外設面世時,外界關注度很高,但公司最終達到人們預期的革命性高度,如今基于 VR 的 Orion 是否會重復這樣的過程?
答:之前作為 PC 外設時,人們用電腦主要從事的還是上網等 2 維的活動,Leap Motion 作為 3 維輸入方案與之并不匹配,而且人們使用鼠標鍵盤的習慣已經延續了很多年,輕易難以改變。而在 VR 時代,顯示本身就是 3 維的,與 Leap Motion 的 3 維輸入剛好匹配。而且,VR 現在才剛剛開始,伴隨著 VR 的慢慢普及,可以讓人們從開始就適應 3 維的輸入。
問:Leap Motion 在 VR 方面后續的主要策略如何?
答:Leap Motion 正和某家 OEM 廠商合作,打造 Orion 專用的頭顯。 未來把 Leap Motion 硬件做成模組嵌入頭顯中也是一個主要方向。Orion 本身主要靠授權收費。移動式頭顯方面,也考慮和一些廠商合作,比如中國廠商,中國制造業產業鏈完整,優勢更大些。
問:如何看待同類產品的競爭?
答:Leap Motion 是目前唯一完整追蹤 10 個手指的方案,效率等各方面都有明顯優勢。雙手追蹤整體上還處于比較早期的階段,也非常樂意看到與友商們一起推動雙手追蹤方案的普及。
文章來源:36kr
(責任編輯:admin)