計算機視覺和機器學(xué)習(xí)公司ManoMotion今天宣布，他們已經(jīng)把基于智能手機的手勢控制集成至蘋果的增強現(xiàn)實開發(fā)者工具ARKit，從而把基本的手部追蹤功能帶到AR之中，而這一切只需使用智能手機的板載處理器和攝像頭。
隨著谷歌和蘋果正通過各自的軟件開發(fā)工具包ARCore和ARKit來加速增強現(xiàn)實革命，開發(fā)者希望看到基于智能手機的AR到底能走多遠。我們至今已經(jīng)看到了很多新的應(yīng)用程序，包括移動VR頭顯的內(nèi)向外定位追蹤和部分非常令人興奮的實驗，但這是我們首次看到手部追蹤集成到AR平臺之中。
Venture Beat在ManoMotion集成對ARKit的支持之前就已經(jīng)體驗了該公司的手勢輸入功能，ManoMotion執(zhí)行總監(jiān)Daniel Carlman表示，其可以追蹤“27自由度手部運動中的大部分”。跟原來版本一樣，集成ARKit的SDK可以追蹤深度，并識別熟悉的手勢(如滑動，點擊，抓取和釋放)。ManoMotion同時宣稱這一切“僅占用CPU，內(nèi)存和電池消耗的極小一部分”。
在ManoMotion提供的視頻中，我們可以看到基于ARKit的應(yīng)用程序可以識別用戶的手部，并能響應(yīng)把將乒乓球彈射至杯子中的輕彈動作，這充分利用了ARKit的空間映射能力。
像啤酒乒乓球這樣的簡單游戲可能像是一種無關(guān)緊要的用例，但能通過雙手與數(shù)字世界交互的能力在游戲之外擁有更大的含義。諸如HoloLens和Meta 2的AR設(shè)備依靠手勢控制與UI進行交互，這為我們帶來了無數(shù)的可能性，包括跟生產(chǎn)力相關(guān)的操作，如放置和調(diào)整窗口大小，或者是通過手指簡單地打開房子中的聯(lián)網(wǎng)燈泡。盡管谷歌和蘋果都沒有就未來的AR頭顯發(fā)表言論，但今天移動平臺上的這些早期實驗(不一定需要昂貴的定制設(shè)備)將會定義即將到來的AR頭顯的功能。
Carlman說：“到目前為止，當(dāng)前的AR技術(shù)存在非常痛苦的限制，亦即無法直觀地與3D空間中的增強對象進行交互。向ARKit帶來手勢控制并成為市場第一家為此提供證明的公司，這對我們來說是一個巨大的里程碑。我們渴望看到開發(fā)者將如何在增強現(xiàn)實中創(chuàng)建并重新定義交互!”
ManoMotion表示，即將推出的SDK版本將帶來ARKit集成，并在“未來幾周內(nèi)”通過官網(wǎng)提供下載。ARKit集成將首先支持Unity iOS，而在隨后的更新中將支持Native iOS。
微信掃一掃
