ManoMotion利用蘋果ARKit實(shí)現(xiàn)手部控制輸入
2017-09-08 14:44:57 來源:yivian 熱度:
計(jì)算機(jī)視覺和機(jī)器學(xué)習(xí)公司ManoMotion今天宣布,他們已經(jīng)把基于智能手機(jī)的手勢(shì)控制集成至蘋果的增強(qiáng)現(xiàn)實(shí)開發(fā)者工具ARKit,從而把基本的手部追蹤功能帶到AR之中,而這一切只需使用智能手機(jī)的板載處理器和攝像頭。

隨著谷歌和蘋果正通過各自的軟件開發(fā)工具包ARCore和ARKit來加速增強(qiáng)現(xiàn)實(shí)革命,開發(fā)者希望看到基于智能手機(jī)的AR到底能走多遠(yuǎn)。我們至今已經(jīng)看到了很多新的應(yīng)用程序,包括移動(dòng)VR頭顯的內(nèi)向外定位追蹤和部分非常令人興奮的實(shí)驗(yàn),但這是我們首次看到手部追蹤集成到AR平臺(tái)之中。
Venture Beat在ManoMotion集成對(duì)ARKit的支持之前就已經(jīng)體驗(yàn)了該公司的手勢(shì)輸入功能,ManoMotion執(zhí)行總監(jiān)Daniel Carlman表示,其可以追蹤“27自由度手部運(yùn)動(dòng)中的大部分”。跟原來版本一樣,集成ARKit的SDK可以追蹤深度,并識(shí)別熟悉的手勢(shì)(如滑動(dòng),點(diǎn)擊,抓取和釋放)。ManoMotion同時(shí)宣稱這一切“僅占用CPU,內(nèi)存和電池消耗的極小一部分”。

在ManoMotion提供的視頻中,我們可以看到基于ARKit的應(yīng)用程序可以識(shí)別用戶的手部,并能響應(yīng)把將乒乓球彈射至杯子中的輕彈動(dòng)作,這充分利用了ARKit的空間映射能力。
像啤酒乒乓球這樣的簡(jiǎn)單游戲可能像是一種無關(guān)緊要的用例,但能通過雙手與數(shù)字世界交互的能力在游戲之外擁有更大的含義。諸如HoloLens和Meta 2的AR設(shè)備依靠手勢(shì)控制與UI進(jìn)行交互,這為我們帶來了無數(shù)的可能性,包括跟生產(chǎn)力相關(guān)的操作,如放置和調(diào)整窗口大小,或者是通過手指簡(jiǎn)單地打開房子中的聯(lián)網(wǎng)燈泡。盡管谷歌和蘋果都沒有就未來的AR頭顯發(fā)表言論,但今天移動(dòng)平臺(tái)上的這些早期實(shí)驗(yàn)(不一定需要昂貴的定制設(shè)備)將會(huì)定義即將到來的AR頭顯的功能。
Carlman說:“到目前為止,當(dāng)前的AR技術(shù)存在非常痛苦的限制,亦即無法直觀地與3D空間中的增強(qiáng)對(duì)象進(jìn)行交互。向ARKit帶來手勢(shì)控制并成為市場(chǎng)第一家為此提供證明的公司,這對(duì)我們來說是一個(gè)巨大的里程碑。我們渴望看到開發(fā)者將如何在增強(qiáng)現(xiàn)實(shí)中創(chuàng)建并重新定義交互!”
ManoMotion表示,即將推出的SDK版本將帶來ARKit集成,并在“未來幾周內(nèi)”通過官網(wǎng)提供下載。ARKit集成將首先支持Unity iOS,而在隨后的更新中將支持Native iOS。
責(zé)任編輯:吳一波