該軟件通過互聯(lián)網(wǎng)，將機(jī)器人的手臂和抓手以及車載攝像頭和傳感器連接到現(xiàn)成的VR硬件中。使用手持控制器，用戶可以通過移動(dòng)自己的手臂來控制機(jī)器人手臂的位置，執(zhí)行復(fù)雜的操作任務(wù)。

用戶可以進(jìn)入機(jī)器人的金屬皮膚，以第一人稱視角觀察環(huán)境，或者可以在機(jī)器人周圍走動(dòng)，以第三人稱視角觀察環(huán)境。你可以自由切換，尋找最方便完成任務(wù)的視角。

布朗大學(xué)研究生David Whitney是這一系統(tǒng)的聯(lián)合負(fù)責(zé)人，他表示：“我們認(rèn)為這可以用于需要精巧操作、而且人類不應(yīng)該親臨現(xiàn)場(chǎng)的情景。我們認(rèn)為有三個(gè)典型的例子：拆彈，在受損的核設(shè)施內(nèi)工作、或在國(guó)際空間站操作機(jī)械臂。”

惠特尼與布朗本科生埃里克·羅森（Eric Rosen）共同領(lǐng)導(dǎo)了這項(xiàng)工作。這兩個(gè)人都在布朗的“機(jī)器人實(shí)驗(yàn)室”，該實(shí)驗(yàn)室由計(jì)算機(jī)科學(xué)助理教授Stefanie Tellex領(lǐng)導(dǎo)。