脫離頭部移動(dòng)方式,口型命令讓VR交互更輕松
我們都知道,VR技術(shù)不能脫離頭顯的佩戴,在玩的過程中必須依靠頭部的移動(dòng)來(lái)進(jìn)行虛擬環(huán)境的位置轉(zhuǎn)換。但這種方式,用戶能玩的時(shí)間則不能太久,否則容易引起頭部轉(zhuǎn)動(dòng)的疲勞。現(xiàn)在我們可以換種方式玩VR ,口型交互讓VR交互變得更簡(jiǎn)單。
紐約州立大學(xué)分校賓漢姆頓大學(xué)的研究人員最近研究出一項(xiàng)新技術(shù),用戶只需使用口型即可在虛擬現(xiàn)實(shí)環(huán)境中進(jìn)行交互。
眾所周知,虛擬現(xiàn)實(shí)頭顯可以為用戶帶來(lái)逼真的沉浸式體驗(yàn)。然而,目前頭顯的佩戴方式都遮住了用戶臉部上方,妨礙了整個(gè)面部識(shí)別。為了解決這一問題,賓漢姆頓大學(xué)計(jì)算機(jī)科學(xué)教授尹立軍(Lijun Yin)和他的團(tuán)隊(duì)開發(fā)出另外一個(gè)系統(tǒng),將口型作為虛擬現(xiàn)實(shí)的一種協(xié)作媒介進(jìn)行交互。
尹的團(tuán)隊(duì)在一群學(xué)生中測(cè)試了這一應(yīng)用。當(dāng)用戶戴上頭顯,呈現(xiàn)在其面前的是一款簡(jiǎn)單的游戲。該游戲的目的是讓用戶控制角色在森林中散步,盡可能的吃掉更多的蛋糕。用戶需要通過轉(zhuǎn)頭來(lái)選擇游戲進(jìn)程,利用口型進(jìn)行移動(dòng)并通過微笑來(lái)吃掉目標(biāo)蛋糕。該系統(tǒng)會(huì)對(duì)用戶的口型進(jìn)行描述、分類,并實(shí)現(xiàn)了較高的正確識(shí)別率。此外,該系統(tǒng)已被實(shí)際演示,并隨后在虛擬現(xiàn)實(shí)應(yīng)用中通過驗(yàn)證。
“我們想讓這一系統(tǒng)同時(shí)運(yùn)用在更多人身上,而不僅僅只是一個(gè)人。就像在Skype 上面試或者通信,假設(shè)該系統(tǒng)可以讓你們感覺好像身處在同一空間內(nèi),讓你們可以更加親密接觸,而電腦程序能有效地掃描你的面部表情并進(jìn)行復(fù)制,使它們看起來(lái)真實(shí),”尹如是說(shuō)道。
尹表示:“虛擬世界不僅僅是為了游戲而存在。例如,醫(yī)療保健可以使用VR幫助殘疾人,軍人或者理療專家也可以借此進(jìn)行一些在實(shí)際生活中無(wú)法完成的訓(xùn)練。而口型交互使這種體驗(yàn)更具真實(shí)感。”
盡管該技術(shù)仍處于原型階段,尹相信這一技術(shù)擁有廣闊的應(yīng)用前景。