走進(jìn)實(shí)驗(yàn)室,詳細(xì)了解英特爾AR-VR戰(zhàn)略
從許多方面來(lái)講,虛擬現(xiàn)實(shí)仍然像是一個(gè)登月計(jì)劃(意指難以實(shí)現(xiàn))。
Facebook 在2014年以20億美元的價(jià)格收購(gòu)了Oculus,讓這項(xiàng)未來(lái)主義產(chǎn)品可以更快地普及開來(lái)。對(duì)整個(gè)行業(yè)而言,此次科技巨頭的并購(gòu)是一個(gè)信號(hào),虛擬現(xiàn)實(shí)有可能復(fù)制移動(dòng)手機(jī)的成功故事,并成為繼電腦、手機(jī)之后的下一個(gè)計(jì)算平臺(tái)。對(duì)企業(yè)來(lái)說(shuō),這也向他們釋放了一個(gè)信號(hào),錯(cuò)過(guò)移動(dòng)浪潮的他們是時(shí)候要提早布局虛擬現(xiàn)實(shí)市場(chǎng)。
具有諷刺意味的是(也不令人感到意外),大部分重金投資VR和AR的力量都是移動(dòng)革命的浪潮中失敗,或是失去原有地位的公司。
隨著智能手機(jī)業(yè)務(wù)的頹靡,HTC正在積極地布局VR,將其作為自己的核心業(yè)務(wù)。曾經(jīng)的霸主諾基亞也在進(jìn)軍高端虛擬現(xiàn)實(shí)相機(jī)市場(chǎng)。微軟的Windows手機(jī)也沒有獲得成功,他們現(xiàn)在也加大投入力度,為頭顯打造Windows Holographic操作系統(tǒng)。
在過(guò)去的十年中,人們認(rèn)為英特爾在許多方面都未能充分利用移動(dòng)革命的需求和基于。在系統(tǒng)架構(gòu)方面固守過(guò)去的決定讓英特爾落后于高通、蘋果和三星等公司。在今年年初,該公司宣布計(jì)劃裁員近12000名員工,并取消某些Atom移動(dòng)芯片組的開發(fā)計(jì)劃。
英特爾的執(zhí)行總監(jiān)布萊恩·科茲安尼克指出,英特爾的困境是由自己一手造成。
“我們?cè)M?jì)算世界停留在PC電腦時(shí)代,但這個(gè)世界從來(lái)不會(huì)停止創(chuàng)新。微軟新任CEO薩提亞-納德拉之前說(shuō)得很好…‘我們這個(gè)行業(yè)不尊重傳統(tǒng),只尊重創(chuàng)新。’我認(rèn)為他所說(shuō)的100%正確,這就是我們?yōu)楹螘?huì)錯(cuò)過(guò)移動(dòng)浪潮的原因。”
而他認(rèn)為英特爾的VR項(xiàng)目雖然還處于起步階段,但最終將會(huì)成為英特爾的關(guān)鍵業(yè)務(wù)。
英特爾至今已有將近50年的歷史,科茲安尼克從1982年就已經(jīng)加入這家公司。那一年,像《電子世界爭(zhēng)霸戰(zhàn)》這樣的科幻電影陸續(xù)上映,讓許多人都憧憬著一個(gè) VR的未來(lái)。2016年可以說(shuō)是VR的元年,但現(xiàn)在仍然有很多人在諷刺VR,稱這些努力不外乎是眾多任性公司的公關(guān)伎倆,假裝創(chuàng)新以便能繼續(xù)得到研發(fā)資金。
心中一直思考著這些問(wèn)題,我走進(jìn)了位于加州圣克拉拉市的英特爾總部,對(duì)其虛擬現(xiàn)實(shí)實(shí)驗(yàn)室開始了一段專訪之旅。英特爾虛擬現(xiàn)實(shí)實(shí)驗(yàn)室的研究人員目前正在尋找在虛擬現(xiàn)實(shí)中復(fù)刻我們感官體驗(yàn)的方法,去重現(xiàn)我們?cè)诂F(xiàn)實(shí)世界中的聽覺、視覺和感覺。英特爾的研究也正融入到首款頭戴式顯示設(shè)備 Project Alloy身上。這是一臺(tái)是無(wú)線一體化VR頭顯,英特爾把這個(gè)技術(shù)稱為“merged reality”(融合現(xiàn)實(shí))。
咒語(yǔ)
如果英特爾在研發(fā)無(wú)線VR頭顯讓大家感到意外,那么他們所強(qiáng)調(diào)的名為“merged reality”(融合現(xiàn)實(shí))的全新交互方式更會(huì)令人意外。在術(shù)語(yǔ)方面,我們已經(jīng)聽說(shuō)過(guò)虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)、混合現(xiàn)實(shí)以及真實(shí)現(xiàn)實(shí)等等。
我并不是說(shuō)要把融合現(xiàn)實(shí)也收錄到字典中,而是這個(gè)詞語(yǔ)背后的哲學(xué)含義十分值得我們深思。融合現(xiàn)實(shí)基本上是VR與計(jì)算機(jī)視覺的融合,后者可為VR頭顯提供理解周圍環(huán)境的能力,包括對(duì)環(huán)境而言比較特別的人類、地點(diǎn)和物體等等。計(jì)算機(jī)視覺這種技術(shù)十分依賴英特爾的計(jì)算機(jī)視覺攝像頭RealSense,而英特爾已經(jīng)把RealSense應(yīng)用在機(jī)器人、無(wú)人機(jī)和自動(dòng)駕駛汽車身上。
至于融合現(xiàn)實(shí),RealSense能讓身處虛擬環(huán)境中的頭顯用戶透過(guò)顯示器看到部分現(xiàn)實(shí)世界(比如你的身體和其他人)。英特爾希望借助這種技術(shù),用戶能夠無(wú)縫融合到由VR和復(fù)雜物理現(xiàn)實(shí)所形成的神奇環(huán)境中。
實(shí)驗(yàn)室
英特爾的圣克拉拉園區(qū)是一臺(tái)工作中的機(jī)器。在我跟隨英特爾的高管和員工通過(guò)嚴(yán)格的安檢并走過(guò)辦公場(chǎng)所的通道時(shí),我可以聽到工程師們?cè)诓粩帱c(diǎn)擊鼠標(biāo)和敲擊鍵盤的聲音。
在走進(jìn)實(shí)驗(yàn)室一層時(shí),我首先注意到的事情是這里很空曠。實(shí)驗(yàn)室中的大多數(shù)員工都已經(jīng)撤走,部分地方甚至已經(jīng)被封鎖。點(diǎn)擊鼠標(biāo)和敲擊鍵盤的聲音消失不見了,設(shè)置在這個(gè)區(qū)域中的是最先進(jìn)的3D聲學(xué)實(shí)驗(yàn)室,英特爾就是在這里為融合現(xiàn)實(shí)環(huán)境研發(fā)動(dòng)態(tài)音頻技術(shù)。
第一個(gè)迎接我的是一只機(jī)器人手臂。這里是英特爾為幫助RealSense傳感器追蹤識(shí)別手勢(shì)而研究手部運(yùn)動(dòng),并且開發(fā)相關(guān)算法的地方。Oculus、HTC 以及索尼這樣的VR同仁都已經(jīng)推出了運(yùn)動(dòng)追蹤控制器,讓用戶可以與VR內(nèi)容進(jìn)行交互。而英特爾希望開發(fā)更精良的手部追蹤技術(shù),讓交互更加無(wú)縫。
在與這個(gè)不知疲倦的機(jī)器手臂告別后,我來(lái)到了實(shí)驗(yàn)室中的六樓,英特爾當(dāng)時(shí)就是在這里研發(fā)由內(nèi)而外的追蹤技術(shù),從而制作出一臺(tái)無(wú)線的Project Alloy頭顯。
現(xiàn)在,大部分高端的VR頭顯都需要通過(guò)線纜連接到PC或主機(jī)上,這意味著頭顯背部有一條長(zhǎng)長(zhǎng)的線纜。頭顯也需要通過(guò)外部傳感器進(jìn)行定位追蹤,這樣系統(tǒng)才能識(shí)別出用戶的運(yùn)動(dòng)。
相反,Project Alloy頭顯可以通過(guò)RealSense傳感器陣列來(lái)根據(jù)你與環(huán)境中物體的相對(duì)位置來(lái)確定你的位置。你無(wú)需再設(shè)置任何外部傳感器,或者是在墻壁上鉆孔。你可以自由地走動(dòng),不用再擔(dān)心線纜的影響。
項(xiàng)目
我花了點(diǎn)時(shí)間來(lái)了解這個(gè)有點(diǎn)奇怪的頭顯,正面有攝像頭,這是英特爾用于測(cè)試RealSense頭部追蹤功能的裝置。然后我便準(zhǔn)備好戴上Project Alloy頭顯進(jìn)行個(gè)人體驗(yàn)。
我還了解到這臺(tái)設(shè)備的一些規(guī)格信息。Project Alloy搭載了DS4 RealSense攝像頭來(lái)進(jìn)行精確的定位追蹤,Skylake芯片組用于應(yīng)用處理,最后英特爾Intel Atom會(huì)負(fù)責(zé)計(jì)算機(jī)視覺。
雖然目前還在研發(fā)之中,但下一代的(名為“Alloy 2”“的頭顯將會(huì)配備全新的RealSense 400攝像頭,并會(huì)升級(jí)到Kaby Lake處理器。但最有趣的事情是,頭顯會(huì)放棄使用Atom處理器,轉(zhuǎn)而使用Movidius的VPU(視覺處理單元)。小編此前已經(jīng)報(bào)道過(guò)英特爾收購(gòu)了這家公司。
經(jīng)過(guò)一番把弄后,我重現(xiàn)調(diào)整了這款極其舒適的頭顯,讓其平衡在我們的頭上。雖然我只體驗(yàn)了15分鐘,但Project Alloy還是給我留下了深刻的印象。
對(duì)一家為高端PC研發(fā)芯片組的公司而言,打造需要連接高端PC的頭顯似乎是一個(gè)相當(dāng)自然的計(jì)劃。
有些地方還很粗糙,但也有很精良的地方??傮w來(lái)說(shuō),這是一款與眾不同的VR設(shè)備。原型產(chǎn)品中的由內(nèi)而外的追蹤技術(shù)很有效。但DS4 RealSense攝像頭的精度還不太令人滿意。隨著深度相機(jī)的分辨率的提升,下一代模型將能實(shí)現(xiàn)更加精確的追蹤,所有的影像細(xì)節(jié)都將變得更為清晰。
最終,OEM廠商于明年推出的設(shè)備體驗(yàn)會(huì)更為關(guān)鍵。英特爾很快指出,自己并不精于制作消費(fèi)者版硬件,他們更側(cè)重于把東西組合在一起來(lái)展示底層技術(shù)。
英特爾的一名高管TIm Parker在向我講解demo時(shí)表示:“英特爾更注重于硬件和體驗(yàn),但我們?cè)谥圃煳锢碓O(shè)備上并非是因?yàn)橄胂罅Χ劽?rdquo;
盡管英特爾會(huì)與微軟和其他合作伙伴合作改進(jìn)其性能,但Alloy 2最終還是會(huì)作為參考設(shè)計(jì)。英特爾近期沒有計(jì)劃進(jìn)軍消費(fèi)者產(chǎn)品硬件業(yè)務(wù)領(lǐng)域,但科茲安尼克希望可以通過(guò)這款頭顯讓英特爾的技術(shù)融入到下一代VR設(shè)備中的DNA之中。
他說(shuō):“到明年中期,我們將會(huì)完成Alloy,開源的。那是我們的目標(biāo)。你開源這些東西,讓所有人在這個(gè)基礎(chǔ)上繼續(xù)完善,有點(diǎn)像原來(lái)微軟的PC業(yè)務(wù)那樣。”
讓我感到好奇的是,英特爾將會(huì)如何把這個(gè)技術(shù)融入到連線的融合現(xiàn)實(shí)體驗(yàn)中。值得一提的是,英特爾宣稱已經(jīng)通過(guò)臺(tái)式機(jī)芯片與有線VR建立起牢固的聯(lián)系。而與我交談的多位英特爾高管似乎都在刻意淡化Project Alloy的無(wú)線性質(zhì)。事實(shí)上,這些高管經(jīng)常會(huì)把對(duì)話引導(dǎo)回到有線VR上。
科茲安尼克表示:“我們可以從線纜中把你解放出來(lái),因?yàn)槲覀儼阉械挠?jì)算設(shè)備都放在頭顯之中,我們可以實(shí)現(xiàn)所有的映射。但如果你真的像要一臺(tái)低時(shí)延的高端游戲設(shè)備,那么(有線VR)總是會(huì)成為首選的系統(tǒng)。”
英特爾要做出的重要決定是,融合現(xiàn)實(shí)技術(shù)是否值得他們投資制作專用的VR芯片。對(duì)一家為高端PC研發(fā)芯片組的公司而言,打造需要連接高端PC的頭顯似乎是一個(gè)相當(dāng)自然的計(jì)劃。Parker沒有直接評(píng)論他們是否會(huì)研發(fā)專用的VR芯片。
愿景
在體驗(yàn)的時(shí)候,我唯一能想到的事情是英特爾。Alloy在英特爾心中只是一個(gè)內(nèi)部開發(fā)工具,但由于RealSense和Movidius的存在,英特爾有許多方向可以選擇。
我與RealSense和Movidius的高管坐下來(lái)聊過(guò)幾次,我也意識(shí)到英特爾的虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)計(jì)劃已經(jīng)日漸明朗。
在一個(gè)略顯狹窄的房間中,英特爾感知計(jì)算實(shí)驗(yàn)室(Perceptual CompuTIng Lab)的副總監(jiān)Achin Bhowmilk在一個(gè)融合現(xiàn)實(shí)環(huán)境中向我展示了最新RealSense模型的先進(jìn)demo。
他說(shuō):“我們對(duì)這個(gè)產(chǎn)品的想法是,為其創(chuàng)造出能夠感知和理解世界的能力。”
這個(gè)系統(tǒng)與我在PC上所體驗(yàn)過(guò)的RealSense技術(shù)有著天壤之別。最初的RealSense有點(diǎn)糟糕。作為人機(jī)交互的新方式,推薦給消費(fèi)者的產(chǎn)品很笨重,PC輸入系統(tǒng)顯然還沒有準(zhǔn)備好。
借助虛擬現(xiàn)實(shí),RealSense有了一個(gè)更能發(fā)揮出其計(jì)算機(jī)視覺敏捷性的計(jì)算平臺(tái)。科茲安尼克告訴我說(shuō),他希望這個(gè)技術(shù)有一天能夠在你散步的時(shí)候,從聯(lián)系人列表中識(shí)別人們的身份,然后在你的視野中顯示出適當(dāng)?shù)耐ㄖ?/p>
科茲安尼克說(shuō):“RealSense最初出現(xiàn)在我們的實(shí)驗(yàn)室中,我們已經(jīng)對(duì)鼠標(biāo)和鍵盤的使用方式反復(fù)思考了20年的時(shí)候,它們是如何成為我們與計(jì)算機(jī)交互的方式。所以我們想,或許我們可以從鼠標(biāo)和鍵盤中解放人們的雙手。然后我們?cè)谌ツ昕吹絍R的興起,并開始意識(shí)到你有點(diǎn)受到這些方式的限制。”
英特爾更注重于硬件和體驗(yàn),但我們?cè)谥圃煳锢碓O(shè)備上并非是因?yàn)橄胂罅Χ劽?/p>
— TIm Parker,一名英特爾高管
RealSense為頭顯帶來(lái)了空間和情境感知能力,而Alloy則可為硬件制造商提供更便捷的參考,把追蹤技術(shù)集成到他們的產(chǎn)品中。事實(shí)是,許多頭顯制造商已經(jīng)開始使用英特爾的技術(shù),他們使用的芯片來(lái)自于被英特爾收購(gòu)的Movidius。
頭顯生產(chǎn)商在購(gòu)買計(jì)算機(jī)視覺處理設(shè)備時(shí),Movidius的低功耗Myriad 2視覺處理單元已經(jīng)成為行業(yè)的標(biāo)準(zhǔn)。Movidius是谷歌Project Tango智能手機(jī)AR系統(tǒng)的早期合作伙伴,他們也宣布會(huì)與聯(lián)想合作開發(fā)VR設(shè)備。隨著英特爾希望把RealSense技術(shù)集成到更多的設(shè)備上,無(wú)處不在的Myriad 2絕對(duì)會(huì)為英特爾帶來(lái)更大優(yōu)勢(shì)。
RealSense和Movidius毫無(wú)疑問(wèn)會(huì)變得越來(lái)越緊密,但科茲安尼克堅(jiān)持認(rèn)為,雖然雙方都希望兩個(gè)產(chǎn)品可以更緊密地進(jìn)行整合,但Movidius仍會(huì)作為獨(dú)立產(chǎn)品進(jìn)行銷售。
科茲安尼克指出:“我們將會(huì)繼續(xù)優(yōu)化Movidius的架構(gòu),我們將會(huì)做的事情找出這種架構(gòu)如何能更好地與英特爾架構(gòu)融合或連接在一起。”
Movidius的執(zhí)行總監(jiān)Remi El-Ouazzane同樣認(rèn)為,他的產(chǎn)品將會(huì)為RealSense平臺(tái)進(jìn)行更多的優(yōu)化。
他說(shuō):“現(xiàn)在很多很多人不知道(Movidius平臺(tái)),但我認(rèn)為這種情況會(huì)發(fā)生改變,我認(rèn)為們需要與英特爾一起開發(fā)出競(jìng)爭(zhēng)的優(yōu)勢(shì),使整體更大于部分的總和。”
未來(lái)
許多虛擬現(xiàn)實(shí)的最大支持者只是把虛擬現(xiàn)實(shí)看作是增強(qiáng)現(xiàn)實(shí)技術(shù)的繼續(xù),而英特爾似乎對(duì)VR最終將如何演變?yōu)锳R很感興趣。
增強(qiáng)現(xiàn)實(shí)是一個(gè)令人興奮的領(lǐng)域。開發(fā)者現(xiàn)已能夠接觸到微軟HoloLens頭顯,盡管有推遲,但Meta 2開發(fā)套件也將開始發(fā)貨。但對(duì)一些大肆宣傳頭顯的制造商來(lái)說(shuō),我們?nèi)匀蝗狈ψ銐虻男畔ⅰ?/p>
Magic Leap已經(jīng)從包括谷歌和阿里巴巴在內(nèi)的投資者那里籌集了近14億美元的投資,但還沒有展示太多關(guān)于其即將上市的頭顯原型信息。雖然有消息人士稱,蘋果目前正基于不同的顯示技術(shù)來(lái)研發(fā)多個(gè)“混合現(xiàn)實(shí)”的頭顯原型,但蘋果還未給出官方的回應(yīng)。
不過(guò),大部分的頭顯都有一個(gè)相同之處:使用Movidius的VPU。El-Ouazzane表示:“我會(huì)非常謙虛地說(shuō),所有的大型AR平臺(tái)都在使用Movidius。”
他還指出,通過(guò)把計(jì)算設(shè)備整合至袖珍大小,Movidius技術(shù)可以幫助其合作伙伴小型化增強(qiáng)現(xiàn)實(shí)系統(tǒng)中的頭戴式眼鏡。他相信這種袖珍級(jí)別的尺寸外觀可以幫助改善設(shè)備的接收功能。
El-Ouazzane解釋說(shuō):“我們應(yīng)該從過(guò)去吸取教訓(xùn)。AR眼鏡的重量需要在在25克到30克之間,而且戴起來(lái)要相當(dāng)有趣。AR眼鏡要盡可能少地使用電子元件,只需視覺處理器、顯示器部件和計(jì)算設(shè)備,所有東西都能裝進(jìn)口袋中,就像智能手機(jī)一樣。”
盡管科茲安尼克在我們的對(duì)話中強(qiáng)調(diào),這個(gè)行業(yè)“還需要1到2年時(shí)間才能獲得增強(qiáng)現(xiàn)實(shí)所需要的光學(xué)技術(shù)”,但他暗示英特爾已經(jīng)AR領(lǐng)域進(jìn)行“各種各樣的研發(fā)”。
融合現(xiàn)實(shí)可以縮小VR與AR之間的差距,這是一場(chǎng)引人入勝的冒險(xiǎn)。Project Alloy是有著缺點(diǎn)的早期冒險(xiǎn),而英特爾顯然為其奠定堅(jiān)實(shí)的基礎(chǔ),包括繼續(xù)研發(fā)計(jì)算機(jī)視覺和視覺處理技術(shù),從而實(shí)現(xiàn)更強(qiáng)大的增強(qiáng)現(xiàn)實(shí)設(shè)備和體驗(yàn)。
英特爾并不著急。Movidius和RealSense都不會(huì)完全融入到VR/AR頭顯中。這兩個(gè)技術(shù)也將精力集中在其他更迫切的技術(shù)平臺(tái)上,比如自動(dòng)駕駛汽車、安全系統(tǒng)和無(wú)人機(jī)。Project Alloy和融合現(xiàn)實(shí)向英特爾指明了清晰的產(chǎn)品和產(chǎn)品類別,能夠在跨越VR和AR的更廣泛領(lǐng)域中開始建立自己的努力。
預(yù)測(cè)什么是下一個(gè)計(jì)算平臺(tái),或區(qū)分曇花一現(xiàn)的時(shí)尚與代表未來(lái)的新興技術(shù)從來(lái)都不是一門準(zhǔn)確的科學(xué),但英特爾明白與AR/VR的風(fēng)險(xiǎn),他們也正在進(jìn)行布局以確保自己不會(huì)錯(cuò)過(guò)這些“現(xiàn)實(shí)”。