Adobe推出的針對AR設(shè)計(jì)的Project Aero項(xiàng)目
關(guān)于Pilar~
在西班牙出生的Pilar,個(gè)子小小的,但有著西班牙人的熱情和溫暖的笑容,在紐約這個(gè)充滿變化和快節(jié)奏的環(huán)境里加上了一些似朋友一般的溫度。
Pilar在西班牙從事工業(yè)設(shè)計(jì),到美國之后,因?yàn)楦惺艿娇萍祭顺辈豢赡娴内厔?,她決定到MIT開始學(xué)習(xí)HCI(人機(jī)交互),并從中發(fā)現(xiàn)了她對此的熱愛:“我最終的希望,是能夠用XR這樣的人機(jī)交互,幫助更多的人,能改善人們的生活。“
在這次紐約舉辦的G4C(Game For Change)Hackathon中,她和哥倫比亞的神經(jīng)學(xué)家組成小組,在48小時(shí)內(nèi)完成了通過XR面部識別和面部效果來幫助自閉癥兒童克服溝通障礙的任務(wù)。
自閉癥兒童在智力和腦力上面和其他孩子沒有任何區(qū)別,但他們并不知道怎么能夠和外界正常的交流,有很多家長也在引導(dǎo)這樣的孩子上顯得無力和無助。
Pilar關(guān)于幫助自閉癥兒童的XR項(xiàng)目推文
而在人與人交流中有個(gè)非常重要且基礎(chǔ)的一點(diǎn)是:眼神交流。
他們發(fā)現(xiàn),這些有自閉癥的孩子,沒辦法和人正常的對視,更無法讀取人們眼神中隱藏的多重情緒信息。而他們Hackathon的內(nèi)容,就是用AR Mask去讓孩子逐漸適應(yīng)面部和眼神接觸。
在這個(gè)過程當(dāng)中,Pilar和她的團(tuán)隊(duì)先用面部識別和特效將人臉部分遮住,然后用眼球追蹤的方式取得小孩在人臉上探索的路徑和范圍,通過對大腦反應(yīng)的檢測,逐步減少人臉遮蓋的范圍,最后讓孩子適應(yīng)沒有面罩的情況,讓整個(gè)眼神交互的過程對于自閉癥兒童能更加循序漸進(jìn)。
今天ARinCina為大家邀請到了MITHCI學(xué)習(xí)的女性XR創(chuàng)踐者Pilar Aranda來為我們說說XR未來領(lǐng)域的看法~
XR交互難點(diǎn)
ARC:我們現(xiàn)在看到XR設(shè)備有各種不同的交互方式,從手勢識別,頭部識別到眼神識別,你覺得現(xiàn)在設(shè)備上的交互轉(zhuǎn)變到XR交互難點(diǎn)在哪里?
Pilar Aranda:我覺得最難的一點(diǎn)是如何將現(xiàn)在手機(jī),電腦,平板上基于2D表面的交互“直覺性”的轉(zhuǎn)化為3D。而且是基于我們所身處的環(huán)境和世界所有元素的轉(zhuǎn)化。包括拍照,視頻,UI,UX,這些都是從人機(jī)交互根源的概念上需要去更新和改變的東西。比如說之前提到的AR Cloud,我認(rèn)為不會僅有一個(gè)AR Cloud去解決這樣的轉(zhuǎn)變和帶來的數(shù)據(jù)儲存,而是多個(gè)AR Cloud共同運(yùn)作。另外一個(gè)難點(diǎn)是現(xiàn)在3D模型和特效的制作成本還是很高的。但隨著XR這種介質(zhì)的普及,更多的人從以前的設(shè)計(jì)平臺中逐漸轉(zhuǎn)移,再加上Adobe,Unity和Unreal等設(shè)計(jì)工具公司在工具上的轉(zhuǎn)變和新的生態(tài)維護(hù),這部分的難點(diǎn)和成本會逐漸下降,但仍需要時(shí)間。這些公司已經(jīng)意識到很多設(shè)計(jì)師在為XR設(shè)計(jì)原型的時(shí)候有一個(gè)理念,實(shí)踐到原型的空檔(gap),所以會加緊地去解決這個(gè)問題,方便設(shè)計(jì)師們,特別是用戶交互設(shè)計(jì)師推出更多基于XR的交互原型(Layout),來讓開發(fā)者去跟隨,現(xiàn)在很多XR領(lǐng)域的設(shè)計(jì)師和開發(fā)者的工作有些交叉,我認(rèn)為會逐漸分工更明確一些。
Adobe推出的針對AR設(shè)計(jì)的Project Aero項(xiàng)目
ARC:目前也有越來越多的基于XR本身平臺上的設(shè)計(jì)軟件問世,可以讓設(shè)計(jì)師們直接在沉浸式的環(huán)境里設(shè)計(jì)原型。那么你認(rèn)為哪種設(shè)計(jì)方式在未來將被運(yùn)用得更為廣泛?在開發(fā)者圈子里,Hololens和Meta哪一個(gè)更受歡迎?
Pilar Aranda:這兩種設(shè)計(jì)介質(zhì)都有好處。應(yīng)該從內(nèi)和外兩方面都要考慮。以建筑設(shè)計(jì)為例,傳統(tǒng)的建筑設(shè)計(jì)和工業(yè)設(shè)計(jì)仍然是在二維的圖紙上完成,但設(shè)計(jì)完成后,會進(jìn)行3D建模,讓設(shè)計(jì)師和測試者真正進(jìn)入到設(shè)計(jì)的空間進(jìn)行體驗(yàn),并發(fā)現(xiàn)缺陷。這是平面設(shè)計(jì)和XR環(huán)境可以共同作用的實(shí)用案例。而關(guān)于Hololens和Meta的話,雖然Meta有著更大的FOV,原型看上去也很有趣,但Hololens更是一個(gè)電腦型的處理中樞,具有更強(qiáng)大的獨(dú)立開發(fā)功能,所以Hololens現(xiàn)在仍然是最受歡迎的XR開發(fā)者硬件。但無論是哪種頭盔或者眼鏡,獨(dú)立成套是普及的必須條件——我有嘗試過讓一些人佩戴各種XR設(shè)備,最終發(fā)現(xiàn)他們還是更喜歡Oculus Go,因?yàn)檩p便,直接攜帶就可以開始玩。所以目前來看,對于普通用戶,輕便還是最重要的因素。
XR殺手級應(yīng)用~
ARC:您也做過非常多的AR和VR Demo設(shè)計(jì)項(xiàng)目,但是現(xiàn)在所有的XR平臺都在尋找一個(gè)殺手級應(yīng)用(Killer App),那么你認(rèn)為在XR平臺上出現(xiàn)的殺手級應(yīng)用應(yīng)該是什么樣的?
Pilar Aranda:說實(shí)話我不認(rèn)為VR領(lǐng)域會出一款殺手級的應(yīng)用。雖然Ready Player One中VR是一種主導(dǎo)級的存在,但那是建立在人們對現(xiàn)實(shí)世界近乎絕望轉(zhuǎn)而將所有的資源都傾斜向虛擬世界,而在這種情況發(fā)生之前,VR都不太會成為全民級的媒介。但VR對于娛樂,游戲,特別是在教育和醫(yī)療培訓(xùn)來說有非常重要的價(jià)值,完全沉浸式的體驗(yàn)在創(chuàng)造全新的環(huán)境上面有獨(dú)特的優(yōu)勢和潛能。對于AR來說,我認(rèn)為AR的殺手級應(yīng)用仍然是工具,我比較看好建立在全新的3D世界地圖上的工具型應(yīng)用,比如AR Could升級的導(dǎo)航或Google Map。
我知道有一些公司正在研究虛擬世界(Metaverse),就像Altspace和VR Chat一樣,如果是Ready Player One的話就是綠洲(Oasis),但正如我之前說的,我不認(rèn)為會只有一個(gè)綠洲,因?yàn)槿藗冇型耆煌男枨?。所以會有不同?ldquo;綠洲”來滿足特性的人群,也是為了保證體驗(yàn)的多樣性和數(shù)據(jù)安全,就像Facebook現(xiàn)在也在嘗試平衡數(shù)據(jù)過多造成的社會困擾一樣,壟斷型的數(shù)據(jù)將對信息安全造成很大的影響,尤其是當(dāng)虛擬世界的重要性極高的時(shí)候。
ARC: 在您做過的所有項(xiàng)目中,您認(rèn)為最讓你印象深刻的XR項(xiàng)目是哪個(gè)?
Pilar Aranda:我覺得是這一次為C4G做的關(guān)于自閉癥兒童的項(xiàng)目。我們項(xiàng)目一共由4人組成,有很棒的神經(jīng)學(xué)專家。在他的研究中,自閉癥兒童在長大后其實(shí)能比較好的融入到社會和工作環(huán)境中,但不管如何改善,他們始終有一個(gè)缺點(diǎn),不敢進(jìn)行眼神交流。眼神交流會引發(fā)他們的厭惡感。所以我們就用AR做了一張比較有趣的臉部面具,從有面具出現(xiàn)到面具消失,讓孩子們慢慢適應(yīng)從看人臉到眼神接觸的過程。我們用眼神追蹤來記錄孩子是否和別人有眼神交互,如果檢測到相關(guān)的行為,會出現(xiàn)漂亮的特效作為獎(jiǎng)勵(lì),來鼓勵(lì)他們產(chǎn)生更多的交互。
雖然我們是在iPhone X上面做的原型,但我們還是覺得AR 眼鏡會是更直覺化的硬件介質(zhì)。所以應(yīng)該會對這個(gè)Demo進(jìn)行改進(jìn)然后發(fā)布更好的版本。
G4C上Pilar關(guān)于XR幫助自閉癥兒童的提案
的確有很多項(xiàng)目從技術(shù)或者視覺的角度來說有更驚艷之處,但作為一個(gè)女性前沿科技開發(fā)者,這個(gè)項(xiàng)目的意義在于,它讓我知道和感受到前沿科技,即使它現(xiàn)在不夠成熟,但已經(jīng)可以有一些具有社會意義的嘗試和應(yīng)用。
雖然有很多關(guān)于未來不好的預(yù)測,例如AI科技的到來終將取代很多人賴以生存的職業(yè),但從女性對于前沿科技的觀察和探索角度,我們能夠運(yùn)用更多的同理心去賦予科技更多的人性,從不同的角度去幫助不同的人,在初期能夠提供一些力所能及的,正面的社會價(jià)值并提供多樣化的方向。