甩掉樂(lè)器,英特爾這項(xiàng)技術(shù)把空氣變成美妙的音樂(lè)
舞臺(tái)的這邊,一位身材微胖的鼓手坐在椅子上,頭戴 VR 頭顯,手持兩支鼓棒“抽風(fēng)”。
舞臺(tái)的那邊,一位消瘦的男子戴著奇怪的手套,雙臂張開(kāi)像在打太極。舞臺(tái)上沒(méi)有一樣樂(lè)器,但犀利的鼓點(diǎn)、清脆的鋼琴還有悠揚(yáng)的大提琴聲音卻能隨著他們的動(dòng)作變化響徹整個(gè)會(huì)場(chǎng)。
酷玩樂(lè)隊(duì)(Coldplay)的金曲《Clocks》響起,熟悉的旋律遇上了樂(lè)手夸張的動(dòng)作,一種奇妙的違和感產(chǎn)生又很快消失在空中。
鋼琴、提琴和架子鼓發(fā)出的聲音,其實(shí)是琴弦和敲擊鼓皮的震動(dòng)帶來(lái)音箱和鼓桶的共振——音樂(lè)本質(zhì)上是物理范疇里的藝術(shù)。但在這場(chǎng)虛擬現(xiàn)實(shí)音樂(lè)盛宴當(dāng)中,機(jī)器視覺(jué)取代了常規(guī)的物理原則。這就是發(fā)生在英特爾年度技術(shù)大會(huì) IDF16 上的一幕。
這套“空氣架子鼓”由英國(guó)利物浦音樂(lè)科技公司 Aerodrums 開(kāi)發(fā)。Aerodrums 幾乎不需要安裝,因?yàn)樗旧砭蜎](méi)有鼓和踏板,而是采用高頻精確的動(dòng)作捕捉技術(shù),捕捉鼓手“敲空氣”和“踩地板”的動(dòng)作,然后在計(jì)算機(jī)里將動(dòng)作實(shí)時(shí)轉(zhuǎn)換為音色。
而在 IDF上,英特爾的 VR 技術(shù)讓鼓手在敲擊的同時(shí),還能在頭顯里看到一套虛擬的架子鼓。鼓還會(huì)隨著敲擊發(fā)生形狀變化(稍微有點(diǎn)假,但還是超酷的!)
這套方案直接解決了鼓手們最頭疼的問(wèn)題:架子鼓的購(gòu)買(mǎi)和維護(hù)、裝鼓的車(chē)和儲(chǔ)藏室、昂貴的隔音裝修和不爽的鄰居……
Aerodrums 能夠輸出標(biāo)準(zhǔn) MIDI 數(shù)字音樂(lè)信號(hào),目前的市場(chǎng)售價(jià)只有 199 美元。
像個(gè)法師一樣用雙手和雙臂演奏美妙旋律的音樂(lè)家名叫 Kevin Doucette,他自己設(shè)計(jì)并組建了一個(gè)小團(tuán)隊(duì)制造了這臺(tái)“空氣鋼琴”。準(zhǔn)確來(lái)講,這臺(tái)設(shè)備應(yīng)該算作合成器,能夠演奏出不同的電子音色,只要有音色庫(kù)當(dāng)然也可以模擬提琴、鋼琴或任意一種真實(shí)的樂(lè)器。
Doucette 用雙手“彈奏”空氣。
這臺(tái)合成器的核心同樣是動(dòng)作捕捉,采用的是兩顆英特爾自家的 RealSense 實(shí)感攝像模組。普通的攝像頭只能拍攝二維畫(huà)面,而 RealSense 能在三維空間里捕捉物體的姿態(tài)、位置和動(dòng)作。
在自己的左右手之間,Doucette 來(lái)回切換低音和高音,或者鋼琴和提琴等不同音色。如果是在一場(chǎng)普通的電子音樂(lè)會(huì)上,想要做到這樣的隨心所欲身邊至少要有三四臺(tái)鍵盤(pán)吧?
這般酷炫的場(chǎng)景出現(xiàn)在芯片巨頭英特爾的年度盛會(huì)上已經(jīng)不是第一次了,如果說(shuō)樂(lè)視擅長(zhǎng)開(kāi)發(fā)布會(huì),那么英特爾應(yīng)該算得上科技公司里最會(huì)開(kāi)音樂(lè)會(huì)的了。
往屆 IDF 上,音樂(lè)家?guī)е娴奶崆?、吉他或其他?lè)器演奏,英特爾用 RealSense 來(lái)拍攝他們,用詭異的光環(huán)、粒子特效和畫(huà)面疊加起來(lái)呈現(xiàn)朦朧迷幻的效果。今年,虛擬/增強(qiáng)現(xiàn)實(shí)技術(shù)的質(zhì)變,給英特爾的音樂(lè)會(huì)事業(yè)帶來(lái)了一次全面升級(jí)……
說(shuō)不定明年,我們都可以躺在自己的家里戴著頭顯參加 IDF 了。