岱仕科技推出了全球首個集成動作捕捉和力反饋功能為一體的Dexmo手套
繼2014年首次公開其力反饋手套的設計雛形后,經(jīng)過五十多代的版本迭代,Dexta Robotics(岱仕科技)推出了全球首個集成動作捕捉和力反饋功能為一體的Dexmo手套。
部分迭代產(chǎn)品圖
用戶可以在虛擬世界中使用自己的雙手,并且可以體驗到擬真實的觸感。力反饋在提供抓握感的同時,還能傳遞虛擬物體的大小、形狀和軟硬。用戶不需要學習任何按鍵操作就可以在虛擬世界中做任何在現(xiàn)實生活中做的動作,比如撥動開關,按壓按鍵,甚至扭動門閥等復雜動作。相比傳統(tǒng)手柄控制器,力反饋手套可以讓用戶在虛擬世界中完成更精密復雜的手部操作,實現(xiàn)貼近真實的體驗, 并達成更好的培訓效果。
公司早在2017年就對外宣布過DK1的小批量生產(chǎn)。在收集了眾多早期使用者的反饋后,公司對產(chǎn)品的可生產(chǎn)能力、硬件穩(wěn)定性、核心功能、人體工學、軟件支持等各方面進行全面升級,并將于2019年6月正式對外發(fā)售其升級版本Dexmo 企業(yè)版。產(chǎn)品已經(jīng)完成穩(wěn)定量產(chǎn)并備有現(xiàn)貨,可從官網(wǎng)直接下單訂購。
Dexmo 的生產(chǎn)流程
“VR/MR技術(shù)發(fā)展至今,給人們帶來的沉浸感主要停留在視覺和聽覺兩個維度。由于力反饋這一技術(shù)難題,觸覺的交互始終很匱乏?,F(xiàn)有技術(shù)在觸碰到虛擬物體時,往往只能靠單點的震動反饋來‘提示’用戶,既不能阻止手指活動,也不能讓用戶感受到真實的力,在觸覺反饋上產(chǎn)生了和現(xiàn)實世界的巨大差異?!?Dexta RoboTIcs的技術(shù)顧問, 劍橋大學先進交互系統(tǒng)組的發(fā)起人Dr. Per Ola Kristensson教授這樣評價道, “而在Dexmo力反饋手套的幫助下,用戶不僅可以在虛擬世界看到自己的雙手,還可以感受到真實的觸感,這無疑能大大提升沉浸感?!?/p>
那么它具體是怎么工作的呢?“Dexmo獨特的機械外骨骼結(jié)構(gòu)可以跟隨手指一起運動,采集手部動作。這些數(shù)據(jù)被用來在虛擬空間重建準確的手部模型,將現(xiàn)實中的手部動作完整地映射在虛擬世界,讓用戶可以像在現(xiàn)實中一樣,靈活地使用雙手。當虛擬手與虛擬物體接觸時,我們所研發(fā)的手部交互引擎會開始自動計算其中的物理碰撞和產(chǎn)生的力,并通過力反饋裝置來限制手指活動伸展,施加‘反推’力作用在手指上,使佩戴者如同摸到了真實的物體一樣,在虛擬世界中延續(xù)和現(xiàn)實世界一樣的感知。比如當你擰開水龍頭時,你可以感受到旋鈕的形狀,并感知到水滴墜落在手指上的力度。”Dexta RoboTIcs的產(chǎn)品工程師唐聚學介紹。
對于大眾來說,現(xiàn)有的控制器技術(shù)上的搖桿和按鍵需要學習與適應,而使用自己的雙手卻不需要任何學習。Dexmo提供了具有自然直覺的交互方案:它允許人們直接使用自己的雙手,直覺的操作和近似于零的學習成本會大大提升體驗。
Dexta RoboTIcs的創(chuàng)始人兼CEO谷逍馳表示: “智能手機曾緩慢發(fā)展了很多年,它的真正普及卻起源于iPhone革命性的電容屏觸摸交互技術(shù),讓不識字的孩子剛上手都能輕易地使用?,F(xiàn)在的VR、MR系統(tǒng)就好像在iPhone面世前的按鍵智能手機一樣,它們可以用,但卻不好用。為了加速它的發(fā)展,我們一直以‘讓交互傻瓜般地簡單’為目標,最終開發(fā)出了能夠自然使用雙手、具有高沉浸感、極低學習成本且輕便的力反饋手套。我們成功將5個力反饋裝置,11個動作捕捉傳感器,可充電電池,以及整個控制系統(tǒng)集成一體,創(chuàng)造了重量僅為290g的便攜無線Dexmo。這項發(fā)明在交互技術(shù)的發(fā)展歷史上是開創(chuàng)性的?!?/p>
Dexmo配有完整易用的SDK開發(fā)支持。在得到早期客戶的反饋后,Dexta RoboTIcs團隊不斷改進,最終制作了非常詳盡的開發(fā)指南,即使缺少背景知識和軟件開發(fā)經(jīng)驗的人也能夠按照步驟指南使用SDK 。SDK適配所有主流的VR/MR頭戴式顯示器和定位系統(tǒng),簡單配置后,即可完成手部模型位置和姿態(tài)的顯示。SDK中預設了按鈕、旋鈕、拉桿等獨立的交互模塊,開發(fā)者只需簡單的拖拽預設體、添加腳本和設置腳本參數(shù)即可完成開發(fā)。在此基礎上,根據(jù)其開發(fā)文檔接口,開發(fā)者可以輕易定義交互過程中觸碰、抓取、材質(zhì)變化引起的反饋。同時SDK中提供了多個功能的示例場景,幫助開發(fā)者結(jié)合開發(fā)文檔快速使用上述功能。
Dexmo可以運用的行業(yè)非常廣泛,比如航空航天,行業(yè)培訓,教育,游戲,醫(yī)療,遠程操作等。目前已經(jīng)在合作的落地場景有:新能源電池維修培訓,產(chǎn)線工人組裝培訓,航空駕駛艙訓練模擬,機組人員行為訓練,電廠、核電站等高危場景培訓,交互式教學,大空間游戲,醫(yī)療康復,人形機器人遙操作控制等等。
Dexta Robotics正在和車企以及代工廠等合作,在組裝、質(zhì)檢、維修等關鍵環(huán)節(jié)通過虛擬場景和逼真的觸覺反饋技術(shù)幫助企業(yè)解決工人培訓成本高、效果差的問題。在中國,生產(chǎn)線工人流失率高,這意味著很多熟練工人必須花費大量的時間來培訓新手學習操作流程,勞動成本很高。通過翻閱紙質(zhì)手冊或者看視頻學習操作流程的傳統(tǒng)方式效率低下,也很難評估真實的培訓效果。考慮到目前很多工作仍然是機器人無法代替的,工人的培訓對于企業(yè)的生產(chǎn)效率,安全生產(chǎn)都有著重大意義。
隨著新能源汽車的快速發(fā)展,在裝配、質(zhì)量控制、修理上將會有很大的需求。在Dexta Robotics合作案例中,有車企正在使用Dexmo培訓新入職工學習安裝線束,讓工人的動作準確地反映在虛擬訓練中,靈活使用手指學習操作步驟,并及時得到評估,確保工人在正式上產(chǎn)線前達到規(guī)范要求。制造商在一開始做好員工的仿真培訓,不但可以節(jié)省大量時間和成本,也會在源頭上杜絕很多安全隱患。不止是工人培訓,Dexmo在仿真的虛擬環(huán)境中逼真的觸感和完成精細動作的能力使它能廣泛參與到各個關鍵環(huán)節(jié)。比如改進車輛的設計流程。設計師不再需要昂貴耗時的物理原型來感受新模型,他們可以在VR里實時觸摸到新設計并檢測創(chuàng)意。這能幫助汽車制造商做出更好的決策,也大大加速了車企的創(chuàng)新迭代。
Dexmo的應用場景
Dexta Robotics于2014年由一伙熱愛機器人的工程師創(chuàng)立,致力于利用先進的機器人技術(shù)為VR/MR創(chuàng)造下一代交互界面,加速下一代媒體技術(shù)的普及。Dexta Robotics于2018年年初獲得數(shù)千萬天使輪融資,由磐谷創(chuàng)投和欣旺達聯(lián)合投資。其核心團隊由來自劍橋大學、清華大學,微軟,大疆等名校名企背景的工程師組成。2018年,公司開始發(fā)售開發(fā)者版本,SDK對所有主流頭戴式顯示器提供支持?,F(xiàn)今,Dexta Robotics在全球擁有30多項授權(quán)及申請中專利,是全球領先的交互系統(tǒng)設計制造商。
Dexta Robotics在2019年會加速產(chǎn)品、技術(shù)和業(yè)務發(fā)展,和更多領域合作,讓更多人能體驗到力反饋交互技術(shù)所帶來的變革。將Dexmo帶入消費者市場,也是Dexta?Robotics努力的方向。為了將這項技術(shù)進一步帶入消費市場并普及給更多的人, 公司將需要更多的資金和合作伙伴。更多關于Dexmo的信息,請訪問Dexta Robotics官網(wǎng)https://www.dextarobotics.com,了解最新產(chǎn)品信息。