12月19日,在2019 OPPO開發(fā)者大會(ODC19)技術論壇上,OPPO圍繞5G、AI、AR及終端安全等技術方面的規(guī)劃與成果展開,聚焦“五大系統(tǒng)能力開放引擎”,與開發(fā)者共同探索5G時代的新機遇。

除了技術論壇對OPPO各項技術進行深度講解外,超1000平方米展區(qū)中還設立了多個技術項目的體驗區(qū),開發(fā)者及合作伙伴可以現(xiàn)場體驗多人AR游戲、5G云游戲、3D手部追蹤、人體3D建模等各項“黑科技”。

以5G為支點撬動AI、AR、IoT等技術融合,助力未來智慧生活

5G時代,擁抱智能,萬物互融。5G科技的進步為用戶創(chuàng)造了更便利的生活,技術的革新更為社會發(fā)展帶來更高效的運作。

OPPO 在 5G 發(fā)展的過程中做出了卓越的貢獻。早在 2015 年,OPPO 便開始著手于 5G 的研究工作,不僅全程參與了 5G 標準的制定,并且作為 5G 終端行業(yè)標準的起草單位之一,提交了超過 2500 族 5G 專利的申請,向國際標準化組織 3GPP 累計提交了超過3000 篇的文稿。

據(jù)介紹,早在2019年2月份,OPPO就利用5G實現(xiàn)全球首次的微博直播,成功展示了云游戲業(yè)務。同年5月份,OPPO第一款5G手機成功在歐洲瑞士電信成功上市。

此外,OPPO 還在積極探索未來在個域網和智能家居領域的 5G 邊緣,尋求在工業(yè)物聯(lián)網層面上的突破,讓 5G 技術的發(fā)展惠及更多企業(yè)。OPPO希望以5G為支點,撬動AI、AR、IoT等技術融合,助力未來智慧生活。

OPPO AI語音語義:神經機器翻譯引擎將開放

2019年,OPPO機器翻譯團隊取得了不錯的成績。例如,在WMT19競賽中獲得了英中新聞的第四名;在CCMT2019競賽中,獲得了多語言日英專利翻譯冠軍,英中新聞亞軍。

當前,OPPO神經機器翻譯在模型訓練和推理加速方面,做了很多工作。比如Deep Transformer、Fuse BERT into Transformer、AAN、SAN等。隨著這些技術的綜合應用,OPPO神經機器翻譯引擎,已經通過內部測試,與外部競品相比,翻譯性能處于同一水平。目前,OPPO機器翻譯引擎已經落地到OPPO內部很多業(yè)務場景中,未來將落地到更多的場景中。

據(jù)了解,OPPO神經機器翻譯引擎預計在20年將會對外開放在線API,首期將開放中英、英中、中日、日中翻譯接口,其它語種的機器翻譯服務也將會陸續(xù)開放。

“黑科技”:3D手勢識別、人體3D建模和混合現(xiàn)實

在技術論壇,OPPO還展示了自研的SLAM算法的“黑科技”,包括人體3D建模和混合現(xiàn)實,以及3D手勢識別。

當前,為了捕捉人體的3D形狀,傳統(tǒng)上有被動解和主動解。當前,3D建模采用主動解決方案,通過精密的 3D 掃描設備實現(xiàn),該方案需要昂貴的固定設備設置,既不方便,又不適合廣大消費者使用。OPPO人體3D建?；谂臄z單張RGB圖像的方法,用戶可以通過自拍來完成,當然也可以有另外一位幫用戶拍攝,這種方法易于設置,可以滿足日常場景,適合非專業(yè)用戶隨時使用。

在3D手勢識別技術上,手的3D跟蹤對于AR/VR是必不可少的組成部分,是下一代最主要的3D人機交互技術,是AR/VR中的鼠標,它在下一代計算平臺的地位類似于多點觸控對于觸屏手機的地位。OPPO為了開發(fā)自己的手勢識別算法,購買了專門采集數(shù)據(jù),樣本超過兩百萬?；诓杉臄?shù)據(jù)和深度學習,OPPO開發(fā)了緊湊、高效、準確、實時、低功耗的3D手部追蹤算法。

ARUnit2.0 連接虛實 連接你我

OPPO 開放平臺的 ARUnit 系統(tǒng)能力,能夠為開發(fā)者提供 AR 底層驅動引擎、AR 內容創(chuàng)作工具鏈、軟件 SDK、開發(fā)者應用工具和模塊等,幫助開發(fā)者降低研發(fā)接入平臺的工作量。

ARUnit的追蹤技術使用攝像頭來標識特征點,并跟蹤這些點隨著時間變化在屏幕上的移動。通過結合移動信息與手機慣性傳感器的數(shù)據(jù),ARUnit能夠在手機移動時確認自身的位置和屏幕朝向。

ARUnit對開發(fā)者而言,帶來了諸多虛擬化價值。首先,能夠幫助開發(fā)者為用戶提供足夠有趣的內容和服務,滿足用戶的使用場景;其次,虛擬世界擁有足夠豐富的資源來支撐開發(fā)者實現(xiàn)這樣的內容和服務;再者,物理世界與虛擬世界能夠緊密的對齊、關聯(lián),并導入資源;最后,用戶在物理世界的行為也能夠完整的映射到虛擬世界中。

因此,OPPO在ARUnit2.0中做了如下的升級:空間計算升級,更注重尺度的重要性;環(huán)境理解升級,更注重位置的重要性;多用戶體驗,更注重信息的密集性;骨骼跟蹤與手勢識別,更注重互動與趣味性。

此外,全新升級的ARUnit2.0開放計劃也在ODC19技術論壇正式公布。其中,空間計算升級和多用戶體驗將在2020年Q1開放,而環(huán)境理解升級和骨骼跟蹤與手勢識別預計將在2020年Q2開放。

CameraUnit&MediaUnit:影像多媒體能力開放,共建清晰流暢新視界

目前,系統(tǒng)能力與三方應用呈現(xiàn)需求的存在重合與隔斷,用戶體驗存在斷層,通過開放系統(tǒng)能力,可以讓系統(tǒng)與應用體驗相融。因此,OPPO在ODC19宣布“五大系統(tǒng)能力開放引擎”。

其中,CameraUnit主要側重影像類用戶體驗。CameraUnit的相冊能力可以將相冊中智能人物分類、圖像多標簽分類、地點分類和智能搜索等能力進行封裝,通過ContentProvider以跨進程的方式開放至三方應用,用戶在三方應用選圖片發(fā)送時,通過圖片分類和搜索可快速定位到照片,發(fā)圖的效率得到前所未有得提升。

在拍攝能力方面,CameraUnit超廣實現(xiàn)了116°超廣鏡頭,打開前所未有的廣闊視野,采用主攝+長焦鏡頭+超廣角鏡頭組合,讓三顆攝像頭「接棒式」實現(xiàn) 16-160mm「全焦段」覆蓋,釋放更多影像創(chuàng)作的自由度,三攝組合內含雙OIS光學防抖,智能感知抖動并校正,拍遠處也清晰。而超級防抖,則同時結合OIS光學防抖和EIS電子防抖,通過多源傳感器信息融合和防抖場景智能分析,陀螺儀頻率提高了2~3倍,從而更加靈敏地感應手機的運動狀態(tài),實現(xiàn)視頻拍攝中的超級防抖。此外,超級夜景功能基于RAW域根據(jù)不同攝像頭精心調試的夜景算法,結合各種場景信息,利用平臺DSP加速,可以取得高質量的夜景成像效果。開發(fā)者接入CameraUnit的拍攝能力,能夠讓用戶直接操控手機原生相機,拍出更清晰的畫面。

MediaUnit系統(tǒng)能力主要表現(xiàn)在“聽”和“視”方面的用戶體驗上。

在聽覺方面,K歌耳返采用低時延解決方案實現(xiàn)聽唱同步,系統(tǒng)級優(yōu)化的語音系統(tǒng),智能美化音色、節(jié)奏和音準,同時支持5.1&7.1聲道技術,增強聽音辨位方向感。此外,基于Audio Virtualizer算法,通過耳機還原游戲內的聲音距離和方位,并支持FRC功能。

在視覺方面,ROI編碼支持23~265格式解碼,且通過軟硬結合,靈活控制編碼,在直播場景或視頻通話場景提高清晰度,保證觀看效果,開啟ROI編碼最高可以節(jié)省35%的帶寬。特別值得一提,還有AI視頻插幀,當前視頻領域大部分電影或者電視劇只有24幀或25幀,而手機屏幕的刷新率已經到了90幀甚至更高,借助OPPO在視頻生產方面的技術,AI視頻插幀能夠為用戶帶來更強的畫面流暢度。

Hyper Boost&Link Boost:共建用戶暢爽新體驗

Hyper Boost是OPPO自主研發(fā)的全場景、系統(tǒng)級資源調度優(yōu)化方案,從系統(tǒng)、游戲和應用三個層面對智能手機全面加速。Hyper Boost能力目前已通過OPPO開放平臺對外開放,該技術能力接入快速簡單、SDK體積合理、業(yè)務兼容性強,已有超過60+款游戲及應用接入。

Hyper Boost主要包含場景加速、智能幀率、觸控優(yōu)化三大核心能力。在場景加速方面,對運存、存儲兩塊領域挖掘,讓資源調度更加智能,并率先與引擎公司合作,針對游戲中對局、團戰(zhàn)、決賽圈、開氮氣等場景進行定制加速。在智能幀率方面,繼續(xù)賦能幀率穩(wěn)定、減少卡頓,通過智能幀頻進行鎖大核提頻,預防和緩解卡頓,讓游戲幀率更穩(wěn)定。在觸控優(yōu)化方面,提供多樣化4D細膩振感,并開放馬達波形效果庫,開放能力聚焦CPU/GPU,通過對Android底層代碼的一一檢查,OPPO優(yōu)化了大量代碼邏輯,每一幀的響應時間都可以減少3~5毫秒。同時,還對同步信號進行了優(yōu)化,使得觸控幀可以更快的顯示在屏幕上。

Link Boost主要包含智能鏈路聚合能力、雙Wi-Fi能力和多路TCP能力。智能鏈路聚合能力將無線進行網絡訪問,根據(jù)實時進行優(yōu)化,開啟SSA以后,在Wi-Fi信號很好的時候,開啟了SLA,打開網頁速度提升非常明顯,在Wi-Fi信號很弱時候也會提高。雙Wi-Fi能力能夠智能匹配用戶剛剛連接過的另外一個次Wi-Fi,去輔助網絡加速,讓網絡的分流完全智能化,使得網速達到倍增效果,改善網絡不穩(wěn)定問題。多路TCP能力能夠允許雙方進行多條TCP的鏈路,充分利用多路徑提高可靠性和吞吐量。

Hyper Boost和Link Boost兩大系統(tǒng)能力,通過軟實力將充分發(fā)揮設備硬件能力,與開發(fā)者攜手共建用戶暢爽新體驗。

OPPO云安全為互聯(lián)網生態(tài)保駕護航

目前,ColorOS 全球月活躍用戶已超3.2億,覆蓋140個國家和地區(qū)。OPPO為了保障用戶信息安全,進行了全球化布局,在東南亞、印度和歐洲建立了相應的技術中心,以應對全球化互聯(lián)網信息安全。

在互聯(lián)網安全防御體系建設方面,OPPO積極開展安全組織的建設,包括終端安全、信息安全、安全部門,以及多個安全實驗室,從而保證OPPO用戶的互聯(lián)網信息的安全性。此外,為了安全品牌的建設,OPPO上線了全球500家以上的白帽子,并給予豐厚的獎勵。

在移動端的安全能力檢測方面,采用自動化和人工化的檢測,對APP進行滲透分析和安全評估,防止別有用心的應用使用第三方的SDK,以免給用戶帶來安全風險。此外,還有業(yè)務防刷和反欺詐SDK,為開發(fā)者的APP提供實時的安全服務。

據(jù)介紹,今年9月份,OPPO還拿到業(yè)內第一個泰爾信息安全五級認證。從硬件安全、系統(tǒng)安全、外圍的接口安全,以及軟件安全和數(shù)據(jù)安全層面,為用戶及開發(fā)者提供更全面的安全保護。未來,OPPO也會在AI安全、隱私安全等研究方向發(fā)力。

技術的進步帶來用戶生活的新變化,科技是行業(yè)和社會發(fā)展的核心驅動力,在萬物互融時代趨勢下,OPPO將持續(xù)關注5G、人工智能、AR、大數(shù)據(jù)等前沿技術,并將致力于構建底層硬件核心技術與系統(tǒng)能力。

意向接入OPPO“五大系統(tǒng)能力開放引擎”、云安全等各項技術能力的開發(fā)者及合作伙伴,可以通過OPPO開放平臺官網接入。