2018年11月1日,百度世界大會在北京·中國大飯店如期舉行,會上,百度公司創(chuàng)始人,董事長兼CEO李彥宏宣布百度與海淀區(qū)打造的全球首個AI公園今天正式開放,百度AR將肢體識別跟蹤技術應用于大屏人機交互所打造的AR打太極大屏也首次公開亮相。不僅有內(nèi)容形態(tài)與互動方式的交互升級,本次大會,百度DuMix AR平臺也公布了全新的能力與解決方案。
在百度大腦分論壇上,百度三維視覺首席科學家楊睿剛與大家分享了百度在3D視覺方面的最新進展,其中重點發(fā)布了百度AR視頻特效解決方案。立足以技術和場景創(chuàng)新驅(qū)動特效能力升級,DuMix AR平臺核心布局人臉特效、美化特效、人體特效、環(huán)境特效等四大方向,開放業(yè)內(nèi)領先的20余項AR視頻特效能力并持續(xù)迭代,全面賦能開發(fā)者。
基于百度核心視覺技術優(yōu)勢,孵化領先的AR視頻特效能力作為百度大腦的核心能力之一,百度在計算機視覺領域首創(chuàng)了Pyramidbox、Attention Clusters等多項算法,在識別人、識別物、捕捉關系三個技術領域均具備了業(yè)界最領先的技術儲備。同時結(jié)合長期積累的肢體檢測、圖像分割、目標檢測等深度學習技術,自主研發(fā)的高性能移動端預測框架,以及先進的模型壓縮和計算加速技術,成功打造出面向移動端的領先AR視頻特效解決方案。
AR特效能力應用于視頻拍攝場景,為視頻拍攝用戶提供了非常便捷的創(chuàng)作工具。直觀的說,很多創(chuàng)意想法在拍攝時就能通AR特效實現(xiàn),而不需要依賴復雜的后期。世界大會現(xiàn)場,楊睿剛向大家演示了場景感知、風格遷移濾鏡、肢體變形等AR視頻特效的技術Demo。
通過整合場景分類、圖像分割、SLAM等核心技術,百度DuMix AR平臺創(chuàng)新研發(fā)了智能化場景感知能力,實時感知用戶拍攝場景、觸發(fā)環(huán)境特效,通過特效內(nèi)容與場景的強關聯(lián)體現(xiàn)智能性,幫助創(chuàng)作者演繹完整的場景故事;風格遷移濾鏡能力則實現(xiàn)了對整體環(huán)境的風格特效加持,為環(huán)境背景“一鍵換裝”;此外,先進的移動端實時肢體特征點識別技術能夠自動辨識畫面中人體各肢體部位位置,配合百度AR渲染引擎,為用戶視頻疊加圖像變形特效,產(chǎn)生肢體變形的趣味動態(tài)效果。
首推以人臉特效為核心的AR視頻特效解決方案在本次大會發(fā)布的新版DuMix?AR SDK中,已率先向開發(fā)者全面開放包含人臉靜態(tài)/動態(tài)貼紙,美顏濾鏡(美白、大眼、瘦臉等)多項人臉AR特效能力,據(jù)悉這些能力均具備精準定位、大角度追蹤,并且在極端環(huán)境下展現(xiàn)高穩(wěn)定性的優(yōu)勢。
百度AR表示,DuMix?AR平臺將開放20余項AR視頻特效能力全面賦能開發(fā)者,并依靠這些基礎能力和相互疊加的組合玩法形成一套完整的AR視頻解決方案。涵蓋四大技術應用方向的全面能力矩陣、整合百度AI+AR多重能力、更加易用的平臺工具和完善的服務體系,為開發(fā)者與行業(yè)合作伙伴提供了高效、低成本的內(nèi)容制作服務;同時結(jié)合百度強大分發(fā)優(yōu)勢,助力合作伙伴實現(xiàn)業(yè)務創(chuàng)新、創(chuàng)造巨大的用戶價值。
此次強勢布局AR視頻特效,百度AR旨在打造業(yè)界最智能的AR特效視頻拍攝解決方案,引領業(yè)界能力及玩法風向標。這是百度DuMix AR平臺在內(nèi)容形態(tài)和交互創(chuàng)新上的全新嘗試,在深耕營銷、教育、旅游等行業(yè)應用場景的基礎上,不斷開拓AR技術應用的模式與邊界,擴大AR內(nèi)容生態(tài)矩陣、推動AR內(nèi)容產(chǎn)業(yè)變革,發(fā)掘和創(chuàng)造更廣闊的價值空間。
目前,百度AR視頻特效解決方案已經(jīng)陸續(xù)與全民小視頻、百度貼吧、好看視頻等多個垂直內(nèi)容合作伙伴開展探索合作,將持續(xù)推動AR視頻制作成為AR技術應用的又一常態(tài)化新場景,吸引越來越多的優(yōu)質(zhì)內(nèi)容生產(chǎn)者加入百度AR生態(tài)。