Xilinx為專業(yè)音視頻和廣播平臺增添高級機(jī)器學(xué)習(xí)功能
2020年2月11日，中國北京——自適應(yīng)和智能計算的全球領(lǐng)先企業(yè)賽靈思公司今天宣布，針對面向?qū)I(yè)音頻/視頻(Pro AV)和廣播市場的賽靈思器件推出一系列全新的高級機(jī)器學(xué)習(xí)(ML)功能。此外，賽靈思還演示了業(yè)界首個基于7nm Versal?器件的可編程HDMI 2.1實(shí)現(xiàn)方案。賽靈思將在本周于阿姆斯特丹舉辦的2020年歐洲集成系統(tǒng)展(ISE)上展出這些功能和更多其他功能。上述解決方案以及賽靈思面向Pro AV和廣播市場推出的其他高度自適應(yīng)解決方案，旨在幫助客戶降低成本、適應(yīng)未來，同時適應(yīng)全新的使用模式以及不斷發(fā)展演進(jìn)的產(chǎn)業(yè)標(biāo)準(zhǔn)。
面向AI邊緣處理的高級ML功能
面向賽靈思Pro AV和廣播平臺全新推出的ML功能包括感興趣區(qū)域編碼(region-of-interest encoding)、智能數(shù)字標(biāo)牌(intelligent digital signage)、自動對象跟蹤(automatic object tracking)和窗口剪切(window cropping)以及語音識別(speech recognition)?，F(xiàn)在，客戶能夠充分運(yùn)用賽靈思器件上的這些ML功能，包括已經(jīng)高度集成的Zynq?UltraScale+?MPSoC平臺，用于實(shí)現(xiàn)AI邊緣處理。將實(shí)時音視頻處理、AV連接接口、編解碼器、IP聯(lián)網(wǎng)、CPU和GPU集成在可擴(kuò)展的自適應(yīng)單芯片解決方案中，能為用戶顯著節(jié)省空間、功耗和成本。
賽靈思Pro AV與廣播業(yè)務(wù)總監(jiān)Ramesh Iyer表示：“機(jī)器學(xué)習(xí)作為一種快速發(fā)展的技術(shù)，正在激發(fā)Pro AV與廣播領(lǐng)域的全新使用模式。在賽靈思自適應(yīng)平臺中添加ML功能，實(shí)現(xiàn)了高度集成的AV處理器，為8K視頻、IP音視頻和壓縮功能提供了業(yè)經(jīng)驗(yàn)證的支持?，F(xiàn)在通過增添多種高級功能，有助于開展商業(yè)化分析、提高工作流效率和增強(qiáng)可用性。最終，這些集成ML功能將幫助企業(yè)加速創(chuàng)新、實(shí)現(xiàn)自身差異化，并加快產(chǎn)品上市進(jìn)程?！?/p>
Pro AV市場客戶能夠?qū)⑦@些全新的ML功能用于多種應(yīng)用和工作負(fù)載。主要包括：
·感興趣區(qū)域編碼——借助ML和Zynq UltraScale+MPSoC集成型H.264/H.265編解碼器，保持這些區(qū)域的高質(zhì)量視頻畫質(zhì)、加大背景壓縮幅度，從而更好地檢測人臉和特征。這種方法能降低總比特率，大幅節(jié)省實(shí)時視頻流的成本。
·智能數(shù)字標(biāo)牌——使用ML模型檢測性別、年齡和手勢，在數(shù)字標(biāo)牌上提供針對性的交互廣告。這種方法能為廣告商帶來更高的投資回報率以及可獲利的行為指標(biāo)。
·自動對象跟蹤與窗口裁剪——使用ML功能，從單個4K攝像頭輸出多個高清窗口。這項功能尤其適用于在實(shí)況播報和控制室中提供畫面切換內(nèi)容。
·語音識別——根據(jù)語音自動輸出文本，理想適用于會議記錄內(nèi)容自動轉(zhuǎn)錄以及會議與協(xié)作中的語言翻譯。
首款在7nm器件上實(shí)現(xiàn)的的HDMI 2.1方案
在ISE 2020上，賽靈思將演示業(yè)界首款基于賽靈思7nm Versal?器件的可編程HDMI 2.1實(shí)現(xiàn)方案。該方案基于賽靈思首款自適應(yīng)計算加速平臺(ACAP)構(gòu)建。ACAP是一款具有變革意義的全新異構(gòu)計算器件，其功能遠(yuǎn)超常規(guī)的CPU、GPU和FPGA。
HDMI 2.1數(shù)據(jù)速率高達(dá)48Gbps，支持8K60和4K120等一系列更高的視頻分辨率和幀率，從而幫助LED畫面墻、大幅面顯示屏、數(shù)字標(biāo)牌以及運(yùn)動賽事實(shí)況轉(zhuǎn)播等需要高速視頻功能的應(yīng)用提供更加身臨其境的體驗(yàn)?；赩ersal ACAP的HDMI 2.1實(shí)現(xiàn)方案專門支持這項標(biāo)準(zhǔn)，可以幫助客戶發(fā)送、接收和處理高達(dá)8K(7680x 4320像素)的超高分辨率(UHD)視頻。
7nm Versal ACAP在軟件可編程芯片架構(gòu)下提供了可擴(kuò)展的自適應(yīng)智能化引擎，將嵌入式軟件、多通道AV處理流水線和AI推斷緊密結(jié)合。此外，還將實(shí)時視頻處理、AV連接接口、編解碼器、IP聯(lián)網(wǎng)、CPU、GPU和其他功能集成在單芯片解決方案中，也能為客戶節(jié)省空間、功耗和成本。
2020年歐洲集成系統(tǒng)展
賽靈思將在本周于荷蘭阿姆斯特丹舉辦的2020年歐洲集成系統(tǒng)展上的#15-D240號展臺亮相，展出面向Pro AV和廣播市場的全新ML功能、首款在7nm器件上的可編程HDMI 2.1實(shí)現(xiàn)方案以及其他業(yè)界領(lǐng)先的解決方案。
下載文檔
