[導(dǎo)讀]H.264標(biāo)準(zhǔn)的應(yīng)用,為視頻的網(wǎng)絡(luò)傳輸,尤其是低帶寬下(如無線傳輸方式)的傳輸提供了技術(shù)支持。在信息爆炸的今天,市場要求設(shè)計人員推出產(chǎn)品的速度越來越快,而且為了保持產(chǎn)品的競爭力,在產(chǎn)品價格、產(chǎn)品應(yīng)用功能特點(diǎn)上要保持足夠優(yōu)勢,尤其是在多媒體市場領(lǐng)域。
進(jìn)入網(wǎng)絡(luò)時代以來,龐大的信息流帶來了人類文化的豐富,也帶來了存儲信息的煩惱。尤其是視頻信息的龐大數(shù)據(jù),催生了視頻壓縮技術(shù)的需求。視頻壓縮技術(shù)成為多媒體時代最熱門的技術(shù)之一,并廣泛地應(yīng)用在電視、電影、可視電話、視頻會議、遠(yuǎn)程監(jiān)控等圖像傳輸和存儲的領(lǐng)域。
H.264視頻壓縮原理
從信息論觀點(diǎn)來看,圖像作為一個信源,描述信源的數(shù)據(jù)是信息量(信源熵)和信息冗余量之和。信息冗余量有許多種,如空間冗余、時間冗余、結(jié)構(gòu)冗余、知識冗余、視覺冗余等,數(shù)據(jù)壓縮實(shí)質(zhì)上是減少這些冗余量??梢娙哂嗔繙p少可以減少數(shù)據(jù)量而不減少信源的信息量。從數(shù)學(xué)上講,圖像可以看作一個多維函數(shù),壓縮描述這個函數(shù)的數(shù)據(jù)量實(shí)質(zhì)是減少其相關(guān)性。
根據(jù)圖像信息的組成元素,H.264采用了幀內(nèi)預(yù)測、幀間預(yù)測、運(yùn)動估值和運(yùn)動補(bǔ)償、整數(shù)變換等方式,以提高對圖像的壓縮率。其中幀內(nèi)預(yù)測是H.264根據(jù)圖像中相鄰像素可能相同的性質(zhì),利用相鄰像素的相關(guān)性,采用新的幀內(nèi)預(yù)測模式,通過當(dāng)前像素塊的左邊和上邊的像素(已編碼重建的像素)進(jìn)行預(yù)測,只對實(shí)際值和預(yù)測值的差值進(jìn)行編碼,從而能用較少的比特數(shù)來表達(dá)幀內(nèi)編碼的像素塊信息;而幀間預(yù)測通過多幀參考和更小運(yùn)動預(yù)測區(qū)域等方法對下一幀進(jìn)行精確預(yù)測,從而減少傳輸?shù)臄?shù)據(jù)量,實(shí)現(xiàn)降低圖像的時域相關(guān)性。H.264把運(yùn)動估值和幀內(nèi)預(yù)測的殘差結(jié)果從時域變換到頻域,使用了類似于4×4離散余弦變換(DCT)的整數(shù)變換,而不是像MPEG-2和MPEG-4那樣采用8×8 DCT的浮點(diǎn)數(shù)變換。以整數(shù)為基礎(chǔ)的空間變換具備效果好、計算快(只需加法與移位運(yùn)算),反變換過程中不會出現(xiàn)適配問題等優(yōu)點(diǎn),并且結(jié)合量化過程,保證了在16位計算系統(tǒng)中,計算結(jié)果有最大精度且不會溢出。4×4的變換塊也8×8更能減少塊效應(yīng)和震鈴效應(yīng)。
Hi3510工作原理
Hi3510是海思公司推出的一款基于H.264 BP算法的視頻壓縮芯片,該芯片采用ARM+DSP+硬件加速引擎的多核高集成度的SoC構(gòu)架,具備強(qiáng)大的視頻處理功能??蓪?shí)現(xiàn)DVD畫質(zhì)的實(shí)時編碼性能,能自適應(yīng)各種網(wǎng)絡(luò)環(huán)境,確保畫面的清晰度和實(shí)時性,低碼率的H.264編碼技術(shù)極大減少網(wǎng)絡(luò)存儲空間,并通過集成DES/3DES加解密硬件引擎確保網(wǎng)絡(luò)安全。Hi3510采用0.13μm工藝、LFBGA400封裝,大小為19×19mm,引腳間距為0.8mm,片內(nèi)集成了包括數(shù)字視頻接口、USB、ETH、I2S、I2C、GPIO、SPI、UART、SDRAM、DDR等接口,滿足各種應(yīng)用場景的設(shè)備開發(fā)的同時能大大降低了設(shè)備的BOM成本。
Hi3510的工作原理:視頻輸入單元通過ITU-R BT.601/656接口接收由VADC輸出的數(shù)字視頻信息,并通過AHB總線把接收到的原始圖像寫入到外存(SDR SDRAM或DDR SDRAM)中;視頻編解碼器從外存中讀取圖像,進(jìn)行運(yùn)動估計(幀間預(yù)測)、幀內(nèi)預(yù)測、DCT變換、量化、熵編碼(CAVLC+Exp-Golomb)、IDCT變換、反量化、運(yùn)動補(bǔ)償?shù)炔僮?,最后將符合H.264協(xié)議的裸碼流和編碼重構(gòu)幀(作為下一幀的參考幀)寫入到外存中;視頻輸出單元從外存中讀取圖像并通過ITU-R BT.601/656接口送給VDAC進(jìn)行顯示,應(yīng)用的需求不同,視頻輸出單元從外存中讀取的圖像內(nèi)容也不同,當(dāng)需要對輸入圖像進(jìn)行預(yù)覽時,視頻輸出單元從外存中讀取原始圖像,當(dāng)需要觀察視頻編碼器的編碼效果時,視頻輸出單元從外存中讀取編碼重構(gòu)幀;ARM對視頻編碼器輸出的碼流進(jìn)行協(xié)議棧的封裝,然后送網(wǎng)口發(fā)送,以實(shí)現(xiàn)視頻點(diǎn)播業(yè)務(wù)。
如圖1所示,該芯片由ARM+DSP+視頻編解碼加速器+圖形引擎縮放器的核心構(gòu)成,集成了豐富的外圍接口,并內(nèi)部集成包括如數(shù)字水印、DES/3DES算法,使得單芯片能適應(yīng)基乎所有的工作,降低與其它芯片配合的開發(fā)難度,也免除廠商對算法等標(biāo)準(zhǔn)部分的內(nèi)容進(jìn)行重復(fù)開發(fā),大大降低了設(shè)備廠商的投入門檻。配合海思不同應(yīng)用形態(tài)的開發(fā)包,可以開發(fā)出PMP、可視電話、網(wǎng)絡(luò)監(jiān)控、PVR、可視對講等各種產(chǎn)品。
圖1:Hi3510 H.264音視頻編解碼SoC邏輯框圖。
Hi3510編解碼方案的實(shí)現(xiàn)
作為SoC架構(gòu)的編解碼芯片,Hi3510在設(shè)計時充分考慮到兼容性和使用的方便性。支持幾乎所有的公司生產(chǎn)的系列AD/DA芯片。Hi3510既可以作為獨(dú)立的編碼器工作,也可以作為獨(dú)立的解碼器工作,也可以同時編解碼工作,充分考慮到了編解碼市場的各種應(yīng)用場合。Hi3510是一個典型的多應(yīng)用的單芯片解決方案,大大降低了設(shè)備的BOM組成和成本。如圖2所示為芯片同時編解碼的應(yīng)用。
圖2:Hi3510是一款典型的多應(yīng)用的單芯片解決方案。
[!--empirenews.page--]i3510編解碼的應(yīng)用
Hi3510自帶的Linux操作系統(tǒng)(同時支持Vxworks、WinCE等開放式操作系統(tǒng))和ARM處理器,使得芯片除了編解碼功能外,還可以實(shí)現(xiàn)許多豐富的應(yīng)用功能開發(fā)。如圖2所示,只要附加一片普通AD就可實(shí)現(xiàn)復(fù)合視頻信號的數(shù)字化、壓縮和存儲和傳輸?shù)墓δ?。Hi3510開發(fā)包提供上層API接口,就可以調(diào)用實(shí)現(xiàn)所有的芯片功能,并能開發(fā)自己的個性化功能。圖3為芯片的編碼方案的應(yīng)用設(shè)計。
圖3:Hi3510芯片編碼方案的應(yīng)用設(shè)計。
而解碼器應(yīng)用在架構(gòu)設(shè)計上與編碼器相同(方便方案可保持一致性,可實(shí)現(xiàn)一套硬件滿足不通需求,只需要軟件升級)。解碼器只需要配搭DA芯片(如果是LCD數(shù)字屏幕可以節(jié)省該芯片),就可實(shí)現(xiàn)把數(shù)據(jù)碼流解碼的作用,并且通過GUI或者OSD實(shí)現(xiàn)用戶人機(jī)互動的菜單操作,實(shí)現(xiàn)PMP等類似功能的產(chǎn)品應(yīng)用。圖4為芯片的解碼方案的應(yīng)用設(shè)計。
圖4:Hi3510芯片解碼方案的應(yīng)用設(shè)計。
本文小結(jié)
H.264標(biāo)準(zhǔn)的應(yīng)用,為視頻的網(wǎng)絡(luò)傳輸,尤其是低帶寬下(如無線傳輸方式)的傳輸提供了技術(shù)支持。在信息爆炸的今天,市場要求設(shè)計人員推出產(chǎn)品的速度越來越快,而且為了保持產(chǎn)品的競爭力,在產(chǎn)品價格、產(chǎn)品應(yīng)用功能特點(diǎn)上要保持足夠優(yōu)勢,尤其是在多媒體市場領(lǐng)域。海思的SoC芯片在提供了標(biāo)準(zhǔn)算法的基礎(chǔ)上,給予設(shè)計人員最大的靈活度以設(shè)計合適的產(chǎn)品,大大降低了廠商的投入成本,縮短了廠商的推出新產(chǎn)品的時間,為贏得市場做準(zhǔn)備。
本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
它涵蓋了從音頻和視頻信號的采集、編碼、傳輸?shù)浇獯a、播放的整個過程,并且能夠支持多種終端設(shè)備的接入和使用。
關(guān)鍵字:
音視頻
濟(jì)南2025年4月22日 /美通社/ -- 3月28日,2025慧聰品牌巡展——山東?濟(jì)南站于山東怡豪大飯店盛大開啟。此次巡展由慧聰安防網(wǎng)、慧聰物聯(lián)網(wǎng)、慧聰音響燈光網(wǎng)、慧聰LED屏網(wǎng)、慧聰教育網(wǎng)聯(lián)合主辦,吸引了來自安防、...
關(guān)鍵字:
AI
希捷
音視頻
BSP
4月21日消息,視頻技術(shù)前沿研究與應(yīng)用研討會近期在北京舉行,活動由阿里巴巴達(dá)摩院舉辦,中國網(wǎng)絡(luò)視聽協(xié)會副會長陶嘉慶等行業(yè)專家出席。達(dá)摩院視頻技術(shù)實(shí)驗(yàn)室負(fù)責(zé)人葉琰介紹,新一代視頻編解碼標(biāo)準(zhǔn)H.266正從成熟走向主流,在頭部...
關(guān)鍵字:
DAMO266
視頻編解碼
H.266
深圳2025年3月10日 /美通社/ -- 2025年3月7日至9日,亞洲規(guī)模最大的智慧顯示與系統(tǒng)集成展會——ISLE 2025在深圳國際會展中心(寶安新館)成功舉辦。本屆展會吸引了全球200多個國家和地區(qū)的數(shù)萬名專業(yè)觀...
關(guān)鍵字:
系統(tǒng)集成
ISL
AI
音視頻
深圳2025年2月11日 /美通社/ -- 作為亞洲首屈一指的智慧顯示及系統(tǒng)集成展,ISLE(國際智慧顯示及系統(tǒng)集成展)將于2025年3月7日至9日在深圳國際會展中心舉行。 深圳作為全球LED顯示屏和集成系統(tǒng)產(chǎn)品的...
關(guān)鍵字:
LED顯示屏
集成系統(tǒng)
ISL
音視頻
深圳2024年7月22日 /美通社/ -- 2024年7月12日,國際獨(dú)立第三方檢測、檢驗(yàn)和認(rèn)證機(jī)構(gòu)德國萊茵TÜV大中華區(qū)(簡稱"TÜV萊茵&q...
關(guān)鍵字:
消費(fèi)電子產(chǎn)品
終端
音視頻
電子電氣
在蘋果公司帶動下,TWS(Ture Wireless Stereo)真無線立體聲耳機(jī)隨之興起。從2016年推出的半入耳式AirPods1,到2018年的入耳式AirPods2和2021年的半入耳式AirPods3;從半入...
關(guān)鍵字:
開放式耳機(jī)
SOC芯片
電池
上海2023年8月8日 /美通社/ -- 音頻、視頻和協(xié)作解決方案領(lǐng)軍企業(yè) Jabra 宣布,全球化工業(yè)集團(tuán)丹佛斯(Danfoss)部署Jabra PanaCast 50智能音視頻一體機(jī)及全新Evolve2系列...
關(guān)鍵字:
EV
可持續(xù)發(fā)展
音視頻
ST
2023年7月5日,高性能連接解決方案領(lǐng)先供應(yīng)商Valens Semiconductor(紐約證交所代碼:VLN)今日宣布其董事會已任命Peter Kuo為董事會和審計委員會成員。他將接替自2021年9月以來擔(dān)任董事會和...
關(guān)鍵字:
汽車
音視頻
(全球TMT2022年8月23日訊)8月12日,海光信息正式登陸科創(chuàng)板。此次IPO,海光信息發(fā)行價為36元/股,開盤大漲94.44%,市值一度超1610億元。招股書顯示,2019年至2021年,海光信息營業(yè)收入分別為3...
關(guān)鍵字:
國產(chǎn)芯片
CPU
SOC芯片
處理器
LT6911C 適用于 VR/智能手機(jī) / 顯示應(yīng)用。
對于 MIPI?DSI / CSI 輸出,LT6911C 具有可配置的單端口或雙端口 MIPI?DSI/CSI,具有 1 個高速時鐘通道和 1~4 個高速數(shù)據(jù)...
關(guān)鍵字:
音視頻
廣州2022年6月7日 /美通社/ -- 在疫情的影響下,部分制造商產(chǎn)品出口歐美市場受到了嚴(yán)重的沖擊。不少廠商將關(guān)注點(diǎn)轉(zhuǎn)向中東市場,例如阿聯(lián)酋,期望挖掘新的商機(jī)。企業(yè)在把握商...
關(guān)鍵字:
音視頻
無線通訊
研討會
電源適配器
智能座艙融合車載互聯(lián)網(wǎng)、人機(jī)交互、新型材料等智能化場景備受人們的喜愛,特別是智能座艙的硬件設(shè)備、軟件服務(wù)的落地更易被用戶感受,故而成為車企尋求差異化的重要方面。其中,作為硬件設(shè)備、軟件服務(wù)基礎(chǔ)的車載芯片,自然成為行業(yè)特別...
關(guān)鍵字:
智能座艙
SOC芯片
車載互聯(lián)網(wǎng)
關(guān)注、星標(biāo)公眾號,直達(dá)精彩內(nèi)容文章來源:網(wǎng)絡(luò)音視頻業(yè)務(wù)的繁榮,必定造就開源項(xiàng)目的繁榮,反過來說也是一樣的,互相成就。遍地都是開源的輪子,如何選擇?提供一個有效的角度,可作為避坑指南。如果已經(jīng)入坑了,您躺平就好,入坑就已經(jīng)...
關(guān)鍵字:
開源
音視頻
10月31日,吉利汽車發(fā)布“智能吉利2025”戰(zhàn)略,并宣布將于明年量產(chǎn)中國首顆7nm制程的車規(guī)級SOC芯片。發(fā)布會上吉利表示,由湖北芯擎科技自研的智能座艙芯片SE1000將于2022年量產(chǎn),芯片采用了車規(guī)級7nm工藝,面...
關(guān)鍵字:
SOC芯片
吉利汽車
(全球TMT2021年7月15日訊)近日,專業(yè)級音視頻協(xié)作服務(wù)和解決方案提供商科天云入選IDC中國云視頻會議創(chuàng)新者。 《IDC 創(chuàng)新者:中國云視頻會議,2021》報告,由國際數(shù)據(jù)公司IDC撰寫
關(guān)鍵字:
IDC
視頻會議
音視頻
眾所周知,業(yè)界需要作出相應(yīng)的準(zhǔn)備以應(yīng)對 IP 音視頻傳輸?shù)目焖倨占?。但對于許多仍疑惑于自身的下一代產(chǎn)品應(yīng)該如何支持 IP 音視頻傳輸?shù)膹臉I(yè)者而言,在前途不明朗的情況下選擇任何特定的協(xié)議無異于孤注一擲。
關(guān)鍵字:
SoC
IP
音視頻
音視頻產(chǎn)品的抗干擾研究
電磁兼容,即EMC(ElectromagneTIcCompaTIbility),是指設(shè)備或系統(tǒng)在所處的電磁環(huán)境中能正常工作且不對該環(huán)境中其他事物構(gòu)成不能承受的電磁騷擾的能力。
關(guān)鍵字:
抗干擾
音視頻
長期以來,盡管中國的數(shù)字音視頻產(chǎn)業(yè)在全球市場上始終占據(jù)著“中國制造”的優(yōu)勢,但同時也一直籠罩在“缺乏自主知識產(chǎn)權(quán)核心技術(shù)”的陰影之下,并屢屢遭遇到
關(guān)鍵字:
音視頻
avs標(biāo)準(zhǔn)
最近,智能音箱確實(shí)“火”了。在今年的Google I/O大會上,內(nèi)置Google Assistant語音助手的智能音箱Google Home讓人印象深刻;在2016
關(guān)鍵字:
智能音箱
物聯(lián)網(wǎng)
音視頻