www.久久久久|狼友网站av天堂|精品国产无码a片|一级av色欲av|91在线播放视频|亚洲无码主播在线|国产精品草久在线|明星AV网站在线|污污内射久久一区|婷婷综合视频网站

當(dāng)前位置:首頁(yè) > 智能硬件 > 機(jī)器視覺(jué)
[導(dǎo)讀] 監(jiān)控系統(tǒng)嚴(yán)重依靠嵌入式視覺(jué)系統(tǒng)提供的功能加速在廣泛市場(chǎng)和系統(tǒng)中的部署。這些監(jiān)控系統(tǒng)的用途非常廣泛,包括事件和流量監(jiān)控、安全與安防用途、ISR 和商業(yè)智能。用途的多樣性也帶來(lái)了幾大挑戰(zhàn),需要系統(tǒng)設(shè)

監(jiān)控系統(tǒng)嚴(yán)重依靠嵌入式視覺(jué)系統(tǒng)提供的功能加速在廣泛市場(chǎng)和系統(tǒng)中的部署。這些監(jiān)控系統(tǒng)的用途非常廣泛,包括事件和流量監(jiān)控、安全與安防用途、ISR 和商業(yè)智能。用途的多樣性也帶來(lái)了幾大挑戰(zhàn),需要系統(tǒng)設(shè)計(jì)人員在解決方案中加以解決。它們是:
● 多攝像頭視覺(jué) – 能夠連接多個(gè)同類或異類傳感器類型。
● 計(jì)算機(jī)視覺(jué)技術(shù) - 能夠使用高級(jí)庫(kù)和框架(例如 OpenCV 和 OpenVX)進(jìn)行開(kāi)發(fā)。
● 機(jī)器學(xué)習(xí)技術(shù) – 能夠使用框架(例如 Caffe)來(lái)實(shí)現(xiàn)機(jī)器學(xué)習(xí)推斷引擎。
● 提高分辨率和幀率 – 提高每個(gè)圖像幀所需的數(shù)據(jù)處理。
 

根據(jù)用途,監(jiān)控系統(tǒng)會(huì)實(shí)現(xiàn)相應(yīng)算法(例如光流法)以檢測(cè)圖像內(nèi)的運(yùn)動(dòng)。立體視覺(jué)提供圖像內(nèi)的深度知覺(jué),也使用機(jī)器學(xué)習(xí)技術(shù)來(lái)檢測(cè)和分類圖像中的對(duì)象。

圖 1 - 實(shí)例應(yīng)用(上:面部檢測(cè)與分類,下:光流)

異構(gòu)系統(tǒng)器件,例如 All Programmable Zynq®-7000 和 Zynq® Ultrascale+™ MPSoC,正越來(lái)越多地應(yīng)用于監(jiān)控系統(tǒng)的開(kāi)發(fā)。這些器件是可編程邏輯(PL)架構(gòu)與高性能 ARM® 內(nèi)核處理器系統(tǒng)(PS)的完美結(jié)合。

與傳統(tǒng)方案相比,PL 與 PS 的緊密耦合使得創(chuàng)建的系統(tǒng)具有更強(qiáng)的響應(yīng)能力、可重配置能力以及更高的能效。基于 CPU/GPU 的傳統(tǒng) SoC 需要使用系統(tǒng)存儲(chǔ)器將圖像從一個(gè)處理階段傳送到下個(gè)階段。這會(huì)降低確定性并增大功耗和系統(tǒng)響應(yīng)時(shí)延,因?yàn)槎鄠€(gè)資源需要訪問(wèn)同一個(gè)存儲(chǔ)器,造成處理算法瓶頸。該瓶頸隨幀率和圖像分辨率增加而加重。

當(dāng)解決方案采用 Zynq-7000 或 Zynq UltraScale+ MPSoC 器件實(shí)現(xiàn)時(shí),就會(huì)打破這個(gè)瓶頸。這些器件允許設(shè)計(jì)人員在器件的 PL 中實(shí)現(xiàn)圖像處理流水線。在 PL 中創(chuàng)建真正的并行圖像流水線,其中一個(gè)階段的輸出被傳送到另一個(gè)階段的輸入。這樣能獲得確定的響應(yīng)時(shí)間,縮短時(shí)延,實(shí)現(xiàn)功耗最佳解決方案。

利用 PL 實(shí)現(xiàn)圖像處理流水線,還能獲得比傳統(tǒng) CPU/GPU SoC 方案更寬的接口能力,而后者只能獲得固定接口。PL IO 接口的靈活特性允許任意連接,支持 MIPI、Camera Link、HDMI 等行業(yè)標(biāo)準(zhǔn)接口。這種靈活特性還能實(shí)現(xiàn)定制傳統(tǒng)接口,而且能進(jìn)行升級(jí)以支持最新接口標(biāo)準(zhǔn)。利用 PL,還可以讓系統(tǒng)并行連接多個(gè)攝像頭。

不過(guò),最關(guān)鍵的是實(shí)現(xiàn)應(yīng)用算法,而且無(wú)需用硬件描述語(yǔ)言(例如 Verilog 或 VHDL)重新編寫(xiě)所有高級(jí)算法。這正是 reVISION™ 堆棧的用武之地。

圖 2 - 傳統(tǒng) CPU/GPU 方案與 Zynq-7000/Zynq UltraScale+ MPSoC 的對(duì)比

reVISION 堆棧

  reVISION 堆棧使開(kāi)發(fā)人員能夠?qū)崿F(xiàn)計(jì)算機(jī)視覺(jué)和機(jī)器學(xué)習(xí)技術(shù)。在這里,針對(duì) Zynq-7000 和 Zynq UltraScale+ MPSoC 的高級(jí)框架和庫(kù)同樣適用。為此,reVISION 將支持平臺(tái)、應(yīng)用和算法開(kāi)發(fā)的多種資源完美結(jié)合在一起。該堆棧分為三個(gè)不同等級(jí):

1、平臺(tái)開(kāi)發(fā) - 這是堆棧的最底層,是剩余堆棧層的構(gòu)建基礎(chǔ)。該層為 SDSoC™ 工具提供平臺(tái)定義。
2、 算法開(kāi)發(fā) – 這是堆棧的中間層,為所需算法的實(shí)現(xiàn)提供支持。該層有助于圖像處理和機(jī)器學(xué)習(xí)推斷引擎加快向可編程邏輯中轉(zhuǎn)移。
3、應(yīng)用開(kāi)發(fā) – 這是堆棧的最高層,可提供行業(yè)標(biāo)準(zhǔn)框架支持。該層用來(lái)開(kāi)發(fā)應(yīng)用,以便利用平臺(tái)開(kāi)發(fā)和算法開(kāi)發(fā)層。

堆棧的算法和應(yīng)用層支持傳統(tǒng)圖像處理流程和機(jī)器學(xué)習(xí)流程。在算法層中,支持用 OpenCV 庫(kù)開(kāi)發(fā)圖像處理算法。這包括:能將多種 OpenCV 功能(包括 OpenVX 內(nèi)核子集)加速放在可編程邏輯中實(shí)現(xiàn)。為支持機(jī)器學(xué)習(xí),算法開(kāi)發(fā)層提供幾種可以放在 PL 中用以實(shí)現(xiàn)機(jī)器學(xué)習(xí)推斷引擎的預(yù)定義硬件功能。然后,由應(yīng)用開(kāi)發(fā)層訪問(wèn)這些圖像處理算法和機(jī)器學(xué)習(xí)推斷引擎,用以創(chuàng)建最終應(yīng)用,并為 OpenVX 和 Caffe 等高級(jí)框架提供支持。

圖 3 - reVISION 堆棧

reVISION 堆棧能提供所有必要元素,用以實(shí)現(xiàn)高性能監(jiān)控系統(tǒng)所需的算法。

在 reVISION 中加速 OpenCV
算法開(kāi)發(fā)層的最重要優(yōu)勢(shì)之一是能夠加速多種 OpenCV 功能。該層中,可加速的 OpenCV 功能被分成四個(gè)高級(jí)類別。
1、計(jì)算 – 包括的功能有:兩個(gè)幀的絕對(duì)偏差、像素運(yùn)算(加、減和乘)、梯度和積分運(yùn)算。
2、輸入處理 – 支持位深度轉(zhuǎn)換、通道運(yùn)算、直方圖均衡化、重新映射和尺寸重調(diào)整。
3、濾波 - 支持多種濾波器,包括 Sobel、自定義卷積和高斯濾波器。
4、其他 – 提供多種功能,包括 Canny/Fast/Harris 邊緣檢測(cè)、閥值以及 SVM 和 HoG 分級(jí)器。

這些功能構(gòu)成了 OpenVX 子集的核心功能,能夠針對(duì) OpenVX 與應(yīng)用開(kāi)發(fā)層緊密集成。開(kāi)發(fā)團(tuán)隊(duì)可利用這些功能在可編程邏輯中創(chuàng)建算法流水線。以此方式在邏輯中實(shí)現(xiàn)這些功能,這樣能顯著提高算法實(shí)現(xiàn)性能。

reVISION 中的機(jī)器學(xué)習(xí)

  reVISION 提供與 Caffe 的集成,能夠?qū)崿F(xiàn)機(jī)器學(xué)習(xí)推斷引擎。與 Caffe 的集成發(fā)生在算法開(kāi)發(fā)層和應(yīng)用開(kāi)發(fā)層。Caffe 框架在 C++ 庫(kù)中為開(kāi)發(fā)人員提供大量函數(shù)庫(kù)、模型和預(yù)訓(xùn)練的權(quán)重,以及 Python™ 和 MATLAB® 捆綁程序。該框架使用戶能夠創(chuàng)建和訓(xùn)練網(wǎng)絡(luò),以執(zhí)行所需的運(yùn)算,無(wú)需重新開(kāi)始。為便于模型重用,Caffe 用戶可通過(guò)模型庫(kù)(model zoo)共享模型;庫(kù)中提供多個(gè)網(wǎng)絡(luò)模型,用戶可針對(duì)專門(mén)的任務(wù)實(shí)現(xiàn)和更新網(wǎng)絡(luò)模型。在 prototxt 文件中定義這些網(wǎng)絡(luò)和權(quán)重,當(dāng)在機(jī)器學(xué)習(xí)環(huán)境中部署時(shí),使用該文件來(lái)定義推斷引擎。

reVISION 提供 Caffe 集成功能,使機(jī)器學(xué)習(xí)推斷引擎的實(shí)現(xiàn)非常簡(jiǎn)單,只需提供 prototxt 文件即可;剩下的工作由框架來(lái)完成。然后,使用這個(gè) prototxt 文件來(lái)配置處理系統(tǒng)以及可編程邏輯中的硬件優(yōu)化庫(kù)??删幊踢壿嬘脕?lái)實(shí)現(xiàn)推斷引擎,并包含 Conv、ReLu、Pooling 等功能。

圖 4 - Caffe 流程集成

機(jī)器學(xué)習(xí)推斷引擎中的數(shù)字表達(dá)對(duì)性能也起到重要作用。機(jī)器學(xué)習(xí)越來(lái)越多地使用更為高效、降低精度的定點(diǎn)數(shù)字系統(tǒng),例如 INT8 表達(dá)法。與傳統(tǒng)的浮點(diǎn) 32 (FP32)方法相比,定點(diǎn)降精度數(shù)字系統(tǒng)不會(huì)造成較大精度損失。與浮點(diǎn)相比,定點(diǎn)運(yùn)算更易于實(shí)現(xiàn),因此改用 INT8 后能實(shí)現(xiàn)更高效、快速的解決方案??删幊踢壿嫿鉀Q方案最適合使用定點(diǎn)數(shù)字,reVISION 能在 PL 中使用 INT8 表達(dá)法。采用 INT8 表達(dá)法后,可在 PL 中使用專用 DSP 模塊。有了這些 DSP 模塊的架構(gòu),當(dāng)使用相同的內(nèi)核權(quán)重時(shí),可同時(shí)執(zhí)行兩個(gè) INT8 乘法累積運(yùn)算。這樣不僅能獲得高性能實(shí)現(xiàn)方案,而且可以降低功耗。憑借可編程邏輯的靈活特性,也可以輕松實(shí)現(xiàn)精度更低的定點(diǎn)數(shù)字表達(dá)形式。

結(jié)論

  reVISION 使開(kāi)發(fā)人員能夠利用 Zynq-7000 和 Zynq UltraScale+ MPSoC 器件所提供的功能。而且,即使不是專家也能利用可編程邏輯來(lái)實(shí)現(xiàn)算法。這些算法和機(jī)器學(xué)習(xí)應(yīng)用可通過(guò)高級(jí)的行業(yè)標(biāo)準(zhǔn)框架來(lái)實(shí)現(xiàn),從而縮短系統(tǒng)開(kāi)發(fā)時(shí)間。這使開(kāi)發(fā)人員能夠提供響應(yīng)性和可重配置能力更強(qiáng)而且功耗更加優(yōu)化的系統(tǒng)。

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

LED驅(qū)動(dòng)電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: 驅(qū)動(dòng)電源

在工業(yè)自動(dòng)化蓬勃發(fā)展的當(dāng)下,工業(yè)電機(jī)作為核心動(dòng)力設(shè)備,其驅(qū)動(dòng)電源的性能直接關(guān)系到整個(gè)系統(tǒng)的穩(wěn)定性和可靠性。其中,反電動(dòng)勢(shì)抑制與過(guò)流保護(hù)是驅(qū)動(dòng)電源設(shè)計(jì)中至關(guān)重要的兩個(gè)環(huán)節(jié),集成化方案的設(shè)計(jì)成為提升電機(jī)驅(qū)動(dòng)性能的關(guān)鍵。

關(guān)鍵字: 工業(yè)電機(jī) 驅(qū)動(dòng)電源

LED 驅(qū)動(dòng)電源作為 LED 照明系統(tǒng)的 “心臟”,其穩(wěn)定性直接決定了整個(gè)照明設(shè)備的使用壽命。然而,在實(shí)際應(yīng)用中,LED 驅(qū)動(dòng)電源易損壞的問(wèn)題卻十分常見(jiàn),不僅增加了維護(hù)成本,還影響了用戶體驗(yàn)。要解決這一問(wèn)題,需從設(shè)計(jì)、生...

關(guān)鍵字: 驅(qū)動(dòng)電源 照明系統(tǒng) 散熱

根據(jù)LED驅(qū)動(dòng)電源的公式,電感內(nèi)電流波動(dòng)大小和電感值成反比,輸出紋波和輸出電容值成反比。所以加大電感值和輸出電容值可以減小紋波。

關(guān)鍵字: LED 設(shè)計(jì) 驅(qū)動(dòng)電源

電動(dòng)汽車(EV)作為新能源汽車的重要代表,正逐漸成為全球汽車產(chǎn)業(yè)的重要發(fā)展方向。電動(dòng)汽車的核心技術(shù)之一是電機(jī)驅(qū)動(dòng)控制系統(tǒng),而絕緣柵雙極型晶體管(IGBT)作為電機(jī)驅(qū)動(dòng)系統(tǒng)中的關(guān)鍵元件,其性能直接影響到電動(dòng)汽車的動(dòng)力性能和...

關(guān)鍵字: 電動(dòng)汽車 新能源 驅(qū)動(dòng)電源

在現(xiàn)代城市建設(shè)中,街道及停車場(chǎng)照明作為基礎(chǔ)設(shè)施的重要組成部分,其質(zhì)量和效率直接關(guān)系到城市的公共安全、居民生活質(zhì)量和能源利用效率。隨著科技的進(jìn)步,高亮度白光發(fā)光二極管(LED)因其獨(dú)特的優(yōu)勢(shì)逐漸取代傳統(tǒng)光源,成為大功率區(qū)域...

關(guān)鍵字: 發(fā)光二極管 驅(qū)動(dòng)電源 LED

LED通用照明設(shè)計(jì)工程師會(huì)遇到許多挑戰(zhàn),如功率密度、功率因數(shù)校正(PFC)、空間受限和可靠性等。

關(guān)鍵字: LED 驅(qū)動(dòng)電源 功率因數(shù)校正

在LED照明技術(shù)日益普及的今天,LED驅(qū)動(dòng)電源的電磁干擾(EMI)問(wèn)題成為了一個(gè)不可忽視的挑戰(zhàn)。電磁干擾不僅會(huì)影響LED燈具的正常工作,還可能對(duì)周圍電子設(shè)備造成不利影響,甚至引發(fā)系統(tǒng)故障。因此,采取有效的硬件措施來(lái)解決L...

關(guān)鍵字: LED照明技術(shù) 電磁干擾 驅(qū)動(dòng)電源

開(kāi)關(guān)電源具有效率高的特性,而且開(kāi)關(guān)電源的變壓器體積比串聯(lián)穩(wěn)壓型電源的要小得多,電源電路比較整潔,整機(jī)重量也有所下降,所以,現(xiàn)在的LED驅(qū)動(dòng)電源

關(guān)鍵字: LED 驅(qū)動(dòng)電源 開(kāi)關(guān)電源

LED驅(qū)動(dòng)電源是把電源供應(yīng)轉(zhuǎn)換為特定的電壓電流以驅(qū)動(dòng)LED發(fā)光的電壓轉(zhuǎn)換器,通常情況下:LED驅(qū)動(dòng)電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: LED 隧道燈 驅(qū)動(dòng)電源
關(guān)閉