第一部分：設(shè)計(jì)概述

安全輔助駕駛(Safety Driving Assist，簡(jiǎn)稱SDA)是當(dāng)前國(guó)際智能交通系統(tǒng)研究的重要內(nèi)容，它主要解決交通安全的問題，對(duì)于困擾運(yùn)輸領(lǐng)域的交通堵塞及環(huán)境污染兩個(gè)問題也有緩解作用。基于此，世界上很多國(guó)家都在加強(qiáng)車輛安全輔助駕駛技術(shù)領(lǐng)域的研究。關(guān)于安全輔助駕駛技術(shù)的研究主要集中在車道偏離預(yù)警，前方障礙物探測(cè)，以及駕駛員狀態(tài)監(jiān)測(cè)等方面。近20年來，車道偏離預(yù)警系統(tǒng)作為安全輔助駕駛研究領(lǐng)域的一個(gè)組成部分，已經(jīng)受到越來越多的關(guān)注，很多國(guó)家都投入大量的人力、物力和財(cái)力進(jìn)行系統(tǒng)研發(fā)。

車道偏離預(yù)警系統(tǒng)研究背景：

車道偏離報(bào)警系統(tǒng)( Lane Departure Warning System, 簡(jiǎn)稱LDWS)是指汽車在高速行駛的過程中,在駕駛員沒有示意車輛變道的情況下,車輛偏離了正常行駛的車道時(shí), 利用報(bào)警方式提醒駕駛員修正車輛方向的汽車主動(dòng)安全裝置。車道偏離報(bào)警系統(tǒng)將會(huì)是繼安全帶、安全氣囊后,在汽車內(nèi)安裝的又一項(xiàng)安全裝置。在美國(guó),1994 年由于車道偏離引起的傷亡事故占所有車輛傷亡事故的37.0%, 2000 年為42.0%, 2001 年則上升到43.0%, 平均每年上升0.75 個(gè)百分點(diǎn)。車道偏離報(bào)警系統(tǒng)在車輛偏離車道線時(shí), 可以向駕駛員發(fā)出警示信號(hào), 提示駕駛員修正車輛的方向, 提醒駕駛員集中注意力。有研究表明,車道偏離報(bào)警系統(tǒng)可以減少至少24%的車道偏離傷亡事故。世界上一些國(guó)家已經(jīng)成功研制出一些各具特色的車道偏離報(bào)警系統(tǒng), 如Auto Vue 系統(tǒng)、AWSTM系統(tǒng)、DSS 系統(tǒng)、SCARF 系統(tǒng)和ALVINN 系統(tǒng)等。在我國(guó),車道偏離報(bào)警方面的研究起步較晚,還沒有相關(guān)的產(chǎn)品問世, 只有吉林大學(xué)的汽車動(dòng)態(tài)模擬國(guó)家重點(diǎn)實(shí)驗(yàn)室、東南大學(xué)儀器科學(xué)與工程學(xué)院進(jìn)行了一些探索性的研究。經(jīng)過探索性的研究表明, 基于視覺的車道偏離報(bào)警系統(tǒng)是一種切實(shí)可行的方案。

MicroBlaze嵌入式軟核是一個(gè)被Xilinx公司優(yōu)化過的可以嵌入在FPGA中的RISC處理器軟核，具有運(yùn)行速度快、占用資源少、可配置性強(qiáng)等優(yōu)點(diǎn)，廣泛應(yīng)用于通信、軍事、高端消費(fèi)市場(chǎng)等領(lǐng)域。Xilinx公司的MicroBlaze 32位軟處理器核是支持CoreConnect總線的標(biāo)準(zhǔn)外設(shè)集合。MicroBlaze處理器運(yùn)行在150MHz時(shí)鐘下，可提供125 D-MIPS的性能，非常適合設(shè)計(jì)針對(duì)網(wǎng)絡(luò)、電信、數(shù)據(jù)通信和消費(fèi)市場(chǎng)的復(fù)雜嵌入式系統(tǒng)。

設(shè)計(jì)摘要：

本課題是以Xilinx公司FPGA開發(fā)板上的MicroBlaze微處理器IP核為核心，和其它外設(shè)一起，針對(duì)于行駛在高速公路或者城市道路上的司機(jī)，設(shè)計(jì)出了汽車離道報(bào)警系統(tǒng)。該系統(tǒng)圖像采集子系統(tǒng)、FPGA開發(fā)板和其他設(shè)備組成。圖像采集子系統(tǒng)能實(shí)時(shí)地采集路面實(shí)況數(shù)據(jù)，數(shù)據(jù)進(jìn)入系統(tǒng)后，它被實(shí)時(shí)地變換成可處理的格式，在處理器內(nèi)部，首先進(jìn)行預(yù)處理，過濾掉圖像捕獲期間混入的噪聲，然后探測(cè)車輛相對(duì)于車行道標(biāo)志線的位置。道路圖像的輸入信息流被變換為一系列畫出道路表面輪廓的線條。在數(shù)據(jù)字段內(nèi)尋找邊緣就能發(fā)現(xiàn)車道標(biāo)志線。這些邊緣事實(shí)上形成了車輛向前行駛應(yīng)保持的邊界。處理器則要時(shí)刻跟蹤這些標(biāo)志線，以確定行車路線是否正常。一旦發(fā)現(xiàn)車輛無意間偏離車行道，處理器作出判斷后輸出一個(gè)信號(hào)驅(qū)動(dòng)報(bào)警電路，讓駕駛員立即糾正行車路線。報(bào)警電路采用蜂鳴器放出警告聲音。

第二部分：設(shè)計(jì)結(jié)構(gòu)

1.系統(tǒng)框圖介紹

不管是哪一種車道偏離報(bào)警系統(tǒng)，都可以劃分成三個(gè)基本模塊：道路和車輛狀態(tài)感知模塊、車道偏離評(píng)價(jià)算法模塊和信號(hào)報(bào)警電路，如圖1所示系統(tǒng)運(yùn)行的基本過程是：狀態(tài)感知模塊感知道路幾何特征和車輛的動(dòng)態(tài)參數(shù)，然后由車道偏離評(píng)價(jià)算法對(duì)車道偏離的可能性進(jìn)行評(píng)價(jià)，一旦發(fā)現(xiàn)車輛無意間偏離車行道，處理器作出判斷后輸出一個(gè)信號(hào)驅(qū)動(dòng)報(bào)警電路，讓駕駛員立即糾正行車路線。報(bào)警形式可以是蜂鳴器或者喇叭，也可以用語言提示，還可以用振動(dòng)座椅來提醒駕駛員。

圖1 系統(tǒng)設(shè)計(jì)框圖

車道偏離報(bào)警系統(tǒng)具體在硬件上則是通過裝在車上的攝像頭進(jìn)行視頻圖像的采樣，然后對(duì)表現(xiàn)為模擬信號(hào)的視頻圖像進(jìn)行數(shù)字轉(zhuǎn)換，將數(shù)字的視頻信息傳輸給處理器單元，處理器單元根據(jù)算法要求進(jìn)行計(jì)算，得出車輛偏離車道的實(shí)時(shí)狀態(tài)，如果出現(xiàn)車道偏離或者將要出現(xiàn)車道偏離，系統(tǒng)將通過報(bào)警電路對(duì)駕駛員進(jìn)行提示報(bào)警，防止意外發(fā)生。

2.硬件框圖

圖2 硬件框圖

3.軟件流程圖

軟件流程圖如圖3所示

圖3 軟件流程圖

1.道路圖像采集

本文主要研究車道線檢測(cè)技術(shù)在車道偏離預(yù)警中的應(yīng)用，圖像在采集過程中，光照強(qiáng)度、障礙物遮擋、路邊樹木以及路面不平坦而導(dǎo)致的攝像頭抖動(dòng)都會(huì)對(duì)圖像中車道線信息造成影響。因而，要想準(zhǔn)確地提取出車道線參數(shù)，就必須對(duì)采集的道路圖像在車道線檢測(cè)之前進(jìn)行預(yù)處理。在圖像處理算法中，沒有哪一種算法可以適用于各類圖像，每一種算法都有自己的局限性。因此，在實(shí)際應(yīng)用中，需要做大量的實(shí)驗(yàn)，并結(jié)合車道偏離預(yù)警系統(tǒng)的需要，選取適合該系統(tǒng)的算法。適用于本文檢測(cè)算法的路面為攝像機(jī)視野上方可能會(huì)為天空或高山等背景的至少含有兩個(gè)同向以車道線隔開的高速公路和城市道路。

2.圖像預(yù)處理

根據(jù)投影理論，當(dāng)攝像機(jī)光軸與地平面平行時(shí)，而車輛一般在下方的地面部分，因此圖像下半部分有車輛的區(qū)域才是我們的感興趣區(qū)域，只需要分析這部分的情況即可，預(yù)處理中一般把圖像的下半部分劃分為感興趣的部分，而上半部分一律作黑色處理，從而使得預(yù)處理后的白色部分所表示的信息即為車道線。這樣既較好地符合實(shí)際情況，同時(shí)算法簡(jiǎn)便，避免了處理大量信息的冗余，提高了計(jì)算速率。預(yù)處理分四步完成：

a.灰度化。這里之所以進(jìn)行灰度化，是因?yàn)槭訛r青路面為深黑色，而黃線為淺色，灰度化以后，二者在圖像上就表現(xiàn)為一黑一白，易于操作，也便于后面的處理。

b.采用空間濾波技術(shù)去除圖像中多余的噪聲?？捎玫乃惴ㄓ兄狈綀D均衡化、領(lǐng)域平均、中值濾波等。

c. 采用道路圖像的二值化分割對(duì)圖像進(jìn)行分割，以獲取明顯的車道線特征，大大簡(jiǎn)化了后面分析并檢測(cè)車道標(biāo)識(shí)線的復(fù)雜度?？捎玫乃惴ㄓ兄狈綀D波形分析法、最大熵法、最大類方差法等。

d. 劃分感興趣的區(qū)域。通過縮減檢測(cè)區(qū)域的范圍來減少冗余的數(shù)據(jù)，提高運(yùn)算速度。常見的感興趣區(qū)域的劃分算法有:基于灰度圖投影法、動(dòng)態(tài)感興趣區(qū)域。

3. 車道線檢測(cè)算法設(shè)計(jì)與實(shí)現(xiàn)

車道線的快速與準(zhǔn)確識(shí)別是實(shí)現(xiàn)車道偏離預(yù)警系統(tǒng)實(shí)時(shí)性和魯棒性的前提和基礎(chǔ)，本章在敘述基于曲線擬合的車道線檢測(cè)的原理的基礎(chǔ)上提出了一種基于LMedsquare選取最佳子集。LMedsquare的核心思想是對(duì)隨機(jī)選擇數(shù)據(jù)子集進(jìn)行重復(fù)操作，直到至少有一個(gè)子集的數(shù)據(jù)能夠達(dá)到一定的可信度(比如95%)，它是一種隨機(jī)采樣算法。車道線檢測(cè)算法包含以下幾個(gè)步驟：

a. 種子點(diǎn)的選取。要想準(zhǔn)確得到車道線坐標(biāo)方程，就需要先找出車道線的中心點(diǎn)，再對(duì)車道線中心點(diǎn)的集合進(jìn)行車道線擬合。因此，需要找出車道線中心點(diǎn)。在這里，可以根據(jù)車道線圖像二值化后車道線的特征來找出車道線中心點(diǎn)，為下一步車道線參數(shù)擬合做準(zhǔn)備工作。

b. 車道標(biāo)識(shí)線的檢測(cè)。在種子點(diǎn)歸類后，我們就要判斷待擬合的種子點(diǎn)數(shù)是否充足，在道路路況較好的情況下，近視野車道線比較清晰，自下至上掃描歸類，一般都會(huì)獲得數(shù)目比較充足車道線種子點(diǎn)數(shù)，則可以直接利用LMedsquare選取最佳子集的車道線檢測(cè)算法進(jìn)行參數(shù)的擬合。

c. 基于最佳子集的最小二乘直線擬合。運(yùn)用最小二乘法擬合曲線是智能導(dǎo)航技術(shù)中常用的擬合算法，但是其最大的缺點(diǎn)就是對(duì)噪聲比較敏感，顯而言之，解決噪聲的影響是準(zhǔn)確地?cái)M合出車道線參數(shù)的前提和基礎(chǔ)。因此，在車道線種子點(diǎn)歸類后種子點(diǎn)數(shù)目比較充足時(shí)，可以利用LMedsquare曲線擬合技術(shù)的思想選取最佳子集，以去除多余的噪聲后，再利用最小二乘法在最佳子集內(nèi)進(jìn)行直線擬合，會(huì)得到很好的效果。

第三部分：系統(tǒng)原理和技術(shù)特點(diǎn)

1.首先用EDK軟件XPS(Xilinx Platform Studio)構(gòu)建一個(gè)MicroBlaze軟核系統(tǒng)，F(xiàn)PGA內(nèi)部CPU外圍各種模塊用Vhdl語言編寫，然后再將FPGA外部模塊通過FPGA接口與FPGA相連。

2.道路圖像采集可以采用CCD攝像頭。CCD攝像頭安裝于擋風(fēng)玻璃內(nèi)側(cè)，駕駛臺(tái)中央位置，采用長(zhǎng)焦鏡頭，采集路面狀況。路面信息碼流處理應(yīng)用Philips半導(dǎo)體公司的視頻解碼芯片SAA7115，它是一款多通道輸入的視頻解碼器，支持多種視頻信號(hào)格式，如PAL制、NTSC制、SECAM制等。SAA7115對(duì)于輸入的視頻信號(hào)自動(dòng)檢測(cè)并完成轉(zhuǎn)換。SAA7115能提供捕捉各種標(biāo)準(zhǔn)清晰度信號(hào)的高性能。芯片采用一個(gè)小的100 引腳QFP14X142100A封裝，并在其中集成抗鋸齒濾波器和ADLLT( adap tive digital line length tracking，自適應(yīng)數(shù)字列長(zhǎng)度追蹤) ，且支持多種視頻信號(hào)格式，如PAL 制、NTSC制、SECAM制等，能對(duì)于輸入的視頻信號(hào)自動(dòng)檢測(cè)并完成轉(zhuǎn)換?；谝陨咸匦员驹O(shè)計(jì)選用其作為視頻編碼芯片，可以實(shí)現(xiàn)與FPGA的無縫連接。因外圍電路與FPGA的處理速度相差甚大,故信號(hào)流要先經(jīng)SN74CBT3245芯片緩沖,然后送處理器進(jìn)行車道特征值得提取。

3.圖像預(yù)處理技術(shù)

圖像中含有豐富的信息，在車道識(shí)別中，并不是所有信息都是需要的。因此要對(duì)采集到的連續(xù)圖像進(jìn)行處理，去除無用信息，增強(qiáng)有用信息，有利于后續(xù)處理。在進(jìn)行圖像預(yù)處理時(shí)，車道檢測(cè)部分對(duì)其進(jìn)行反饋，可以增快它的處理速度。具體步驟包括圖像灰度變換、圖像噪聲濾除、圖像邊緣檢測(cè)、圖像二值分割。

圖像在采集過程中，由于光照強(qiáng)度、障礙物遮擋等影響因素，對(duì)采集進(jìn)來的圖像中車道線信息造成影響。因此，要想準(zhǔn)確提取出車道線參數(shù)，就必須對(duì)采集的道路圖像在車道線檢測(cè)之前進(jìn)行預(yù)處理。在圖像處理算法中，沒有哪一種算法可以適用于各類圖像，每一種算法都有自己的局限性。因此，在實(shí)際運(yùn)用中，需要做大量的實(shí)驗(yàn)，并結(jié)合車道偏離預(yù)警系統(tǒng)的需要，選取適合該系統(tǒng)的算法。

首先采用空間濾波技術(shù)去除圖像中多余噪聲。

然后進(jìn)行道路圖像的二值化分割將圖像分割，這將大量壓縮數(shù)據(jù)，而且將簡(jiǎn)化其后的分析和處理。

再進(jìn)行車道線特征點(diǎn)搜索區(qū)域的劃分，及感興趣區(qū)域的劃分，通過縮減檢測(cè)區(qū)域范圍來減少冗余數(shù)據(jù)，提高運(yùn)算速度。

4.車道線識(shí)別算法

一是基于Hough變換的車道線識(shí)別技術(shù)。首先提取出車道線樣本點(diǎn)，然后對(duì)樣本點(diǎn)進(jìn)行Hough擬合。用此法進(jìn)行車道線檢測(cè)時(shí)優(yōu)點(diǎn)是不受車道線間斷影響，有很好的抗干擾性。但其也有不足之處，到實(shí)際運(yùn)用時(shí)需要通過做實(shí)驗(yàn)驗(yàn)證并進(jìn)行改進(jìn)。

二是基于LMedsquare選取最佳子集結(jié)合卡爾曼預(yù)測(cè)的車道線檢測(cè)算法。首先進(jìn)行種子點(diǎn)的選取，然后進(jìn)行車道標(biāo)識(shí)線的檢測(cè)，最后進(jìn)行基于最佳子集的最小二乘直線擬合。

5.車道偏離決策

我們是依靠機(jī)器視覺預(yù)警決策方法，可以用僅基于圖像的車道線夾角法偏離預(yù)警決策方式，有兩種報(bào)警方式：一是設(shè)定一個(gè)角度閾值為大偏航角分界，如果連續(xù)幾幀圖片檢測(cè)結(jié)果顯示車輛位置處于大偏航角狀態(tài)，則立即報(bào)警。二是設(shè)定一個(gè)角度域值為小偏航角的分界，車輛位置處于小偏航角狀態(tài)時(shí)，等待連續(xù)多幀圖片處理結(jié)果，如果連續(xù)多幀圖像顯示車輛偏航角處于持續(xù)增大過程，則立即報(bào)警。

6.擴(kuò)展功能:

在人為主動(dòng)換道時(shí)，在離道之前打開指示信號(hào)，報(bào)警系統(tǒng)在車偏離車道時(shí)不會(huì)報(bào)警。

技術(shù)特點(diǎn)：

1.用EDK軟件XPS構(gòu)建MicroBlaze軟核系統(tǒng)，簡(jiǎn)便而且高效地實(shí)現(xiàn)了系統(tǒng)設(shè)計(jì)對(duì)CPU的要求。在FPGA內(nèi)的各種接口模塊，將采用vhdl語言編寫。

2.圖像處理細(xì)節(jié)較多，而且圖像處理每一步算法多樣，在實(shí)際應(yīng)用時(shí)要結(jié)合所采用的硬件，經(jīng)過實(shí)際做實(shí)驗(yàn)，結(jié)合系統(tǒng)需要選取最合適的算法。

3.圖像預(yù)處理算法中選取感興趣部分。它不僅提高了計(jì)算速率，而且減小了不必要的信息干擾，為提高了檢測(cè)的準(zhǔn)確性和及時(shí)性打下了很好的基礎(chǔ)。

4.車道線檢測(cè)算法中采用了選取種子點(diǎn)以后的基于最佳子集的最小二乘直線擬合方法，它可以很好地除去最小二乘直線擬合法中常遇到的噪聲干擾問題。

5.攝像頭具有自動(dòng)校正功能。在車?yán)镒嗳藭r(shí)，車底盤會(huì)發(fā)生下沉而且會(huì)發(fā)生傾斜，這時(shí)候攝像頭會(huì)自動(dòng)校正，依然可以檢測(cè)出離道信息。