国产精品1024永久观看,大尺度欧美暖暖视频在线观看,亚洲宅男精品一区在线观看,欧美日韩一区二区三区视频,2021中文字幕在线观看

  • <option id="fbvk0"></option>
    1. <rt id="fbvk0"><tr id="fbvk0"></tr></rt>
      <center id="fbvk0"><optgroup id="fbvk0"></optgroup></center>
      <center id="fbvk0"></center>

      <li id="fbvk0"><abbr id="fbvk0"><dl id="fbvk0"></dl></abbr></li>

      基于圖像融合和盲反卷積的模糊車牌圖像識(shí)別算法的制作方法

      文檔序號(hào):11432749閱讀:363來源:國知局
      基于圖像融合和盲反卷積的模糊車牌圖像識(shí)別算法的制造方法與工藝

      本發(fā)明涉及計(jì)算機(jī)視覺領(lǐng)域,特指一種基于圖像融合和盲反卷積的模糊車牌圖像識(shí)別算法。



      背景技術(shù):

      隨著現(xiàn)代化交通的發(fā)展,車輛牌照自動(dòng)識(shí)別技術(shù)越來越受到人們的重視,是近年來計(jì)算機(jī)視覺與模式識(shí)別技術(shù)在智能交通領(lǐng)域的重要研究課題之一。車輛牌照自動(dòng)識(shí)別系統(tǒng)可用于公路收費(fèi)站、停車場(chǎng)、十字路口等場(chǎng)所的車輛管理,對(duì)于道路交通和停車場(chǎng)車輛管理具有重要的促進(jìn)作用。

      車牌識(shí)別技術(shù)包括車牌定位、字符分割和字符識(shí)別3個(gè)基本環(huán)節(jié),其中車牌定位是字符分割和字符識(shí)別的前提,而車牌字符分割是車牌識(shí)別的基礎(chǔ)。

      車牌識(shí)別系統(tǒng)在國內(nèi)外研究都有一段時(shí)間了,普通的車牌識(shí)別系統(tǒng)在各種情況下都有一定的應(yīng)用,但是對(duì)于特殊環(huán)境條件下的車牌識(shí)別,國內(nèi)總體上來說還處于實(shí)驗(yàn)室階段,離實(shí)際的工程應(yīng)用還有一段距離?,F(xiàn)實(shí)中,特殊環(huán)境條件下的車牌識(shí)別,往往是杜絕安全隱患的關(guān)鍵所在。比如車輛在晚間超速行駛,由于環(huán)境、時(shí)間、以及車輛本身超速的諸多因素綜合影響,導(dǎo)致事故頻發(fā),損失巨大。同時(shí),如果由于環(huán)境原因?qū)е率称繁O(jiān)控系統(tǒng)無法識(shí)別相關(guān)的車輛車牌信息,這無疑會(huì)給各方面的安全管理,帶來很大的不變。

      同時(shí),國內(nèi)的車牌不統(tǒng)一、漢字識(shí)別難度大等因素也導(dǎo)致了車牌識(shí)別,尤其是在特殊條件環(huán)境下的車牌識(shí)別帶來了很大的困難。



      技術(shù)實(shí)現(xiàn)要素:

      本發(fā)明要解決的技術(shù)問題在于提供一種能夠提高監(jiān)控系統(tǒng)的特殊條件下車牌識(shí)別的準(zhǔn)確程度的基于圖像融合和盲反卷積的模糊車牌圖像識(shí)別算法,并使得監(jiān)控系統(tǒng)能夠滿足實(shí)時(shí)性要求。

      為了解決上述技術(shù)問題,本發(fā)明的具體技術(shù)方案包括以下步驟:

      步驟(1)通過多幀圖像融合增強(qiáng)低照度車牌圖像的可辨識(shí)度;

      步驟(2)采用基于盲反卷積算法處理模糊圖像;

      步驟(3)車牌定位與傾斜估計(jì);

      步驟(4)采用灰度投影法進(jìn)行車牌字符分割;

      步驟(5)采用基于聯(lián)合hog特征的車牌字符識(shí)別算法進(jìn)行車牌分割字符識(shí)別。

      作為本發(fā)明技術(shù)方案的優(yōu)選,所述步驟(1)包括:

      (1.1)對(duì)進(jìn)行前isp(imagesignalprocessor)處理后輸出的多幀圖像進(jìn)行surf特征點(diǎn)匹配獲得校準(zhǔn)圖像;所述前isp處理中包括對(duì)原始圖像進(jìn)行白平衡處理,去馬賽克,色彩校正,轉(zhuǎn)rgb格式彩圖,最后經(jīng)過轉(zhuǎn)rgb格式彩圖后輸出適合surf特征點(diǎn)匹配的圖像;

      (1.2)對(duì)多幀連拍車牌圖像采用加權(quán)累積方式進(jìn)行累加,使得每幅圖像權(quán)重相等。

      作為本發(fā)明技術(shù)方案的優(yōu)選,所述步驟(2)為采用一種盲復(fù)原方法,首先估計(jì)出模糊點(diǎn)擴(kuò)散函數(shù)psf,然后進(jìn)行模糊處理,具體包括:

      (2.1)估計(jì)點(diǎn)擴(kuò)散函數(shù),首先利用計(jì)算得到模糊長(zhǎng)度和角度得到點(diǎn)擴(kuò)散函數(shù),然后對(duì)模糊圖像的點(diǎn)擴(kuò)散函數(shù)進(jìn)行估計(jì);

      (2.2)計(jì)算圖像支持域,所述支持域?yàn)榘ㄔ紙D像的非零像素值最小的矩形區(qū)域,具體采用動(dòng)量矩和平均值算法進(jìn)行計(jì)算,設(shè)原圖像矩陣為f,支持域內(nèi)矩陣為使用在迭代中恢復(fù)圖像;

      (2.3)設(shè)定約束條件,采用能量約束以加快算法收斂,

      (2.4)噪聲最小二乘估計(jì),建立盲反卷積復(fù)原最小化模型,該模型如下公式所示:

      上式中g(shù)(x,y)為模糊圖像,f(x,y)為原圖像,h(x,y)為點(diǎn)擴(kuò)散函數(shù),n(x,y)為噪聲,α為權(quán)重系數(shù),α用于保證迭代恢復(fù)過程中噪聲均值為0,通常取值為10-4,其中

      兩部分分別和

      α[∑x∑y[g(x,y)-f(x,y)*h(x,y)]]分別表示噪聲均方差為δ以及均值為0;該盲反卷積復(fù)原最小化模型的解即為迭代恢復(fù)模型的近似解;

      (2.5)迭代恢復(fù),求取盲反卷積復(fù)原最小化模型的解即為迭代恢復(fù)模型的近似解,經(jīng)過迭代,得到圖像矩陣恢復(fù)值,以及點(diǎn)擴(kuò)散函數(shù)恢復(fù)值。

      作為本發(fā)明技術(shù)方案的優(yōu)選,所述步驟(3)包括:

      (3.1)訓(xùn)練車牌樣本特征提取及特征組織,其包括:

      首先,手動(dòng)摳取出任意正常國標(biāo)車牌;

      其次,對(duì)摳取出的車牌圖像進(jìn)行積分通道特征提取,所述通道包括luv顏色通道、梯度幅值通道和梯度直方圖通道;

      最后,采用基于adaboost算法訓(xùn)練檢測(cè)器;

      (3.2)車牌的檢測(cè)定位,其包括:

      首先,用滑窗法對(duì)目標(biāo)圖像進(jìn)行掃描,獲取初定位車牌圖像;

      其次,將檢測(cè)器輸出的初定位圖像進(jìn)行非極大值抑制處理后的初定位結(jié)果進(jìn)行基于霍夫變換的傾斜校正得到二次定位后的車牌圖像;

      最后,將輸出的二次定位后的車牌圖像輸入強(qiáng)檢測(cè)器,得出最終定位車牌結(jié)果。

      作為本發(fā)明技術(shù)方案的優(yōu)選,所述步驟(4)包括:

      (4.1)去除輸入車牌區(qū)域圖像的車牌邊框;

      (4.2)車牌字符分割,其包括:

      首先,對(duì)去除車牌邊框后的車牌區(qū)域圖像進(jìn)行圖像增強(qiáng),

      其次,采用基于灰度投影的算法進(jìn)行車牌字符分割,進(jìn)行字符分割前,對(duì)前面步驟增強(qiáng)的車牌圖像,按列累加圖像的像素值,得到車牌的投影曲線,并采用高斯濾波進(jìn)行平滑投影曲線。

      作為本發(fā)明技術(shù)方案的優(yōu)選,所述步驟(4)中所述圖像增強(qiáng)的過程具體如下:

      第1步:統(tǒng)計(jì)整個(gè)車牌區(qū)域內(nèi)像素點(diǎn)的最大像素值和最小像素值maxvalue,minvalue;

      第2步:設(shè)置需要增強(qiáng)的像素點(diǎn)數(shù)占全部像素點(diǎn)數(shù)的比例系數(shù)coef,比例系數(shù)范圍在0-1之間,根據(jù)實(shí)際需要調(diào)整,通常原始車牌圖像較清晰,比例系數(shù)就較小,原始車牌圖像模糊,比例系數(shù)就大;

      第3步:統(tǒng)計(jì)0-255像素值上對(duì)應(yīng)出現(xiàn)的像素點(diǎn)的個(gè)數(shù),并存儲(chǔ)在1×255的數(shù)組count(1,i)里面;

      第4步:從count(1,i),i=255開始往下統(tǒng)計(jì)像素點(diǎn)的個(gè)數(shù),如果統(tǒng)計(jì)的像素點(diǎn)pixelnum<width*height*coef則將i-1繼續(xù)統(tǒng)計(jì),否則停止統(tǒng)計(jì)并記下當(dāng)前的像素值index;

      第5步:車牌區(qū)域每一點(diǎn)按下面的方法進(jìn)行增強(qiáng):

      經(jīng)過上面的變換后,實(shí)現(xiàn)圖像增強(qiáng)。

      作為本發(fā)明技術(shù)方案的優(yōu)選,所述步驟(4)中采用基于灰度投影的算法進(jìn)行車牌字符分割具體步驟如下:

      第一步:根據(jù)車牌的灰度投影曲線圖可得,車牌后面最多出現(xiàn)五個(gè)雙峰結(jié)構(gòu),故搜索出前五個(gè)最大波谷點(diǎn),然后判斷這些點(diǎn)是否為雙峰結(jié)構(gòu)中的波谷點(diǎn),如果是,則將該雙峰結(jié)構(gòu)的起止位置記下;

      第二步:確定車牌字符寬度characterwidth;如果第一步檢測(cè)到了雙峰結(jié)構(gòu),則字符寬度就取為檢測(cè)到的所有雙峰結(jié)構(gòu)的平均值,否則字符寬度就取前3個(gè)單峰寬度中的最大值;

      第三步:設(shè)置字符起始點(diǎn)為第二字符和第三字符的分割點(diǎn),設(shè)置結(jié)束點(diǎn)為車牌最后一個(gè)波谷點(diǎn);如果在第一步中檢測(cè)到了雙峰結(jié)構(gòu)則進(jìn)行第四步,否則進(jìn)行第五步;

      第四步:設(shè)置字符臨時(shí)分割段起始點(diǎn)為字符起始點(diǎn),字符臨時(shí)分割段終點(diǎn)為一個(gè)雙峰結(jié)構(gòu)起始位置,然后在字符臨時(shí)分割段里進(jìn)行檢測(cè),如果該段里有一個(gè)峰結(jié)構(gòu),則該峰就單獨(dú)為一個(gè)字符,如果該段里有兩個(gè)峰結(jié)構(gòu),則先判斷這兩個(gè)峰是一個(gè)雙峰字符還是兩個(gè)單峰字符,具體判斷規(guī)則就利用這兩個(gè)峰的寬度,以及該寬度和字符寬度進(jìn)行比較;如果這兩個(gè)峰寬度之和小于字符寬度的1.2倍且這兩個(gè)峰寬度相差很小;否則這兩個(gè)峰結(jié)構(gòu)就不是一個(gè)雙峰字符的投影,且可以肯定前面一個(gè)峰結(jié)構(gòu)就是一個(gè)字符,所以可以將其前面的一個(gè)峰結(jié)構(gòu)分割出來然后更新字符臨時(shí)分割段如下:將字符臨時(shí)分割段的起點(diǎn)更新到被分割出來的峰后面,字符臨時(shí)分割段終點(diǎn)不變,但是如果此時(shí)字符臨時(shí)分割段的起點(diǎn)等于終點(diǎn)時(shí)則將其起點(diǎn)更新到先前的雙峰結(jié)構(gòu)的終止位置,并將臨時(shí)分割段的終點(diǎn)更新到下一個(gè)雙峰結(jié)構(gòu)的起點(diǎn),如果后面沒有雙峰結(jié)構(gòu)了則將臨時(shí)分割段的終點(diǎn)更新為字符結(jié)束點(diǎn),然后重復(fù)第四步直到分割到字符結(jié)束點(diǎn)為止;

      第五步:進(jìn)行到第五步說明在檢測(cè)雙峰結(jié)構(gòu)時(shí)并未檢測(cè)到,但是并不代表該車牌內(nèi)不存在雙峰結(jié)構(gòu)的字符,并不能排除存在有雙峰結(jié)構(gòu)的字符;此時(shí)分割就直接從字符起始點(diǎn)開始分割直到分割出5個(gè)字符;在分割中需要檢測(cè)的就是檢測(cè)相鄰的兩個(gè)峰結(jié)構(gòu)是不是一個(gè)字符的雙峰曲線;檢測(cè)所利用的方法和第四步中相同,利用兩個(gè)峰的寬度和該寬度與字符寬度之間的關(guān)系進(jìn)行判斷;

      第六步:根據(jù)分割出的后面五個(gè)字符來分割前面兩個(gè)字符;首先將分割出來的后面五個(gè)字符中的最大寬度作為前面兩個(gè)字符的寬度;前面兩個(gè)字符為字母或者漢字,而字符也為雙峰結(jié)構(gòu)的,所以用后面五個(gè)字符中的最大寬度作為前面字符的寬度是合理的;分割前面兩個(gè)字符的方法為:從第二字符和第三字符的分割點(diǎn)向前移動(dòng)字符寬度個(gè)像素,然后將離該點(diǎn)的最近一個(gè)波谷值作為車牌第一字符和第二字符的分割點(diǎn);利用同樣方法也可以確定第一個(gè)字符的開始位置;

      第七步:對(duì)分割出來的字符序列進(jìn)行檢測(cè),看該序列是否符合車牌字符序列的特征;該特征可以用下面表達(dá)式來表示,假設(shè)dis1為前面兩個(gè)字符的寬度向量,dis2為后面五個(gè)字符看寬度向量,width為車牌寬度,height為車牌高度,則一個(gè)合理的車牌字符序列必須滿足下面的表達(dá)式:

      min(min(dis1),min(dis2))>width/10

      max(dis2)>width/5

      height/min(dis1)<3

      根據(jù)上面表達(dá)式從車牌區(qū)域中分割出字符序列。

      作為本發(fā)明技術(shù)方案的優(yōu)選,所述步驟(5)包括:

      (1)提取h0g(方向梯度直方圖)特征;

      (2)聯(lián)合方向梯度直方圖,首先將灰度圖和二值圖分別計(jì)算hog并組合成聯(lián)合特征,然后將16值圖的hog特征加入聯(lián)合hog特征,即分別進(jìn)行車牌字符的灰度圖、二值圖和16值圖的hog計(jì)算,將結(jié)果以某種關(guān)系線性組合起來得到的聯(lián)合hog特征,組合如下式所示:

      h=ωgrayhgray+ω2h2+ω16h16

      h代表最終的聯(lián)合hog特征,hgray,h2,h16分別代表車牌字符灰度圖、二值圖和16值圖的hog特征,ωi代表權(quán)重;

      (3)車牌字符特征分類,在提取聯(lián)合hog特征以后,利用svm進(jìn)行訓(xùn)練分類,訓(xùn)練分類后,將分割好的字符輸入訓(xùn)練器中,輸出識(shí)別的車牌字符。

      與現(xiàn)有技術(shù)相比,本發(fā)明具有以下有益效果:

      本發(fā)明的車牌識(shí)別算法在夜晚低照度,或因車輛超速等原因造成的車牌模糊不清,車牌圖像成像質(zhì)量低的情況下對(duì)車牌字符讀取可靠性高,識(shí)別度好,魯棒性好,同時(shí)步驟計(jì)算簡(jiǎn)單,能保持高效率,實(shí)時(shí)性也能滿足需求。

      附圖說明

      圖1是本發(fā)明具體實(shí)施方式所述整體算法流程圖。

      圖2是本發(fā)明具體實(shí)施方式所述車牌圖像三種積分特征通道圖像。

      圖3是本發(fā)明具體實(shí)施方式所述四個(gè)方向梯度算子示意圖。

      圖4是本發(fā)明具體實(shí)施方式所述像素點(diǎn)方向示意圖。

      圖5是本發(fā)明具體實(shí)施方式所述霍夫變換傾斜校正的車牌圖像。

      圖6是本發(fā)明具體實(shí)施方式所述車牌圖像增強(qiáng)算法效果圖。

      圖7是本發(fā)明具體實(shí)施方式所述車牌分割算法流程圖。

      圖8是本發(fā)明具體實(shí)施方式所述車牌投影曲線的濾波前后的效果圖。

      圖9是本發(fā)明具體實(shí)施方式所述基于聯(lián)合hog的車牌識(shí)別流程圖。

      圖10是本發(fā)明具體實(shí)施方式所述不同迭代次數(shù)的效果圖。

      圖11是本發(fā)明具體實(shí)施方式所述本發(fā)明算法與傳統(tǒng)算法效果對(duì)比圖。

      具體實(shí)施方式

      下面結(jié)合附圖對(duì)本發(fā)明的具體實(shí)施方式作進(jìn)一步詳細(xì)的說明。

      本發(fā)明具體實(shí)施方式為一種基于圖像融合和盲反卷積的低照度下模糊圖像的車牌識(shí)別算法,該車牌識(shí)別算法流程如圖1所示,包括以下步驟;

      s1.通過多幀圖像融合增強(qiáng)低照度車牌圖像的可辨識(shí)度;

      s1.1對(duì)進(jìn)行前isp(imagesignalprocessor)處理后輸出的多幀圖像進(jìn)行surf特征點(diǎn)匹配獲得校準(zhǔn)圖像;

      圖像的幀累積,即圖像的多幀積累增加,是通過累積同一場(chǎng)景連續(xù)幀圖像的方法來提高圖像的信噪比。在圖像處理算法中,多幀累加就是將不同時(shí)刻兩幅圖像或多幀圖像對(duì)應(yīng)像素點(diǎn)的灰度值相加,求取它們的時(shí)間均值圖像。當(dāng)所觀察目標(biāo)的環(huán)境照度太低,會(huì)導(dǎo)致目標(biāo)能量小,噪聲大,圖像信噪比降低。對(duì)靜態(tài)的圖像序列,利用各幀信號(hào)的相關(guān)性和噪聲的不相關(guān)性,采用序列圖像多幀累加技術(shù),可大大改善圖像的信噪比,提高清晰度。

      對(duì)于待處理圖像,假定含有噪聲圖像中原始圖像任一像素點(diǎn)在一定時(shí)間內(nèi)的平均光子數(shù)為推廣到整幅圖像中該任一像素點(diǎn)的原始圖像信號(hào)s:

      微弱光環(huán)境下,物體輻射的瞬時(shí)值則有所漲落,這種偏離平均值的隨機(jī)起伏就構(gòu)成了輻射的噪聲。根據(jù)概率論中描述隨機(jī)變量的理論可知,到達(dá)探測(cè)器的光子流符合泊松分布,量子數(shù)漲落值即量子噪聲可以用方差表示。每一個(gè)空間位置(x,y)的噪聲n(x,y,t)在時(shí)間序列上是不相關(guān)的,所以不同時(shí)刻得到的噪聲之間的協(xié)方差為零,

      圖像噪聲用標(biāo)準(zhǔn)差表示,得到經(jīng)過累加處理后的圖像噪聲為比較可知,累加處理前的圖像信噪比和處理后的分別為snr1,snr2:

      由上式可以看出,對(duì)m幀圖像序列取累加后可使圖像信噪比提高倍,從而能夠有效地抑制噪聲。

      前isp處理中包括對(duì)原始圖像進(jìn)行白平衡處理,去馬賽克,色彩校正,轉(zhuǎn)rgb格式彩圖,最后經(jīng)過轉(zhuǎn)rgb格式彩圖后輸出適合surf特征點(diǎn)匹配的圖像。surf(speed-uprobustfeatures)是在sift(scaleinvariantfeaturetransform)算法基礎(chǔ)上提出的一種特征檢測(cè)描述算子,具有尺度不變、旋轉(zhuǎn)不變性、對(duì)光照變化、噪聲、局部遮擋保持一定的穩(wěn)健性等特點(diǎn),且計(jì)算速度比sift快幾倍。surf特征點(diǎn)匹配方法分為以下4步:

      第1步、檢測(cè)特征點(diǎn):選取不同的箱式濾波器建立圖像的尺度空間,使用hessian矩陣檢測(cè)每一層圖像上的極值點(diǎn),在三維空間中,對(duì)極值點(diǎn)與鄰近的3×3×3立體鄰域內(nèi)進(jìn)行非極大值抑制,大于鄰近26個(gè)響應(yīng)值的點(diǎn)取為surf特征點(diǎn)。

      以高斯濾波器為例,對(duì)于圖像中的某一點(diǎn)p=(x,y)以及高斯濾波器的尺度σ,其hessian矩陣h(p,σ)表達(dá)式如下:

      其中l(wèi)xx(p,σ),lxy(p,σ),lyy(p,σ)分別是圖像中p點(diǎn)與高斯二階偏導(dǎo)數(shù)的卷積。hessian矩陣的行列式為:

      實(shí)際運(yùn)算中由于高斯濾波器須離散化,故隨著尺度σ的增大圖像細(xì)節(jié)逐漸被過濾。采用surf算法以方框?yàn)V波(boxfilter)近似代替高斯二階導(dǎo)數(shù),用積分圖像加速卷積后hessian矩陣的行列式的近似表達(dá)式為:

      其中dxx,dyy,dxy分別是圖像中p點(diǎn)與方框?yàn)V波的卷積。

      第2步、確定特征點(diǎn)主方向:以特征點(diǎn)為中心,計(jì)算半徑為6σ(σ為特征點(diǎn)所在的尺度值)圓形鄰域內(nèi)的點(diǎn)在x、y方向的harr小波響應(yīng),并給這些響應(yīng)值按距離賦予不同高斯權(quán)重系數(shù),對(duì)加權(quán)后的harr小波響應(yīng)用直方圖進(jìn)行統(tǒng)計(jì);再將圓形鄰域以每5°為間隔,劃分為72組,分別將每組60°范圍內(nèi)的響應(yīng)加起來形成一個(gè)新的矢量;遍歷整個(gè)圓形鄰域,一共生成72個(gè)矢量,選擇其中最長(zhǎng)的矢量的方向?yàn)樘卣鼽c(diǎn)的主方向。

      第3步、特征點(diǎn)描述:以特征點(diǎn)為中心,將坐標(biāo)軸旋轉(zhuǎn)到主方向,按主方向選取20σ×20σ的正方形窗口區(qū)域,將該正方形窗口區(qū)域劃分為4×4個(gè)子區(qū)域,在每個(gè)子區(qū)域內(nèi)計(jì)算harr小波在y方向的響應(yīng)dx、dy,每個(gè)子區(qū)域在x,y方向的響應(yīng)分別求和并生成了一個(gè)∑dx,∑|dx|,∑dy,∑|dy|的四維向量,這樣每個(gè)特征點(diǎn)就有64維的描述向量,再進(jìn)行歸一化,形成最終的特征點(diǎn)描述子。

      第4步、特征點(diǎn)匹配:采用基于最小歐氏距離來度量特征點(diǎn)間的相似性為:

      其中:aik表示待匹配的第一幅圖像的第i個(gè)特征點(diǎn)描述向量的第k維的值,bik表示待匹配的第二幅圖像的第i個(gè)特征點(diǎn)描述向量的第k維的值,n表示特征點(diǎn)描述子是一個(gè)n維的描述向量。假設(shè)tu,tv分別為待匹配兩幅圖像的特征點(diǎn)集合,對(duì)于tu中的任意一個(gè)特征點(diǎn)tui,若tv中存在歐氏距離最小的兩個(gè)特征點(diǎn)tvj、t′vj,且tvj≤t′vj(tvj與t′vj的比值的范圍一般為0.5~0.7),則tvj認(rèn)為是tu的匹配對(duì)。根據(jù)上面所述選取匹配對(duì)的原理,最后采用窮舉搜索算法找出所有的匹配對(duì)。

      surf特征點(diǎn)匹配具有匹配速度快、匹配精度高等優(yōu)點(diǎn),經(jīng)過surf特征點(diǎn)匹配后可獲得校準(zhǔn)圖像。

      s1.2對(duì)多幀連拍車牌圖像進(jìn)行累加。由于簡(jiǎn)單的疊加會(huì)導(dǎo)致圖像產(chǎn)生過曝現(xiàn)象,因而本具體實(shí)施方式采用加權(quán)累積方式,使得每幅圖像權(quán)重相等;

      一幅有噪聲的圖像可認(rèn)為是由原始車牌圖像g(x,y,t)可認(rèn)為是由原始車牌圖像f(x,y,t)和噪聲n(x,y,t)疊加而成,即;

      g(x,y,t)=f(x,y,t)+n(x,y,t)

      多幀累加就是將不同時(shí)刻兩幀圖像或多幀圖像對(duì)應(yīng)像素點(diǎn)灰度值相加后求取它們的時(shí)間均值圖像。

      m幀圖像進(jìn)行累加,得到圖像a(x,y,t):

      基于上述原理,求得幀累積車牌圖像a(x,y,t)。

      s2.基于盲反卷積算法的模糊圖像處理;

      本具體實(shí)施方式借助于超速車輛出現(xiàn)的圖像模糊問題來驗(yàn)證改進(jìn)的迭代盲反卷積算法的合理性。傳統(tǒng)的去模糊方法是假定已知模糊參數(shù),而實(shí)際的目標(biāo)圖像模糊參數(shù)是未知的。所以采用一種盲復(fù)原方法,首先估計(jì)出模糊點(diǎn)擴(kuò)散函數(shù)psf,然后進(jìn)行模糊處理。一般情況下采用的各種盲反卷積去模糊算法通常不會(huì)對(duì)噪聲因素進(jìn)行特定處理,而是將不同環(huán)境背景下的圖片進(jìn)行統(tǒng)一的處理,而實(shí)際采集的車牌圖像存在大量的噪聲的污染,因此噪聲會(huì)在不斷的迭代過程中摻雜進(jìn)實(shí)際解中,使求解沿著不可控的方向發(fā)展,求解出的解往往很大程度上偏離實(shí)際值,而且噪聲隨著迭代的進(jìn)行也不斷的被放大,致使恢復(fù)出的圖像識(shí)別率低,使圖像的恢復(fù)求解過程不收斂,得不到卷積的解。由此對(duì)噪聲的處理對(duì)恢復(fù)效果至關(guān)重要。

      通常來說,導(dǎo)致系統(tǒng)圖像模糊的噪聲基本上為高斯白噪聲。模糊圖像可以表示為模糊圖像的點(diǎn)擴(kuò)散函數(shù)與原圖像卷積而成,如下列公式所示:

      g(x,y)=f(x,y)*h(x,y)+n(x,y)

      其中,g(x,y)為模糊圖像,f(x,y)為原圖像,h(x,y)為點(diǎn)擴(kuò)散函數(shù),n(x,y)為噪聲。

      由上式可知去模糊過程即為解卷積過程。

      s2.1點(diǎn)擴(kuò)散函數(shù)估計(jì)

      點(diǎn)擴(kuò)散函數(shù)是評(píng)價(jià)光學(xué)系統(tǒng)成像質(zhì)量的基本工具,點(diǎn)擴(kuò)散函數(shù)即一點(diǎn)光源通過某介質(zhì)后所成的像。圖像的模糊程度可通過其點(diǎn)擴(kuò)散函數(shù)兩個(gè)參數(shù)判斷,即模糊長(zhǎng)度、模糊方向。將模糊圖像矩陣轉(zhuǎn)換到頻域,然后進(jìn)行radon變換,圖像會(huì)交替出現(xiàn)黑白條紋,在主要的模糊方向上,radon變換的像素累積和最大,所以可以通過判斷radon值來判斷模糊角度。模糊的長(zhǎng)度即為模糊角度上兩個(gè)黑白條紋的最小距離。

      點(diǎn)擴(kuò)散函數(shù)估計(jì)過程為:首先利用計(jì)算得到模糊長(zhǎng)度和角度得到點(diǎn)擴(kuò)散函數(shù),然后對(duì)模糊圖像的點(diǎn)擴(kuò)散函數(shù)進(jìn)行估計(jì)。

      對(duì)于要處理的模糊圖像,首先對(duì)圖像進(jìn)行預(yù)處理處理。然后創(chuàng)建原始psf(pointspreadfunction)函數(shù)(模糊圖像點(diǎn)擴(kuò)散函數(shù)),創(chuàng)建與原始圖像同樣大小的psf掩膜。通過對(duì)超速車輛的模糊圖像點(diǎn)擴(kuò)散函數(shù)進(jìn)行統(tǒng)計(jì),設(shè)定模糊點(diǎn)擴(kuò)散函數(shù)半徑為15,即15×15大小的矩陣,矩陣像素值為全1。設(shè)目標(biāo)圖像大小為size_f。

      設(shè)定一個(gè)size_f大小的全0矩陣,其中坐標(biāo)(0,0)至(15,15)的正方形區(qū)域內(nèi)像素為全1,作為psf掩膜h_z。

      s2.2計(jì)算圖像支持域

      支持域就是包括原始圖像的非零像素值最小的矩形區(qū)域,在支持域內(nèi)進(jìn)行迭代恢復(fù),能大大提高算法運(yùn)行效率。

      對(duì)于盲反卷積有一個(gè)解的模糊問題。如果所得(f(x,y),h(x,y))是盲反卷積問題的解,那么對(duì)于任意的非零常數(shù)η,也是盲反卷積問題的解。

      同樣位移(f(x+k1,y+k2),h(x+k1,y+k2))也是盲反卷積問題的解。位移模糊會(huì)影響迭代反卷積算法的收斂,由于盲反卷積問題的解可能收斂到位移相疊加的圖像上,或處于若干相疊加的圖像之間,使結(jié)果無法收斂。所以必須限制盲反卷積問題的解的支持域,將上文求解的支持域作為限制嵌入到迭代反卷積算法中,可以消除盲反卷積問題的解不收斂的問題。本具體方式中圖像支持域利用動(dòng)量矩和平均值算法進(jìn)行計(jì)算。

      對(duì)于動(dòng)量矩,一階動(dòng)量矩a大小為像素點(diǎn)數(shù)和即a=sum(his),二階動(dòng)量矩b大小為所有像素值與相應(yīng)點(diǎn)數(shù)的乘積的和b=sum(m),其中,his為像素點(diǎn)數(shù),m為所有像素值與相應(yīng)點(diǎn)數(shù)的乘積。

      而平均值算法是根據(jù)像素平均值來推測(cè)圖像范圍的方法。假設(shè)圖像平均值為t,令設(shè)t范圍內(nèi)的一階動(dòng)量矩為a1,二階動(dòng)量矩為b1。其中a1值為像素1到像素t范圍內(nèi)像素點(diǎn)數(shù)的和。即a1=sum(his(1:t))。b1為像素1到像素t范圍內(nèi)像素與點(diǎn)數(shù)乘積的和即b1=sum(m(1:t))。則由動(dòng)量矩原理估計(jì)出的閾值為:

      根據(jù)該閾值將圖像進(jìn)行二值化處理,從而得到有限支持域,該支持域的值設(shè)為k。在迭代過程中,將有限支持域與頻域限制條件相結(jié)合。

      設(shè)原圖像矩陣為f,支持域內(nèi)矩陣為使用在迭代中恢復(fù)圖像。

      s2.3設(shè)定約束條件

      本發(fā)明的約束條件采用能量約束,能量不變性條件主要是圖像中的像素值不可以為負(fù)值以及點(diǎn)擴(kuò)展函數(shù)具有恒定不變的能量,本具體實(shí)施方式引入能量約束用于加快算法收斂。

      非負(fù)值的約束條件如以下公式所示:

      其中,f(x,y)為圖像的像素值,而為約束以后圖像某點(diǎn)i的像素值。

      能量不變則是根據(jù)圖像中平均負(fù)值像素點(diǎn)來實(shí)現(xiàn)的,如下公式所示:

      上式中的e表示的是圖像中所有像素點(diǎn)負(fù)值的和,fi(x,y)為圖像某點(diǎn)i的像素值。

      恢復(fù)時(shí)需要進(jìn)行能量的重新組合,該重新組合如下公式所示:

      上式中n是原始圖像中像素點(diǎn)的總數(shù)。在迭代過程中只要仍然包含負(fù)值迭代就會(huì)不斷的反復(fù)進(jìn)行,直到迭代終止或者沒有負(fù)值迭代就會(huì)停止。

      s2.4噪聲最小二乘估計(jì)

      由于圖像含有噪聲,所以需要對(duì)最小化函數(shù)結(jié)合噪聲均值和方差進(jìn)行最小二乘化估計(jì)。傳統(tǒng)圖像增強(qiáng)算法不會(huì)對(duì)噪聲做特殊處理,而實(shí)際的待處理的超速車輛圖像包含各種噪聲信息。噪聲污染導(dǎo)致算法的求解過程變成病態(tài)的循環(huán)迭代過程,恢復(fù)出來的圖像與原圖像存在很大偏差,而且噪聲被迭代算法不斷放大,結(jié)果造成復(fù)原過程不收斂。因此,本發(fā)明具體實(shí)施方式提出的改進(jìn)算法即加入了對(duì)噪聲的最小二乘估計(jì)。

      原盲反卷積的最小化模型為:

      退化圖像存在污染時(shí)噪聲信號(hào)表示為:

      n(x,y)=g(x,y)-f(x,y)*h(x,y)

      假設(shè)噪聲均值為0則:

      假設(shè)噪聲均方差為δ2則:

      分別對(duì)噪聲方差和噪聲均值做最小二乘估計(jì),可得如下表達(dá)式:

      綜上,新的盲反卷積復(fù)原最小化模型為:

      上式中g(shù)(x,y)為模糊圖像,f(x,y)為原圖像,h(x,y)為點(diǎn)擴(kuò)散函數(shù),n(x,y)為噪聲。α為權(quán)重系數(shù),α用于保證迭代恢復(fù)過程中噪聲均值為0,通常取值為10-4。

      其中,兩部分分別和α[∑x∑y[g(x,y)-f(x,y)*h(x,y)]]分別表示噪聲均方差為δ以及均值為0。該新的盲反卷積復(fù)原最小化模型的解即為迭代恢復(fù)模型的近似解。

      s2.5迭代恢復(fù)

      經(jīng)過上述迭代過程,得到圖像矩陣恢復(fù)值,以及點(diǎn)擴(kuò)散函數(shù)恢復(fù)值。不同迭代次數(shù)效果不同,本具體實(shí)施方式分別選取迭代次數(shù)為1、20、30、40的效果如圖10所示。

      利用傳統(tǒng)算法進(jìn)行去模糊處理同樣是利用盲反卷積算法同時(shí)恢復(fù)圖像和psf的點(diǎn)擴(kuò)散函數(shù),但是并不加入抑制噪聲信息的處理過程,所以各種噪聲因子導(dǎo)致算法的求解過程變成病態(tài)的循環(huán)迭代過程,復(fù)原出來的圖像與原圖像存在很大偏差。圖11為傳統(tǒng)算法與本發(fā)明算法的恢復(fù)結(jié)果,由圖11的結(jié)果可以明顯看出改進(jìn)算法識(shí)別的車牌圖像中模糊因子大大降低,車牌號(hào)碼、車標(biāo)等關(guān)鍵信息很清晰,噪聲信號(hào)被有效抑制;傳統(tǒng)算法雖然也降低了模糊程度和抑制了噪聲,但是效果還不是很明顯,車牌號(hào)碼部分仍存在明顯的運(yùn)動(dòng)模糊痕跡,并且噪聲的干擾導(dǎo)致恢復(fù)圖像清晰度較原圖像略有下降。

      進(jìn)行步驟s1-s2的圖像預(yù)處理后,輸出處理圖像,進(jìn)行車牌定位。

      s3.車牌定位與傾斜估計(jì);

      s3.1訓(xùn)練車牌樣本特征提取及特征組織;

      s3.1.1手動(dòng)摳取出任意正常國標(biāo)車牌;

      s3.1.2對(duì)摳取出的車牌圖像進(jìn)行積分通道特征提??;

      積分通道特征由dollárp等人在2009年提出,最早通常用于行人檢測(cè),是目前評(píng)估效果較好的檢測(cè)算子。其基本思想是通過對(duì)輸入圖形進(jìn)行各種線性和非線性的變換,圖像的很多常用特征,例如局部求和、直方圖、haar以及它們的變種,可以借助積分圖來快速、高效地計(jì)算。給定一個(gè)輸入圖像矩陣i,其對(duì)應(yīng)的通道指的是原始輸入圖像的某種輸出響應(yīng)。對(duì)于灰度圖,其對(duì)應(yīng)的通道矩陣c=i,即原圖本身;

      對(duì)于彩圖,其每個(gè)顏色通道都對(duì)應(yīng)一個(gè)通道。其他類似的通道可以通過各種線性和非線性的方法計(jì)算得到。令ω代表圖像的某種通道計(jì)算函數(shù),則對(duì)應(yīng)的通道c=ω(i)。

      在計(jì)算中,不同的變換可以形成不同的通道類型,本發(fā)明具體實(shí)施方式中選取3種不同的通道作為積分通道特征,以保證其準(zhǔn)確性。其中l(wèi)uv顏色通道能夠很好地描述車牌亮度及色度變化,梯度幅值通道很好地反映了車牌的輪廓,梯度直方圖通道則從不同梯度方向上綜合對(duì)車牌位置姿態(tài)變化進(jìn)行描述。3種通道變換如圖2所示。

      s3.1.2.1luv通道的建立

      在圖像處理中,luv色彩空間(全稱cie1976(l*,u*,v*))優(yōu)于rgb色彩空間。luv色彩空間的目的是建立與人的視覺統(tǒng)一的色彩空間,具備一致性和均勻性且各色彩分量之間不相關(guān)。在luv色彩空間中,l表示亮度,u、v表示色度。一般圖像顏色都是rgb顏色空間的,通過下面的公式可以轉(zhuǎn)換到luv顏色空間中。

      最后計(jì)算得到luv色彩空間中的l、u、v通道。

      s3.1.2.2梯度幅值通道

      梯度幅值是一種用于圖像邊緣檢測(cè)的描述方法。一幅圖像中每個(gè)像素點(diǎn)具有八鄰域以及四個(gè)邊緣檢測(cè)方向。為了能夠在像素點(diǎn)x方向、y方向、z方向上檢測(cè)邊緣,本發(fā)明實(shí)施方式使用在窗口中分別計(jì)算x方向y方向、z方向的一階偏導(dǎo)數(shù)有限差分均值來確定像素點(diǎn)的梯度幅值的方法。四個(gè)方向的梯度算子分別為圖3所示。其中i[i,j]是坐標(biāo)為3×3窗口中心像素點(diǎn)的灰度值,m[i,j]為中心像素點(diǎn)的梯度幅值,其計(jì)算公式如下所示,對(duì)應(yīng)四個(gè)方向上的計(jì)算公式為:

      由上述公式最后得到整幅圖像的梯度幅值圖。

      s3.1.2.3梯度直方圖通道

      梯度直方圖思想來源于梯度方向直方圖(histogramsoforientedgradients,hog)是2005年dalal等人將它用于行人識(shí)別而得名。hog作為一種局部特征描述子,對(duì)方向、尺度、光照不敏感。后來deniz等人將hog成功應(yīng)用于人臉識(shí)別,得到了比較好的效果。梯度直方圖特征提取過程如下:

      步驟1以圖像i[i,j]為中心取3×3的像素鄰域作為采樣窗口。

      步驟2計(jì)算該像素點(diǎn)[i,j]的梯度方向θ[i,j]和梯度幅值m[i,j]。

      θ[i,j]=arctan(i[i,j+1]-i[i,j-1])/i[i+1,j]-i[i-1,j]

      如圖4所示,箭頭代表該像素點(diǎn)[i,j]的方向。

      步驟3將梯度方向分為6個(gè)方向,即將180°平均分成6份,平均間隔30°。按照橢圓圈的高斯加權(quán)范圍將該鄰域上所有的梯度方向角度相同的像素點(diǎn)梯度幅值相加。

      步驟4最后統(tǒng)計(jì)6個(gè)方向上的梯度幅值累加和,得到整幅圖像6個(gè)方向上的梯度幅值圖。

      最后得到的包括luv通道、梯度幅值通道、梯度直方圖通道等10個(gè)通道的圖像如圖2所示。

      s3.1.3基于adaboost算法訓(xùn)練檢測(cè)器

      訓(xùn)練階段,利用adaboost對(duì)提取的積分通道特征訓(xùn)練出強(qiáng)分類器,在判別階段,計(jì)算檢測(cè)出定位車牌窗口的積分通道特征,運(yùn)用強(qiáng)分類器進(jìn)行打分(即是判別車牌位置的自信度),最后存儲(chǔ)一段視頻中分?jǐn)?shù)最高的那一幀或者幾幀圖像。

      adaboost算法由schapire、freund等人于1996年提出,其實(shí)質(zhì)是弱分類器的分類學(xué)習(xí)過程,是集成機(jī)器學(xué)習(xí)方法的一種,具有計(jì)算效率高、調(diào)節(jié)參數(shù)少、針對(duì)弱分類器的構(gòu)造兼容性強(qiáng)、以及樣本先驗(yàn)知識(shí)和數(shù)據(jù)格式要求低等優(yōu)點(diǎn),因此,得到廣泛推廣。adaboost算法中每個(gè)特征都對(duì)應(yīng)一個(gè)弱分類器,但并不是每一個(gè)特征都能很好地描述前景目標(biāo)的特點(diǎn)。如何從大量特征中挑選出最優(yōu)特征并制作成弱分類器,再通過弱分類器集成,最終獲得高精度的強(qiáng)分類器,是adaboost算法訓(xùn)練過程所要解決的關(guān)鍵問題。

      弱分類器的定義為:

      其中,fj表示一個(gè)特征,pj表示不等式方向,θj表示閾值。

      具體訓(xùn)練算法如下所示:

      (1)給定n個(gè)樣本圖像,xi是輸入樣本圖像,yi是類別標(biāo)志,其中yi=0表示為負(fù)樣本,yi=1表示為正樣本。

      (2)初始化權(quán)重:

      其中m和l分別為非正確車牌樣本和正確車牌樣本的數(shù)量,

      n=m+l。

      (3)fort=1,2,3,…,t

      (3.1)歸一化權(quán)重:其中ωt為統(tǒng)計(jì)分布。

      (3.2)隨機(jī)選擇積分通道特征j:

      隨機(jī)選擇通道索引bink(k=1,2,…,10);

      隨機(jī)選擇矩形區(qū)域rectj并計(jì)算像素值之和;

      (3.3)對(duì)每個(gè)特征j,訓(xùn)練一個(gè)弱分類器hj,計(jì)算相應(yīng)的ωt的錯(cuò)誤率:εj=∑iωi|hj(xi)-yi|;

      (3.4)選擇最小錯(cuò)誤率εt的弱分類器ht。

      (3.5)更新權(quán)重:其中,當(dāng)xi被正確分類時(shí),ei=0,反之,ei=1;

      (4)最終強(qiáng)分類器為h(x):

      其中,

      s3.2.車牌的檢測(cè)定位;

      s3.2.1用滑窗法對(duì)目標(biāo)圖像進(jìn)行掃描,獲取初定位車牌圖像;

      本發(fā)明實(shí)施方式根據(jù)國內(nèi)車牌的固定比例,設(shè)定一個(gè)固定大小的滑窗,從獲取視頻圖像頂端開始進(jìn)行逐一掃描,為了提高掃描準(zhǔn)確度,通常設(shè)置滑窗步長(zhǎng)為4個(gè)像素,將每次掃描截取的圖像進(jìn)行積分通道特征計(jì)算,與adaboost算法訓(xùn)練出的強(qiáng)檢測(cè)器進(jìn)行比對(duì),得到得分最高的(即相似度最高的)圖像區(qū)域,即初步判定為車牌位置,截取該得分最高的圖像區(qū)域?yàn)槌醵ㄎ粓D像并輸出該強(qiáng)檢測(cè)器。

      s3.2.2將檢測(cè)器輸出的初定位圖像進(jìn)行非極大值抑制處理后的初定位結(jié)果進(jìn)行基于霍夫變換的傾斜校正得到二次定位后的車牌圖像;

      非極大值抑制在物體檢測(cè)中應(yīng)用十分廣泛,其主要目的是為了消除多余干擾因素,找到最佳的物體檢測(cè)的位置。非極大值抑制是檢測(cè)的后處理過程,是關(guān)鍵環(huán)節(jié)之一。

      啟發(fā)式窗口融合算法對(duì)非重合目標(biāo)檢測(cè)效果很好,但對(duì)于車輛車牌檢測(cè)并不適合。啟發(fā)式窗口融合算法,將初始檢測(cè)窗口劃分為若干個(gè)不重合的子集,然后計(jì)算每個(gè)子集的中心,最后每個(gè)子集只保留一個(gè)檢測(cè)窗口,顯然該啟發(fā)式窗口融合算法容易造成大量漏檢。

      dalal等提出了均值漂移非極大值抑制方法,該均值漂移非極大值抑制方法不僅計(jì)算復(fù)雜,需要將檢測(cè)窗口在3維空間(橫坐標(biāo),縱坐標(biāo),尺度)表示,檢測(cè)分?jǐn)?shù)轉(zhuǎn)換,計(jì)算不確定性矩陣,迭代優(yōu)化,而且還需要調(diào)整很多與檢測(cè)器的步長(zhǎng)等相關(guān)聯(lián)的參數(shù),因此,目前較少使用。

      當(dāng)前,大多數(shù)的目標(biāo)檢測(cè)普遍使用基于貪心策略的非極大值抑制算法,因?yàn)樗?jiǎn)單高效,主要步驟如下:

      (1)將初始檢測(cè)窗口按照檢測(cè)分?jǐn)?shù)從高到低排序;

      (2)將第1個(gè)初始檢測(cè)窗口作為當(dāng)前的抑制窗口;

      (3)非極大值抑制。將所有檢測(cè)分?jǐn)?shù)比當(dāng)前抑制窗口低的初始窗口作為被抑制窗口。計(jì)算當(dāng)前抑制窗口與被抑制窗口的重合面積比率:面積的交集/面積的并集。剔除重合面積比率高于設(shè)定閾值的窗口;

      (4)如果只剩最后一個(gè)初始檢測(cè)窗口則結(jié)束,否則按照排好的順序,取下一個(gè)未被抑制的窗口作為抑制窗口,轉(zhuǎn)到步驟(3)。

      本發(fā)明實(shí)施方式同樣使用的是簡(jiǎn)單高效的基于貪心策略的非極大值抑制算法。經(jīng)過非極大值抑制處理后的車牌圖像再進(jìn)行基于霍夫變換的傾斜校正。

      霍夫變換是一種強(qiáng)有力的特征提取方法,它利用局部圖像信息有效的積累所有可能的模型實(shí)例的依據(jù),這使得它既能方便地從外部數(shù)據(jù)中獲得額外的信息,又能敏銳地從只有一部分的實(shí)例中呈現(xiàn)出有效信息。霍夫變換普遍應(yīng)用在計(jì)算機(jī)視覺中形狀,位置,幾何變換參數(shù)的判斷中。自霍夫變換提出以來,其得到了廣泛的應(yīng)用。近些年,專家學(xué)者們對(duì)霍夫變換的理論性質(zhì)與應(yīng)用方法又進(jìn)行了進(jìn)一步的探討?;舴蜃儞Q作為一種有效的識(shí)別直線的算法,具有良好的抗干擾性及魯棒性。

      霍夫變換方法包含一個(gè)從圖像空間中的特征到參數(shù)空間中點(diǎn)的集合的映射。每一個(gè)參數(shù)空間中的點(diǎn)表征著圖像空間中模型的一個(gè)實(shí)例,圖像特征利用一個(gè)函數(shù)被映射到參數(shù)空間當(dāng)中去,這個(gè)函數(shù)產(chǎn)生能夠兼容觀察到的圖像特征與假設(shè)的模型的所有的參數(shù)組合。每一個(gè)圖像特征將在多維的參數(shù)空間中產(chǎn)生一個(gè)不同的平面,但是由所有圖像特征產(chǎn)生的屬于同一個(gè)模型的實(shí)例的一切平面都會(huì)相交在描繪共同的實(shí)例的點(diǎn)。霍夫變換的根本是產(chǎn)生這些平面并且識(shí)別與之相交的參數(shù)點(diǎn)。

      經(jīng)過基于霍夫變換的傾斜校正后的車牌圖像為系統(tǒng)二次定位后的圖像。霍夫變換傾斜校正的車牌圖像示例如圖5所示。

      s3.2.3將輸出的二次定位后的車牌圖像輸入強(qiáng)檢測(cè)器,得出最終定位車牌結(jié)果。

      將經(jīng)過非極大值抑制處理和基于霍夫變換的傾斜校正后的車牌圖像后處理后的圖像輸出后再次進(jìn)行積分通道特征提取后輸入強(qiáng)檢測(cè)器進(jìn)行二次定位,包括:與adaboost算法訓(xùn)練出的強(qiáng)檢測(cè)器進(jìn)行比對(duì),得到得分最高的(即相似度最高的)圖像區(qū)域,即判定為車牌位置,截取該得分最高的圖像區(qū)域?yàn)槎味ㄎ粓D像并輸出檢測(cè)器,得到最終的定位結(jié)果。

      s4車牌字符分割;

      s4.1.去除輸入車牌區(qū)域圖像的車牌邊框;

      對(duì)于車牌圖像來說,在定位出來后的車牌圖像有兩種,一種是有邊框的車牌,而另一種是沒有邊框的車牌。我們將車牌候選區(qū)域旋轉(zhuǎn)至水平后就可以對(duì)車牌進(jìn)行精確定位了,也就是對(duì)車牌邊框的去除。對(duì)測(cè)試數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析可以得出:經(jīng)過定位旋轉(zhuǎn)后的車牌候選區(qū)域邊框有兩種,一種是車牌本身的邊框,而另一種是車牌周圍的白色背景與車牌一起被當(dāng)作候選車牌區(qū)域,此時(shí)該白色背景也可以被看作是車牌的邊框。

      車牌邊框的處理分為車牌上下邊框的處理和車牌左右邊框的處理。車牌的上下邊框的處理比較簡(jiǎn)單,車牌的上下邊框分為兩種:一種是車牌本身的白色邊框,另一種是車牌上下位置的白色背景。而車牌的左右邊界也可以歸為這兩類,不過由于圖像本身的特征,一般來說車牌的上下邊框要寬于左右邊框,并且車牌左右邊框要復(fù)雜一些。

      對(duì)于車牌的上下邊框的去除,本發(fā)明采取了下面步驟來處理:

      s4.1.1上下邊框的去除;

      s4.1.1.1用otsu(大津算法)方法獲得車牌候選區(qū)域的二值化閾值,從而得到候選區(qū)域的二值圖像,為了排除車牌傾斜角度的影響求取該二值圖像中間部分的行和,然后將行和處理如下:

      s4.1.1.2從中間向兩端開始尋找rowsum的上下方向上有一段距離為零的邊界,本發(fā)明算法中采用該距離為0.75×height,因?yàn)橐话丬嚺频纳舷逻吙蛉コ谋容^準(zhǔn)確,故我們采用圖形高度來做參考距離。此時(shí)我們得到的邊界就是最后所需要的車牌上下邊界。

      經(jīng)過上面處理后,對(duì)于大多數(shù)圖片我們就可以將其上下邊框進(jìn)行處理掉,然后我們就可以對(duì)該車牌區(qū)域進(jìn)行去除左右邊框了。

      對(duì)于車牌的左右邊框的去除,本發(fā)明采取了下面步驟來處理:

      s4.1.2左右邊框的去除;

      s4.1.2.1用去除上下邊框相同的方法來找到一個(gè)左右邊框的邊界:left1,right1。

      s4.1.2.2重新構(gòu)建一個(gè)二值圖像再用和第一步相同的投影法來尋找邊界left2,right2。此時(shí)構(gòu)建的二值圖像根據(jù)車牌區(qū)域hsi模型的h值來二值化圖像。首先對(duì)車牌區(qū)域的中間區(qū)域來統(tǒng)計(jì)其h值的范圍,然后根據(jù)該范圍對(duì)全部車牌區(qū)域進(jìn)行二值化,就得到了需要的二值化圖像。

      s4.1.2.3根據(jù)s4.1.2.1和s4.1.2.2得到的兩個(gè)邊界信息來確定最后的邊界。最后確定的邊界可以用下面式子表示:

      left=max(left1,left2)

      right=min(right1,right2)

      按照上述s4.1.1和s4.1.2兩個(gè)步驟的去邊框處理后,得到的車牌區(qū)域比原來定位出來原始車牌區(qū)域精確了些,但是并不是絕對(duì)的精確,我們可以將其看作是邊框去除過程中引入的誤差。本發(fā)明具體實(shí)施方式采用的分割算法能夠容忍在車牌邊框去除時(shí)存在的少許誤差。也就是說在去除車牌左右邊框時(shí),邊框沒有完全去除并不影響我們對(duì)字符的正確分割。

      s4.2.車牌字符分割;

      在進(jìn)行分割字符前,必須要注意一個(gè)問題,那就是由于不同光照、和車牌臟舊等原因使得車牌的灰度圖像中背景和字符對(duì)比度不強(qiáng),這對(duì)于后一步用投影法來進(jìn)行字符分割會(huì)帶來一定的難度,故而在分割前需要先對(duì)車牌圖像進(jìn)行字符的對(duì)比度增強(qiáng)。

      一個(gè)完整的車牌區(qū)域字符像素占整個(gè)車牌區(qū)域像素的20%,對(duì)于某些圖片來說,雖然由于其他原因使得車牌中字符和背景的差異不是很大,但是總體上來說字符的像素值也比背景像素值高一些。故可以利用該特點(diǎn)來對(duì)車牌區(qū)域中前20%像素進(jìn)行增強(qiáng)而對(duì)其他的像素進(jìn)行抑制,從而到達(dá)增強(qiáng)目標(biāo)字符抑制背景的目的。對(duì)此本發(fā)明采用車牌增強(qiáng)算法如下:

      步驟1:統(tǒng)計(jì)整個(gè)車牌區(qū)域內(nèi)像素點(diǎn)的最大像素值和最小像素值maxvalue,minvalue。

      步驟2:設(shè)置需要增強(qiáng)的像素點(diǎn)數(shù)占全部像素點(diǎn)數(shù)的比例系數(shù)coef,比例系數(shù)范圍在0-1之間,根據(jù)實(shí)際需要調(diào)整,通常原始車牌圖像較清晰,比例系數(shù)就較小,原始車牌圖像模糊,比例系數(shù)就大。

      步驟3:統(tǒng)計(jì)0-255像素值上對(duì)應(yīng)出現(xiàn)的像素點(diǎn)的個(gè)數(shù),并存儲(chǔ)在1×255的數(shù)組count(1,i)里面。

      步驟4:從count(1,i),i=255開始往下統(tǒng)計(jì)像素點(diǎn)的個(gè)數(shù),如果統(tǒng)計(jì)的像素點(diǎn)pixelnum<width*height*coef則將i-1繼續(xù)統(tǒng)計(jì),否則停止統(tǒng)計(jì)并記下當(dāng)前的像素值index。

      步驟5:車牌區(qū)域每一點(diǎn)按下面的方法進(jìn)行增強(qiáng):

      經(jīng)過上面的變換后,就可以將圖像進(jìn)行增強(qiáng),如果原圖已有很好的對(duì)比度,經(jīng)過以上的變換也不會(huì)使圖像的效果變差,其效果圖如圖3所示。

      從圖6的圖像處理效果可以看出,前兩幅由rgb直接轉(zhuǎn)換為灰度圖像的車牌區(qū)域其對(duì)比度不是很明顯,經(jīng)過增強(qiáng)后背景和字符的對(duì)比度明顯好轉(zhuǎn),而原本對(duì)比度一般的車牌區(qū)域經(jīng)過增強(qiáng)后其效果也變得更好了。這樣的增強(qiáng)對(duì)下一步分割字符有利。因?yàn)楸景l(fā)明所采用的字符分割方法是基于灰度投影的算法,由于原本字符對(duì)比度不明顯,其灰度投影圖的波峰、波谷特征也不是很明顯,但是經(jīng)過圖像增強(qiáng)后,其灰度投影圖就能夠很好的表現(xiàn)其波峰波谷特征,有利用對(duì)字符的精確分割。

      本發(fā)明所用的灰度投影分割字符充分利用了車牌字符的特點(diǎn),與一般的投影分割相比有很大的優(yōu)越性。普通的投影分割就是利用灰度投影曲線的波谷點(diǎn)來對(duì)字符進(jìn)行分割。本發(fā)明對(duì)這種普通的投影算法進(jìn)行了改進(jìn)大大提高了字符分割正確率。由車牌字符投影曲線可以看出,車牌圓點(diǎn)右邊的五個(gè)字符中除了字符就是數(shù)字,當(dāng)然還有少數(shù)車牌為漢字。對(duì)于字符和數(shù)字來說,其投影曲線不是雙峰結(jié)構(gòu)就是單峰結(jié)構(gòu)。所以本發(fā)明在對(duì)字符進(jìn)行分割充分利用該特征改進(jìn)了投影分割算法。本發(fā)明字符分割算法流程圖如圖7所示。

      進(jìn)行字符分割前,對(duì)前面增強(qiáng)的車牌圖像,按列累加圖像的像素值,就可以得到車牌的投影曲線,但是得到的投影曲線有很多噪聲使其并不平滑,這影響系對(duì)字符的分割,所以首先需要將投影曲線進(jìn)行平滑,在本算法中采用高斯濾波來平滑投影曲線,用于濾波的核為[0.25,0.5,1,0.5,0.25]。圖8為車牌投影曲線的濾波前后的效果圖。從圖8中可以很明顯的看出經(jīng)過濾波后的投影曲線比原曲線平滑了很多,且原曲線中的一些由噪聲引起的峰值也在濾波后消失了,這樣在檢測(cè)波峰波谷時(shí)就不會(huì)檢測(cè)出因噪聲產(chǎn)生的波峰波谷點(diǎn)。

      由濾波后的車牌灰度投影圖,就可以根據(jù)該投影曲線來進(jìn)行字符分割。本發(fā)明采用的是改進(jìn)的投影法來進(jìn)行字符分割。一般的投影法分割字符是直接利用波谷點(diǎn)來對(duì)字符進(jìn)行分割,而本發(fā)明的投影法在分割字符時(shí)充分考慮了車牌字符的投影特征,具體步驟如下:

      步驟1:根據(jù)車牌的灰度投影曲線圖可得,車牌后面最多出現(xiàn)五個(gè)雙峰結(jié)構(gòu),故搜索出前五個(gè)最大波谷點(diǎn),然后判斷這些點(diǎn)是否為雙峰結(jié)構(gòu)中的波谷點(diǎn),如果是,則將該雙峰結(jié)構(gòu)的起止位置記下。

      步驟2:確定車牌字符寬度characterwidth。如果步驟1檢測(cè)到了雙峰結(jié)構(gòu),則字符寬度就取為檢測(cè)到的所有雙峰結(jié)構(gòu)的平均值,否則字符寬度就取前3個(gè)單峰寬度中的最大值。

      步驟3:設(shè)置字符起始點(diǎn)為第二字符和第三字符的分割點(diǎn),設(shè)置結(jié)束點(diǎn)為車牌最后一個(gè)波谷點(diǎn)。如果在步驟1中檢測(cè)到了雙峰結(jié)構(gòu)則進(jìn)行步驟4,否則進(jìn)行步驟5。

      步驟4:設(shè)置字符臨時(shí)分割段起始點(diǎn)為字符起始點(diǎn),字符臨時(shí)分割段終點(diǎn)為一個(gè)雙峰結(jié)構(gòu)起始位置,然后在字符臨時(shí)分割段里進(jìn)行檢測(cè),如果該段里有一個(gè)峰結(jié)構(gòu),則該峰就單獨(dú)為一個(gè)字符,如果該段里有兩個(gè)峰結(jié)構(gòu),則先判斷這兩個(gè)峰是一個(gè)雙峰字符還是兩個(gè)單峰字符,具體判斷規(guī)則就利用這兩個(gè)峰的寬度,以及該寬度和字符寬度進(jìn)行比較。如果這兩個(gè)峰寬度之和小于字符寬度的1.2倍且這兩個(gè)峰寬度相差很小。否則這兩個(gè)峰結(jié)構(gòu)就不是一個(gè)雙峰字符的投影,且可以肯定前面一個(gè)峰結(jié)構(gòu)就是一個(gè)字符,所以可以將其前面的一個(gè)峰結(jié)構(gòu)分割出來然后更新字符臨時(shí)分割段如下:將字符臨時(shí)分割段的起點(diǎn)更新到被分割出來的峰后面,字符臨時(shí)分割段終點(diǎn)不變,但是如果此時(shí)字符臨時(shí)分割段的起點(diǎn)等于終點(diǎn)時(shí)則將其起點(diǎn)更新到先前的雙峰結(jié)構(gòu)的終止位置,并將臨時(shí)分割段的終點(diǎn)更新到下一個(gè)雙峰結(jié)構(gòu)的起點(diǎn),如果后面沒有雙峰結(jié)構(gòu)了則將臨時(shí)分割段的終點(diǎn)更新為字符結(jié)束點(diǎn),然后重復(fù)步驟4直到分割到字符結(jié)束點(diǎn)為止。

      步驟5:進(jìn)行到步驟5說明在檢測(cè)雙峰結(jié)構(gòu)時(shí)并未檢測(cè)到,但是并不代表該車牌內(nèi)不存在雙峰結(jié)構(gòu)的字符,并不能排除存在有雙峰結(jié)構(gòu)的字符。此時(shí)分割就直接從字符起始點(diǎn)開始分割直到分割出5個(gè)字符。在分割中需要檢測(cè)的就是檢測(cè)相鄰的兩個(gè)峰結(jié)構(gòu)是不是一個(gè)字符的雙峰曲線。檢測(cè)所利用的方法和步驟4中相同,利用兩個(gè)峰的寬度和該寬度與字符寬度之間的關(guān)系進(jìn)行判斷。

      步驟6:根據(jù)分割出的后面五個(gè)字符來分割前面兩個(gè)字符。首先將分割出來的后面五個(gè)字符中的最大寬度作為前面兩個(gè)字符的寬度。前面兩個(gè)字符為字母或者漢字,而字符也為雙峰結(jié)構(gòu)的,所以用后面五個(gè)字符中的最大寬度作為前面字符的寬度是合理的。分割前面兩個(gè)字符的方法為:從第二字符和第三字符的分割點(diǎn)向前移動(dòng)字符寬度個(gè)像素,然后將離該點(diǎn)的最近一個(gè)波谷值作為車牌第一字符和第二字符的分割點(diǎn)。利用同樣方法也可以確定第一個(gè)字符的開始位置。

      步驟7:對(duì)分割出來的字符序列進(jìn)行檢測(cè),看該序列是否符合車牌字符序列的特征。該特征可以用下面表達(dá)式來表示,假設(shè)dis1為前面兩個(gè)字符的寬度向量,dis2為后面五個(gè)字符看寬度向量,width為車牌寬度,height為車牌高度,則一個(gè)合理的車牌字符序列必須滿足下面的表達(dá)式:

      min(min(dis1),min(dis2))>width/10

      max(dis2)>width/5

      height/min(dis1)<3

      這樣就可以從車牌區(qū)域中分割出字符序列,從上面的算法步驟中可以看出,對(duì)于還有部分左右邊框的車牌,本發(fā)明的分割算法對(duì)其有很高的魯棒性。

      s5采用基于聯(lián)合hog特征的車牌字符識(shí)別算法進(jìn)行車牌分割字符識(shí)別;

      對(duì)于已經(jīng)分割好的車牌字符,需要進(jìn)行識(shí)別才能輸出,本發(fā)明提出了聯(lián)合方向梯度直方圖和核主成分分析法特征,它綜合了二值圖、灰度圖、16值圖的方向梯度直方圖特征的優(yōu)點(diǎn),能夠較好提取漢字結(jié)構(gòu)特征。方向梯度直方圖特征進(jìn)行聯(lián)合后,hog特征維數(shù)增加,此時(shí)為了縮短特征提取時(shí)間,本系統(tǒng)用核主成分分析法方法進(jìn)行降維。字符識(shí)別方法采用的是對(duì)小樣本問題有較好分類效果的支持向量機(jī)。

      常見車牌有7個(gè)字符,文中是將分割下來的7個(gè)字符進(jìn)行識(shí)別。車牌字符由英文字母、漢字和數(shù)字組成,中文和英文數(shù)字的特點(diǎn)不一樣:中文漢字筆畫稠密、輪廓復(fù)雜;數(shù)字和英文則輪廓清晰,結(jié)構(gòu)簡(jiǎn)單。因此文中對(duì)漢字和英文數(shù)字采用不同的分類器,對(duì)它們分別提取特征。本發(fā)明車牌識(shí)別過程是:首先確定字符的分類器。然后分別提取漢字、數(shù)字字母的灰度方向梯度直方圖(hog)特征、二值hog特征、16值hog特征,將它們組合成聯(lián)合hog特征,將得到的聯(lián)合hog特征用核主成分分析法進(jìn)行降維。最后將漢字和數(shù)字字母的聯(lián)合hog特征送入支持向量機(jī)進(jìn)行訓(xùn)練和預(yù)測(cè),將漢字和數(shù)字字母的識(shí)別結(jié)果進(jìn)行組合,得到最終的車牌字符識(shí)別結(jié)果。基于聯(lián)合hog的車牌識(shí)別流程如圖9所示。

      s5.1提取hog(方向梯度直方圖)特征

      方向梯度直方圖的核心思想是計(jì)算圖像中被檢測(cè)目標(biāo)的局部梯度的統(tǒng)計(jì)信息。由于梯度是針對(duì)邊緣輪廓,因此被檢測(cè)目標(biāo)的外形輪廓可以由梯度分布所描述。因此,hog特征就是通過將分割下來的單個(gè)字符分割成小的連通區(qū)域,成為細(xì)胞單元,每個(gè)細(xì)胞單元中的每個(gè)像素生成一個(gè)梯度直方圖,這些直方圖的串聯(lián)就可表示出所檢測(cè)目標(biāo)的特征。為了提高光照變化的適應(yīng)性,將這些直方圖在分割下來的單個(gè)字符中的一個(gè)較大區(qū)域內(nèi)進(jìn)行對(duì)比度歸一化,具體來說就是計(jì)算每個(gè)局部直方圖在塊中的密度,根據(jù)密度來對(duì)這個(gè)塊中的每個(gè)細(xì)胞單元進(jìn)行歸一化。經(jīng)過歸一化后,hog特征對(duì)光照變化和陰影可以獲得更好的適應(yīng)能力。

      hog具體實(shí)現(xiàn)過程如下:

      (1)計(jì)算圖像梯度:先用模板[-1,0,1]對(duì)分割下來的單個(gè)字符做卷積運(yùn)算,得到水平方向梯度分量gh(x,y),如式(1)所示;再用模板[-1,0,1]對(duì)分割下來的單個(gè)字符做卷積運(yùn)算,得到豎值方向梯度分量gv(x,y),如式(2)所示;最后,計(jì)算該像素點(diǎn)的梯度幅值m(x,y)和θ(x,y)梯度方向,如式(3)、式(4)所示,f(x,y)表示該點(diǎn)的像素值,計(jì)算公式為:

      gh(x,y)=f(x+1,y)-f(x-1,y)(1)

      gv(x,y)=f(x,y+1)-f(x,y-1)(2)

      m(x,y)≈|gh(x,y)|+|gv(x,y)|(3)

      (2)構(gòu)建梯度方向直方圖:在細(xì)胞單元中的每個(gè)像素點(diǎn)都要為基于某個(gè)梯度方向的直方柱投票,梯度方向可取0~180°或者0~360°,在以往的實(shí)驗(yàn)證明0~180°效果較好。單個(gè)字符圖像被分為若干個(gè)細(xì)胞單元,每個(gè)細(xì)胞單元包括8*8個(gè)像素,將梯度范圍分為9個(gè)方向角度,因此利用9個(gè)方向角度對(duì)8*8個(gè)像素的梯度信息進(jìn)行投票。特別指出,直方圖投票采取加權(quán)投票,即每個(gè)像素的梯度幅值作為投票權(quán)重。

      (3)將細(xì)胞單元組合成塊:塊的結(jié)構(gòu)有兩種:矩形塊(r-hog)和環(huán)形塊(c-hog)。本發(fā)明采用矩形塊來進(jìn)行目標(biāo)檢測(cè),矩形塊一般包含3個(gè)參數(shù):每個(gè)塊中細(xì)胞單元的數(shù)目,每個(gè)細(xì)胞單元中像素點(diǎn)的數(shù)目以及每個(gè)細(xì)胞單元的方向角數(shù)目。

      (4)塊內(nèi)歸一化計(jì)算公式如下所示:

      l2_hys:先計(jì)算l2_norm,然后將v的最大值限定為0.2,再進(jìn)行歸一化。

      其中,v表示包含給定塊統(tǒng)計(jì)直方圖信息的未歸一化向量;δ是一個(gè)很小的常數(shù),作用是為了避免分母為0;||v||k是v的k階范數(shù)。在dalal的實(shí)驗(yàn)中發(fā)現(xiàn)l2_hys,l2_norm,l1_sqrt效果差不多,l1_norm字符識(shí)別效果要差一些,但這4個(gè)歸一化方法在識(shí)別性能上對(duì)比未歸一化都有明顯提高。本發(fā)明中采用的是l2_norm進(jìn)行歸一化。

      假設(shè)將車牌字符歸一化到64*128,每8*8個(gè)像素組成一個(gè)細(xì)胞單元,每2*2個(gè)細(xì)胞單元組成一個(gè)塊,當(dāng)塊的滑動(dòng)步長(zhǎng)為8時(shí),掃描垂直方向可以滑動(dòng)15次,水平方向可以滑動(dòng)7次,因此可以得到36*7*15=3780位的特征算子。單個(gè)車牌字符處理效果如圖4所示,車牌字符灰度圖的梯度幅值圖和梯度角度圖包含的細(xì)節(jié)信息多,但缺點(diǎn)在于角度圖中的字符輪廓不明顯,影響了車牌字符識(shí)別率。為了克服上述缺點(diǎn),提出了聯(lián)合hog特征,將灰度圖的hog特征、二值圖的hog特征和16值圖的hog特征聯(lián)合起來。

      s5.2聯(lián)合方向梯度直方圖

      聯(lián)合hog方法,即將灰度圖和二值圖分別計(jì)算hog并組合成聯(lián)合特征,如下所示:h代表是得到的聯(lián)合特征,hi表示灰度圖和二值圖的hog特征,ωi代表的是灰度圖和二值圖hog的權(quán)重值,權(quán)重之和為1。權(quán)重分布的不同對(duì)后來的識(shí)別結(jié)果有很大影響。經(jīng)實(shí)驗(yàn)證明,權(quán)重值都為0.5時(shí),識(shí)別效果是最好的,并且對(duì)比單獨(dú)的灰度圖或二值圖的識(shí)別效果好:

      其中∑ωi=1

      同時(shí)將16值圖的hog特征加入聯(lián)合hog特征,即分別進(jìn)行車牌字符的灰度圖、二值圖和16值圖的hog計(jì)算,將結(jié)果以某種關(guān)系線性組合起來得到的聯(lián)合hog特征,組合如下式所示:

      h=ωgrayhgray+ω2h2+ω16h16

      h代表最終的聯(lián)合hog特征,hgray,h2,h16分別代表車牌字符灰度圖、二值圖和16值圖的hog特征,ωi代表權(quán)重。

      聯(lián)合hog將灰度圖、二值圖和16值圖的特點(diǎn)結(jié)合起來,能夠一定程度的彌補(bǔ)單獨(dú)進(jìn)行灰度圖或者二值圖的hog預(yù)案算造成的不足,對(duì)識(shí)別率有也有一定程度的提高。

      s5.3車牌字符特征分類

      車牌字符分類主要是指將待識(shí)別的字符特征與經(jīng)過學(xué)習(xí)的訓(xùn)練字符特征通過某一算法進(jìn)行對(duì)比來進(jìn)行識(shí)別。常用的分類器主要包括最小距離分類器、k-最近鄰分類器、貝葉斯分類器、決策樹、adaboost級(jí)聯(lián)分類器、人工神經(jīng)網(wǎng)絡(luò)和支持向量機(jī)(svm)。根據(jù)需要訓(xùn)練分類的車牌字符特性及不同分類器的特點(diǎn),本發(fā)明主要采用支持向量機(jī)進(jìn)行分類。支持向量機(jī)的核心思想在于利用一個(gè)分類超平面當(dāng)作決策的曲面,來最大化正類和負(fù)類兩者的邊緣距離??紤]到本文中車牌字符識(shí)別中訓(xùn)練樣本的數(shù)量有限,而且生成的hog維數(shù)較多,因此本發(fā)明采用的對(duì)小樣本問題有較好分類效果的支持向量機(jī)。針對(duì)多分類的問題,本文采用的“一對(duì)一”的方式進(jìn)行劃分。svm在處理樣本并進(jìn)行訓(xùn)練預(yù)測(cè)識(shí)別的過程大致為以下幾步:在車牌字符樣本中選擇訓(xùn)練樣本集和測(cè)試樣本集,分別對(duì)訓(xùn)練集和測(cè)試集進(jìn)行預(yù)處理,并提取hog等特征,然后利用交叉驗(yàn)證法選擇最優(yōu)參數(shù)c和g,最后利用最佳參數(shù)訓(xùn)練svm,獲得訓(xùn)練模型,利用訓(xùn)練模型對(duì)測(cè)試集進(jìn)行預(yù)測(cè),得到預(yù)測(cè)分類準(zhǔn)確率。svm中常用的核函數(shù)包括線性核函數(shù),徑向基核函數(shù),多項(xiàng)式核函數(shù),sigmoid核函數(shù)。對(duì)于不同的核函數(shù)測(cè)試集的分類準(zhǔn)確率也會(huì)不同,車牌字符識(shí)別中采用徑向基核函數(shù)的分類準(zhǔn)確率最高。因此,本發(fā)明svm的核函數(shù)采用的是rbf核函數(shù)。

      綜上所述,在提取特征以后,利用svm進(jìn)行訓(xùn)練分類。訓(xùn)練分類后,將分割好的字符輸入訓(xùn)練器中,輸出識(shí)別的車牌字符。

      本發(fā)明中提出的方法實(shí)際上可嵌入fpga實(shí)現(xiàn),運(yùn)用于具有實(shí)時(shí)輸出圖像功能的車牌識(shí)別功能的相機(jī)或攝像機(jī)監(jiān)控系統(tǒng)中。

      本領(lǐng)域技術(shù)人員將清楚本發(fā)明的范圍不限制于以上討論的示例,有可能對(duì)其進(jìn)行若干改變和修改,而不脫離所附權(quán)利要求書限定的本發(fā)明的范圍。盡管己經(jīng)在附圖和說明書中詳細(xì)圖示和描述了本發(fā)明,但這樣的說明和描述僅是說明或示意性的,而非限制性的。本發(fā)明并不限于所公開的實(shí)施方式。

      當(dāng)前第1頁1 2 
      網(wǎng)友詢問留言 已有0條留言
      • 還沒有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
      1