數(shù)字圖像處理車(chē)牌識(shí)別技術(shù)ppt課件

《數(shù)字圖像處理車(chē)牌識(shí)別技術(shù)ppt課件》由會(huì)員分享，可在線(xiàn)閱讀，更多相關(guān)《數(shù)字圖像處理車(chē)牌識(shí)別技術(shù)ppt課件（29頁(yè)珍藏版）》請(qǐng)?jiān)谘b配圖網(wǎng)上搜索。

圖像模式識(shí)別應(yīng)用,專(zhuān)題：車(chē)牌識(shí)別技術(shù) 圖像分析處理技術(shù)的綜合應(yīng)用,1,一、車(chē)牌識(shí)別技術(shù)簡(jiǎn)介,車(chē)牌識(shí)別是現(xiàn)代交通管理的重要措施，是智能交通系統(tǒng)的重要環(huán)節(jié) 內(nèi)容： 車(chē)牌識(shí)別系統(tǒng)是采用數(shù)字?jǐn)z像技術(shù)和計(jì)算機(jī)信息管理技術(shù)，對(duì)運(yùn)行車(chē)輛實(shí)現(xiàn)智能管理的綜合運(yùn)用技術(shù) 理論基礎(chǔ)：數(shù)字圖像處理和模式識(shí)別 車(chē)牌識(shí)別技術(shù)具有典型性，容易推廣到其它識(shí)別對(duì)象,2,識(shí)別流程,主要由三部分組成 圖像捕獲一般采用CCD攝像頭，包括整車(chē)圖像或牌照(一般為彩色圖像) 后兩步由計(jì)算機(jī)實(shí)現(xiàn) 關(guān)鍵部分是第三步：字符識(shí)別（OCR）,3,識(shí)別步驟,具體識(shí)別步驟如下(不是唯一的)： (1) 獲取整車(chē)或局部圖像； (2) 對(duì)獲取車(chē)輛數(shù)字圖像進(jìn)行預(yù)處理； (3) 車(chē)牌定位； (4) 二值轉(zhuǎn)換； (5) 車(chē)牌分類(lèi)； (6) 車(chē)牌分割； (7) 字符識(shí)別； (8) 結(jié)果優(yōu)化(車(chē)牌模糊識(shí)別)。,4,二、車(chē)牌定位與分割,車(chē)牌定位：通過(guò)車(chē)牌區(qū)域的特征來(lái)判別牌照的位置，將車(chē)牌從圖像中分割出來(lái) 步驟： (1)彩色圖像灰度化 (2)圖像增強(qiáng) (3)邊緣檢測(cè) (4)模板匹配 (5)輸出牌照子圖像,5,CCD 輸出,CCD捕獲的汽車(chē)圖像,6,灰度圖像,彩色圖像灰度化,7,灰度增強(qiáng),灰度增強(qiáng)改變對(duì)比度,8,邊緣提取(方法多種),定位、分割后輸出 下步工作是對(duì)分割輸出進(jìn)行字符識(shí)別,9,1、彩色圖像灰度化,CCD攝像頭輸出的圖像一般是24位真彩色圖像，需進(jìn)行灰度化，使不同顏色車(chē)體統(tǒng)一化，同時(shí)實(shí)現(xiàn)快速處理 兩種制式都可以采用 PAL制： 亮度 NTSC制：亮度,10,2、對(duì)比度增強(qiáng),利用灰度變換增強(qiáng)對(duì)比度，突出車(chē)牌區(qū) 一般采用截取式變換 ： 常采用下式,11,3、邊緣檢測(cè),主要方法 (1) 對(duì)圖像進(jìn)行直分析處理 (2) 提取車(chē)牌區(qū)域邊界 (3) 灰度點(diǎn)運(yùn)算 (4) 模板匹配 (5) 算子法 (6) 形態(tài)學(xué)處理 (7) 其它邊緣提取方法,12,車(chē)牌圖像特征,車(chē)牌定位與分割的理論與方法是根據(jù)車(chē)牌圖像的特點(diǎn)來(lái)確定的 車(chē)牌圖像主要特征有： (1) 車(chē)牌區(qū)域內(nèi)的邊緣灰度直方圖統(tǒng)計(jì)特征 (2) 車(chē)牌的幾何特征 (3) 車(chē)牌區(qū)域的灰度分布特征 (4) 車(chē)牌區(qū)域的水平、垂直投影特征 (5) 車(chē)牌形狀特征和字符排列格式特征 (6) 車(chē)牌的形態(tài)學(xué)特征 (7) 頻譜特征,13,車(chē)牌圖像的組成,組成：省份漢字(或其他漢字)+字母或阿拉伯?dāng)?shù)字，共7位，即 X1X1X3X4X5X6X7 例：川AK0387 尺寸：寬 45mm、高 90mm、間隔符寬10mm、單元間隔 12mm 字符筆畫(huà)在豎直方向是連通的 牌底與字符顏色對(duì)照大，邊緣非常豐富 四類(lèi)：藍(lán)底白字、黃底黑字、黑底白字、 白底黑字,14,定位分割難點(diǎn),抓拍圖像受環(huán)境因素干擾，特別環(huán)境光的干擾，環(huán)境光太強(qiáng)時(shí)，圖像淡薄，對(duì)比度變差； 車(chē)尾有其它字符，使車(chē)牌定位困難； 車(chē)牌大都存在污染而變臟； 車(chē)牌部分被遮擋； 車(chē)牌圖像為運(yùn)動(dòng)圖像，拍攝時(shí)產(chǎn)生失真。,15,模板匹配,用與圖像中車(chē)牌一樣大小的已知模板，在經(jīng)對(duì)比度增強(qiáng)后的圖像中，從起點(diǎn)(0,0)開(kāi)始，逐步平移一一匹配，尋找最佳區(qū)域 匹配公式： 最大值為輸出 已知模板并不是某個(gè)具體的車(chē)牌，而是具有車(chē)牌統(tǒng)計(jì)特性的通用模板，是一種模糊匹配,16,形態(tài)學(xué)處理確定車(chē)牌位置,將圖像二值化,通過(guò)膨脹、腐蝕操作定位,17,車(chē)牌定位算法之一,(1) 對(duì)原始圖像進(jìn)行基于方向區(qū)域距離測(cè)度的彩色邊緣檢測(cè)得到原始邊緣圖像 (2) 對(duì)原始邊緣圖像中的每一邊緣點(diǎn)進(jìn)行邊緣顏色對(duì)檢測(cè)，獲得候選車(chē)牌邊緣圖像 (3) 對(duì)候選車(chē)牌邊緣圖像進(jìn)行閉運(yùn)算獲得連通域圖像 (4) 計(jì)算各連通域的寬高比，剔除不在閾值范圍內(nèi)的連通域，若只剩下一個(gè)連通域，則可確認(rèn)為車(chē)牌區(qū)域，轉(zhuǎn)(7),18,車(chē)牌定位算法之一,(5) 若還有多于一個(gè)連通域，則計(jì)算r。剔除不在閾值范圍內(nèi)的連通域，若只剩下一個(gè)連通域，則可確認(rèn)為車(chē)牌區(qū)域，轉(zhuǎn)(7) (6) 若還有多于一個(gè)連通域，則對(duì)其進(jìn)行彩色邊緣檢測(cè)然后進(jìn)行水平掃描，統(tǒng)計(jì)每行灰度值為1的個(gè)數(shù)N，如果有連續(xù)M行以上Nn1,n2，則可認(rèn)為此連通域?yàn)檐?chē)牌區(qū)域 (7) 在原始圖像中提取車(chē)牌圖像,19,三、車(chē)牌字符識(shí)別技術(shù),與通用的OCR識(shí)別方法類(lèi)似 模板匹配法 首先對(duì)字符二值化，并歸一化字符尺寸，然后進(jìn)行模板匹配，選取擇最匹配輸出 神經(jīng)網(wǎng)絡(luò)匹配法，兩種算法： (1) 先對(duì)各字符進(jìn)行特征提取，利用特征訓(xùn)練網(wǎng)絡(luò)分類(lèi)器，然后用分類(lèi)器識(shí)別字符 (2) 由網(wǎng)絡(luò)對(duì)輸入圖像自動(dòng)提取特征并識(shí)別,20,1、預(yù)處理,車(chē)牌經(jīng)定位、分割檢出后，基本上具有被識(shí)別的條件，但還需做適當(dāng)預(yù)處理 預(yù)處理： (1) 圖像二值化 在彩色圖像灰度化后，因車(chē)牌類(lèi)型不同，會(huì)出白底黑字和黑底白字兩種，需要統(tǒng)一為一種 (2) 字符分割,21,2、二值化,二值化的關(guān)鍵是閾值的選擇 二種方法：全局閾值、局部閾值 全局閾值 其中hl是灰度值為l的像素個(gè)數(shù)。,22,3、傾斜校正,提取的車(chē)牌圖像有可能是傾斜的，為了便于識(shí)別，需對(duì)圖像進(jìn)行傾斜度校正 方法：哈夫(Hough)變換 計(jì)算車(chē)牌圖像上、下邊界直線(xiàn) 計(jì)算邊界直線(xiàn)的傾斜度 P 傾斜度校正,23,4、尺寸歸一化,字符的大小歸一化可以簡(jiǎn)單地用統(tǒng)計(jì)分析法來(lái)完成 歸一化內(nèi)容: (1) 位置歸一化，即把字符移到規(guī)定的位置上， 使字符的質(zhì)心對(duì)中，也可字符邊框定位 (2) 大小歸一化，使被識(shí)別字符具有同樣大小,24,5、字符識(shí)別,識(shí)別方法較多 匹配法識(shí)別 采用相關(guān)函數(shù)作為相似度測(cè)度 其中，T為模板，S為模板覆蓋下的圖像子塊，i、j為子塊左上角坐標(biāo)，M、N為模板長(zhǎng)和寬,25,6、字符優(yōu)化,按照上述車(chē)牌定位和切割方法取得的單個(gè)字符圖像，可能存在字符與邊框相連、字符變形和字符斷裂等情況，為此在真正識(shí)別之前需要對(duì)字符位圖作進(jìn)一步的技術(shù)處理； 常用的方法是將用于識(shí)別的字符位圖按新的點(diǎn)陣大小重新采樣，然后搜索字符位圖的準(zhǔn)確上下左右邊界值，依照字符位圖的寬高值和新的邊界值重新確定字符像素點(diǎn)，并排除非字符情況，如左右邊界值之差過(guò)小、上下邊界差過(guò)小等情況即認(rèn)為非字符。,26,7、字符類(lèi)型,民用車(chē)漢字：京、津、晉、冀、蒙、遼、吉、黑、滬、蘇、浙、皖、閩、贛、魯、豫、鄂、湘、粵、桂、瓊、川、貴、云、藏、陜、甘、青、寧、新，渝” ； 英文字母：除“I”外的“AZ”其他字母； 數(shù)字：09； 數(shù)字和字母：“WJ”、“警”+ 09 ； 軍用車(chē)漢字：甲、乙、丙、丁、戊、己、庚、辛、壬、癸、子、丑、寅、卯、辰、巳、午、未、申、酉、戌、亥； 民用車(chē)尾字：包括“09、學(xué)、試、領(lǐng)、港”等字。,27,8、標(biāo)準(zhǔn)特征庫(kù),將切分下來(lái)的字符圖像變換到4040的點(diǎn)陣空間上，按照水平和垂直方向提取二值特征、按照字符結(jié)構(gòu)在水平、垂直、左、右四個(gè)方向的幾何投影圖像特征建立多維特征庫(kù)，其中標(biāo)準(zhǔn)漢字從宋體字庫(kù)中選取，字母及數(shù)字從OCR-A字庫(kù)中選取。對(duì)標(biāo)準(zhǔn)字符分別進(jìn)行歸一化、輪廓化和特征抽取，標(biāo)準(zhǔn)模板就是從中抽取特征得到的特征向量。,28,10、字符匹配,兩種主要方法：模板匹配法和人工神經(jīng)網(wǎng)絡(luò)算法； 模板匹配算法首先把待識(shí)別字符二值化，并將其尺寸大小縮放為字符數(shù)據(jù)庫(kù)中模板的大小，然后與所有的模板進(jìn)行匹配，最后選最佳匹配作為結(jié)果； 基于人工神經(jīng)網(wǎng)絡(luò)的算法主要有兩種： (1) 一種是先對(duì)待識(shí)別字符進(jìn)行特征提取，然后用所獲得的特征來(lái)訓(xùn)練神經(jīng)網(wǎng)絡(luò)分類(lèi)器； (2) 另一種方法是直接把待處理圖像輸入網(wǎng)絡(luò)，由網(wǎng)絡(luò)自動(dòng)實(shí)現(xiàn)特征提取直至識(shí)別出結(jié)果。前一種方法識(shí)別結(jié)果與特征提取有關(guān)，而特征提取比較耗時(shí)，因此特征提取是關(guān)鍵。,29,