車牌識別系統(tǒng)采用高度模塊化的設(shè)計，將車牌識別過程的各個環(huán)節(jié)各自作為一個獨立的模塊。

車輛檢測跟蹤模塊

車輛檢測跟蹤模塊主要對視頻流進(jìn)行分析，判斷其中車輛的位置，對圖像中的車輛進(jìn)行跟蹤，并在車輛位置剛好的時刻，記錄該車輛的特寫圖片，由于加入了跟蹤模塊，系統(tǒng)能夠很好地克服各種外界的干擾，使得到更加合理的識別結(jié)果，可以檢測無牌車輛并輸出結(jié)果。

車牌切分模塊

車牌系統(tǒng)的車牌切分模塊利用了車牌文字的灰度、顏色、邊緣分布等各種特征，能較好地抑制車牌周圍其他噪聲的影響，并能容忍一定傾斜角度的車牌。這一算法有利于類似移動式稽查這種車牌圖像噪聲較大的應(yīng)用。

車牌跟蹤模塊

車牌跟蹤模塊記錄下車輛行駛過程中每一幀中該車車牌的位置以及外觀、識別結(jié)果、可信度等各種歷史信息。由于車牌跟蹤模塊采用了具有一定容錯能力的運動模型和更新模型，使得那些被短時間遮擋或瞬間模糊的車牌仍能被正確地跟蹤和預(yù)測，只輸出一個識別結(jié)果。

后臺管理

　　車牌識別系統(tǒng)的后臺管理系統(tǒng)確定車牌識別系統(tǒng)是否易于使用。必須清楚地認(rèn)識到重要的一點是識別率是，因為牌照很臟，、模糊，、被阻擋，或天氣可能不好(雪，冰雹，霧等)。后端管理系統(tǒng)的功能應(yīng)包括：

　　1、識別結(jié)果和車輛圖像數(shù)據(jù)的可靠存儲，當(dāng)多功能系統(tǒng)操作造成網(wǎng)絡(luò)錯誤時，可以保護(hù)圖像數(shù)據(jù)不被丟失，方便以后進(jìn)行人工調(diào)查;

     2、有效的自動比對和查詢技術(shù)，識別的車牌號應(yīng)自動與數(shù)據(jù)庫中的數(shù)千個車牌號進(jìn)行比較并提示報警，如果車牌號未正確讀取，則使用模糊查詢。該技術(shù)可以得到比較結(jié)果;

　　3、一個良好的車牌識別系統(tǒng)，用于網(wǎng)絡(luò)運行，還需要提供實時通訊、網(wǎng)絡(luò)安全、遠(yuǎn)程維護(hù)、動態(tài)數(shù)據(jù)交換、數(shù)據(jù)庫自動更新、硬件參數(shù)設(shè)置、系統(tǒng)故障排除。