1、 车牌识别原理 说明 车牌识别技术是指对摄像机所拍摄的车辆图像或视频序列,经过机器视觉、图像处理和模式识别等算法处理后自动读取车牌号码、车牌类型、车牌颜色等信息的技术,是人工智能技术中重要的分支。它的硬件基础包括触发设备、摄像设备、照明设备、图像采集设备、识别车牌号码的处理机,其软件核心包括车牌定位、字符分割、字符识别等算法。目前已经被广泛应用于智能交通系统的各种场合,像公路收费、停车管理、称重系统、交通诱导、交通执法、公路稽查、车辆调度、车辆检测等。对于维护交通安全和城市治安,防止交通堵塞,实现交通全自动化管理有着现实的意义。 车牌识别流程 : 1、图像采集 根据车辆检测方式的不同,图像采集
2、一般分为两种,一种是静态模式下的图像采集,通过车辆触发地感线圈、红外或雷达等装置,给相机一个触发信号,相机在接收到触发信号后会抓拍一张图像,该方法的优点是触发率高,性能稳定,缺点是需要切割地面铺设线圈,施工量大;另一种是视频模式下的图像采集,外部不需要任何触发信号,相机会实时地记录视频流图像,该方法的优点是施工方便,不需要切割地面铺设线圈,也不需要安装车检器等零部件,但其缺点也十分显著,由于算法的极限,该方案的触发率与识别率较之外设触发都要低一些。北京易泊时代经过严格的算法优化,这两种图像采集模式的识别率和稳定性都位居行业前列。 (易泊地感线圈触发模式 /视频触发工作模式) 2、 预处理 由于
3、图像质量容易受光照、天气、相机位置等因素的影响,所以在识别车牌之前需要先对相机和图像做一些预处理,以保证得到车牌最清晰的图像。一般会根据对现场环境和已经拍摄到的图像的分析得出结论,实现相机的自动曝光处理、自动白平衡处理、自动逆光处理、自动过爆处理等,并对图像进行噪声过滤、对比度增强、图像缩放等处理。去噪方法有均值滤波、中值滤波和高斯滤波等;增强对比度的方法有对比度线性拉伸、直方图均衡和同态滤波器等;图像缩放的主要方法有最近邻插值法、双线性插值法和立方卷积插值等。 (逆光图像) (过曝图像 ) (有噪声图像) 3、车牌定位 从整个图像中准确地检测出车牌区域,是车牌识别过程的一个重要步骤,如果定位
4、失败或定位不完整,会直接导致最终识别失败。由于复杂的图像背景,且要考虑不清晰车牌的定位,所以很容易把栅栏,广告牌等噪声当成车牌,所以如何排除这些伪车牌也是车牌定位的一个难点。为了提高定位的准确率和提高识别速度,一般的车牌识别系统 都会设计一个外部接口,让用户自己根据现场环境设置不同的识别区域。易泊车牌识别系统针对一些复杂背景(例如绿化带、井盖)的现场,可以进行设定识别区域的操作。 (基于连通域分析的车牌定位方法流程图) 4、车牌校正 由于受拍摄角度、镜头等因素的影响,图像中的车牌存在水平倾斜、垂直倾斜或梯形畸变等变形,这给后续的识别处理带来了困难。如果在定位到车牌后先进行车牌校正处理,这样做有
5、利于去除车牌边框等噪声,更有利于字符识别。目前常用校正方法有: Hough 变换法,通过检测车牌上下、左右边框直线来计算倾斜角度;旋转投影法,通过按不同角度将图像在水平轴上进行垂直投影,其投影值为 0 的点数之和最大时的角度即为垂直倾斜角度,水平角度的计算方法与其相似;主成分分析法,根据车牌背景与字符交界处的颜色具有固定搭配这一特征、求出颜色对特征点的主成 分方向即为车牌的水平倾斜角度;方差最小法,根据字符在垂直方向投影点的坐标方差最小导出垂直倾斜角的闭合表达式,从而确定垂直倾斜角度;透视变换,利用检测到的车牌的四个顶点经过相关矩阵变换后实现车牌的畸变校正。易泊时代针对大角度车牌识别仍有很高的
6、识别率。 5、字符分割 定位出车牌区域后,由于并不知道车牌中总共有几个字符、字符间的位置关系、每个字符的宽高等信息,所以,为了保证车牌类型匹配和字符识别正确,字符分割是必不可少的一步。字符分割的主要思路是,基于车牌的二值化结果或边缘提取结果,利用字符的结构 特征、字符间的相似性、字符间间隔等信息,一方面把单个字符分别提取出来,也包括粘连和断裂字符等特殊情况的处理;另一方面把宽、高相似的字符归为一类从而去除车牌边框以及一些小的噪声。一般采用的算法有:连通域分析、投影分析,字符聚类和模板匹配等。污损车牌和光照不均造成的模糊车牌仍是字符分割算法所面对的挑战,有待更好的算法出现并解决以上问题。 6、字
7、符识别 对分割后的字符的灰度图像进行归一化处理,特征提取,然后经过机器学习或与字符数据库模板进行匹配,最后选取匹配度最高的结果作为识别结果。目前比较流行的字符识别算法有:模板匹配法、人工神经网络法、支持向量机法和Adaboost 分类法等。模板匹配法的优点是识别速度快、方法简单,缺点是对断裂、污损等情况的处理有一些困难;人工神经网络法学习能力强、适应性强、分类能力强但比较耗时;支持向量机法对于未见过的测试样本具有更好的识别能力且需要较少的训练样本; Adaboost 分类法能侧重于比较重要的训练数据,识别速度快、实时性较 高。我国车牌由汉字、英文字母和阿拉伯数字 3 种字符组成,且具有统一的样式,这也是识别过程的方便之处。但由于车牌很容易受外在环境的影响,出现模糊、断裂、污损字符的情况,如何提高这类字符和易混淆字符的识别率,也是字符识别的难点之一。易混淆字符包括: 0 与 D、 0 与 Q、 2与 Z、 8与 B、 5 与 S、 6 与 G、 4 与 A 等。 (污损车牌) 7、车牌识别结果输出 将车牌识别结果以文本格式输出,包括车牌号,车牌颜色,车牌类型等。