1、基于机器视觉的注塑制品缺陷检测系统研究作者姓名指导教师教授单位名称信息科学与工程学院专业名称自动化东北大学2007年6月RESEARCHONINJECTIONPRODUCTDEFECTSDETECTIONSYSTEMBASEDONMACHINEVISIONBYSUPERVISORPROFESSORNORTHEASTERNUNIVERSITYJUNE2007东北大学本科毕业设计(论文)毕业设计(论文)任务书I毕业设计(论文)任务书毕业设计(论文)题目设计论文的基本内容123毕业设计(论文)专题部分题目设计或论文专题的基本内容学生接受毕业设计(论文)题目日期第周指导教师签字年月日东北大学本科毕业设
2、计(论文)摘要II基于机器视觉的注塑制品缺陷检测系统研究摘要随着计算机和机器视觉技术的不断发展,基于机器视觉的产品检测技术正逐渐成为研究的热点。基于机器视觉的产品检测技术是指以机器视觉为手段获取被测物体图像,并将其与己知的标准进行比较,从而确定被测物体的质量状况的过程,它具有非接触、速度快、柔性好等突出优点,相比于传统检测技术具有更为广阔的应用前景。基于此,本文依托东北大学流程工业综合自动化重点实验室基金项目,针对机器视觉技术在注塑制品缺陷检测中的应用展开研究。在调研注塑生产过程、查阅大量文献的基础上,本文完成了基于机器视觉的注塑制品质量检测系统的软硬件设计,并针对产品图像采集和处理过程中遇到
3、的问题提出了相应的解决方案。针对所获取的图像存在背景、噪声等干扰信息,不适于直接进行缺陷检测的问题,本文研究了相关的图像处理算法。对于产品图像存在背景干扰的情况,提出一种阈值分割与差影相结合的方法,实现背景的完全消除;针对传统线性滤波以及中值滤波方法中存在的不足,提出一种新的滤波方法,该方法不仅增强了背景分割算法对于外界环境变化的适应能力,而且提高了算法的实用性。在完成图像处理之后,本文针对注塑制品常见形状以及纹理缺陷的特征提取进行了研究。一方面根据系统对检测速度的要求,提出一种快速预检测和缺陷细节信息分析识别相结合的检测思路,在保证缺陷信息完整的情况下,提高检测速度;另一方面针对传统方法在纹
4、理特征提取中存在的分类效率低下等问题,提出一种新的特征组合方法,该方法有效降低了特征向量的维数,在保证识别准确率的情况下,提高分类效率。最后,本文根据注塑产品多缺陷种类并存的特点设计了基于多分类支持向量机的特征分类方法。综合应用上述方法,实现了基于机器视觉的注塑制品缺陷检测系统的雏形,获得了较高的检测正确率,较好的满足了注塑制品检测的要求。关键词机器视觉;注塑制品;图像处理;特征提取;多分类支持向量机东北大学本科毕业设计(论文)ABSTRACTIIIRESEARCHONINJECTIONPRODUCTDEFECTSDETECTIONSYSTEMBASEDONMACHINEVISIONABSTR
5、ACTTHETECHNIQUEOFPRODUCTINSPECTIONBASEDONMACHINEVISIONHASBEENPROPELLEDBYTHEDEVELOPMENTOFCOMPUTERSCIENCEANDMACHINEVISIONINMOSTRECENTYEARS,ANDITSEIZESMOREANDMORERESEARCHERSATTENTIONBYSNATCHINGTHEIMAGESOFTHEPRODUCEANDCOMPARINGTHEMWITHSTANDARDONE,MACHINEVISIONBASEDINSPECTIONCANGIVEAREALTIMEEVALUATIONONT
6、HEQUALITYOFTHEPRODUCTWITHOUTCONTIGUITYFORTHESEMERITS,THISSTUDYFOCUSESONTHEDEFECTSDETECTIONOFINJECTIONMOLDINGMACHINEIMMPRODUCTBASEDONMACHINEVISIONTHISRESEARCHISSPONSOREDBYNEUKEYLABORATORYOFPROCESSINDUSTRYAUTOMATIONFUNDFIRSTLY,BYRESEARCHINGTHEPROCESSOFINJECTIONPRODUCTIONANDANALYZINGRELATIVELITERATURES
7、,THISTHESISFINISHESTHEHARDWAREANDSOFTWAREDESIGNOFDEFECTSDETECTIONSYSTEMANDSOLVESTHEPROBLEMSINCAPTURINGANDPROCESSINGIMAGESTHEBACKGROUNDANDNOISEINTHECAPTUREDIMAGEMAKESTHEDEFECTDETECTIONMUCHHARDERAMETHODCOMBININGTHRESHOLDANDIMAGESUBTRACTIONISPROPOSEDTOSEGMENTTHEBACKGROUNDFROMTHEOBJECTIMAGEENTIRELYTOFIL
8、TERINGTHENOISEANDENHANCETHEROBUSTNESSOFTHESEGMENTATIONMETHOD,ANEWFILTERALGORITHMISPRESENTEDWHICHPROVIDESABETTERRESULTTHANTHETRADITIONALMETHODSTHERESEARCHONDEFECTDETECTIONFEATUREEXTRACTIONCONSISTSOFTWOPARTSFORDETECTINGSHAPEDEFECTS,ARAPIDINSPECTINGMETHODISPROPOSEDUNDERTHECONDITIONTHATTHEDEFECTSINFORMA
9、TIONISRESERVEDENTIRELYFORDETECTINGTEXTUREDEFECTS,BYREGROUPTHETEXTUREFEATUREVECTORS,ANEWMETHODISPRESENTEDTOENHANCETHEEFFICIENCYOFCLASSIFICATIONATLAST,AMULTICLASSCLASSIFICATIONSUPPORTVECTORISDESIGNEDFORTHEMULTICLASSDEFECTSDETECTIONTHEBASICSTRUCTUREOFIMMPRODUCTSDEFECTDETECTIONSYSTEMBASEDONMACHINEVISION
10、ISCOMPLETEDBYUSINGMETHODSPROPOSEDABOVETHETESTRESULTSSHOWTHATTHISSYSTEMDEMONSTRATEAHIGHDETECTINGPRECISIONKEYWORDSMACHINEVISIONINJECTIONPRODUCTIMAGEPROCESSINGFEATUREEXTRACTIONMULTICLASSCLASSIFICATIONSUPPORTVECTORMACHINE东北大学本科毕业设计(论文)目录IV目录毕业设计(论文)任务书I摘要IIABSTRACTIII第一章绪论111机器视觉检测技术概述112机器视觉检测的研究概况213机
11、器视觉检测技术的应用314课题背景及本文主要工作5第二章系统的设计与实现721系统总体结构722硬件系统的设计与实现7221硬件系统设计8222系统关键设备选型8223硬件系统的实现1023软件系统的设计与实现12231软件系统基本框架12232图像的采集与显示模块13233系统通讯模块15234辅助功能模块1724本章小结18第三章注塑制品图像处理1931注塑制品图像处理总述1932注塑制品图像背景分割19321传统背景分割方法20322传统方法在注塑制品背景分割中的应用分析21323注塑制品背景分割方法设计2333注塑制品图像滤波24331传统滤波方法25东北大学本科毕业设计(论文)目录V
12、332传统滤波方法应用效果分析27333注塑制品图像滤波方法设计2734本章小结29第四章结束语31参考文献33致谢35东北大学本科毕业设计(论文)第一章绪论1第一章绪论11机器视觉检测技术概述机器视觉是研究用相机和计算机来模仿人的眼睛和大脑完成对目标的识别、跟踪和测量等任务的科学1。通俗地说,就是用机器代替人眼来做测量和判断2。它的工作过程大致为首先,使用相机将被摄取目标转换成图像信号,传送给专用的图像处理系统,图像系统对这图像中包含的信息进行处理和计算;然后计算机根据处理的结果做出判断或决策;最后将控制信号传送给执行机构。机器视觉的特点是自动化、客观、非接触和高精度,与一般意义上的图像处理
13、系统相比,机器视觉强调的是精度和速度,以及工业现场环境下的可靠性。机器视觉实际上是数字视觉技术与工业制造技术的结合的综合性技术,主要包括数字图像处理技术、机械工程技术、控制技术、电光源照明技术,光学成像技术、传感器技术、模拟与数字视频技术,计算机软硬技术,人机接口技术等。这些技术在机器视觉中是并列关系,这些技术相互协调应用才能构成一个成功的工业机器视觉应用系统。将机器视觉应用到制造业的检测领域中,用机器视觉系统确定产品相对于一组标准要求的偏差的过程通常称为机器视觉检测3。它特指机器视觉在工业检测方面的应用,是机器视觉应用和研究领域中的一个重要分支。机器视觉检测是一种适合现代制造技术发展的检测方
14、式。它与传统的检测方法相比,有着如下的优势首先,机器视觉可以实现非接触在线检测,完成对生产线上的零件进行100的检测,满足自动化制造系统中的工序间检测和过程检测的要求;其次,机器视觉检测是通过计算机或者数字信号处理器中的程序对图像信息进行处理而得到的测量结果,因此机器视觉检测具有一定的智能和柔性,适于现代企业的柔性生产方式;再次,只要选用足够高精度的镜头和图像传感器,机器视觉检测技术可以达到较高的检测精度;最后,机器视觉易于实现信息的集成和管理,为实现计一算机集成制造技术提供必要的支持。并且机器视觉检测与传统的人工检测相比效率更高,检测结果更加准确可靠。由于机器视觉检测不会受到操作者的疲劳度、
15、责任心和经验等因素的影响,在一些不适合人工作业的危险场合,人工视觉难以满足要求的场合和带有高度重复性、智能性并且靠人的眼睛无法连续稳定地进行产品检测的场合,机器视觉可以发挥它自身的优势来高效、高质量的完成检测任务。机器视觉检测是与先进制造工艺与现代制造生产模式相适应的智能化、自动化、柔东北大学本科毕业设计(论文)第一章绪论2性的检测手段。在国外己经将机器视觉系统广泛地用于工况监视、成品检验和质量控制等领域。在中国,这种应用也在逐渐被认知,对于机器视觉的需求将越来越广泛。12机器视觉检测的研究概况机器视觉技术是在20世纪50年代从统计模式识别兴起的,但由于机器视觉系统的复杂性,当时的研究工作主要
16、集中在对二维图像的分析、识别和理解上,如光学字符识别、工件表面、显微图片和航空照片的分析解释等。60年代中期,RROBERT开创性的三维景物分析研究成为机器视觉的起源,他运用数字图像研究实体模型,对物体形状和结构进行了描述。70年代,MIT的学者提出了机器视觉的理论。80年代,MARR首次从信息处理的角度综合了图像处理、心理物理学、神经心理学及精神病学的研究成果,提出了第一个较为完备的视觉处理框架,他将视觉分为自上而下的三个阶段,创建了MARR的理论框架。近年来,随着机器视觉理论及应用技术的不断发展,人们逐渐认识到MARR的理论框架存在以下不足,即被动接受信号,无主动性和目的性,处理过程没有反
17、馈环节,用一些假设和基本的约束保证通用性。因此,许多学者在机器视觉的现状与目标、理论与方法以及实验与应用等方面发表了许多不同的见解,探索了新的理论,在很大程度上促进了机器视觉技术的发展4,5。当前,随着机器视觉检测系统应用的增加,对机器视觉的研究也越来越多。一些研究机构或企业开发了机器视觉系统软件的开发平台或者函数库,提供一些常用的算法和工具。但是,机器视觉是一门交叉性强的学科,因此在研究和应用中一套视觉系统一般只针对某一种检测任务来进行研究和开发,没有一套机器视觉系统是对任何检测工程来说是通用的。根据机器视觉的应用领域不同,对机器视觉检测的研究可以分为不同的种类,不同的学者对分类也有不同的见
18、解6,7。在现阶段的研究中通常分为以下三种类型1尺寸测量尺寸测量是机器视觉研究和应用的重要应用领域,也是一个比较早开始的研究的方向。机器视觉应用于尺寸测量工程中时,从视觉系统的硬件光源、图像传感器等的选用到软件算法的设计中的每一个环节都对最终的性能产生影响。需要根据工程的自身特点选择合适的硬件。东北大学本科毕业设计(论文)第一章绪论32表面质量检测机器视觉检测技术已经广泛应用到工业产品的表面检测中,主要检测的内容包括毛刺、划痕、磨损等。但对复杂曲面的视觉检测仍有一定的困难,一方面,工件表面的反射方向复杂、存在阴影等因素影响着图像的质量,另一方面相机的镜头方向和距离工件的位置的控制也是影响检测精
19、度的因素。3目标分类与识别目标分类与识别一直是研究的热点,物体识别的基本方法是建立物体模型,使用各种匹配算法从真实的图像中识别出物体最相似的目标。根据物体识别任务所在的空间,物体识别可以分为二维特征识别和三维特征的识别。二维识别用在识别远距离的物体或者在场景中稳定的位置的物体。三维识别通过物体的灰度图或25维图获取实际场景中的信息来识别物体的三维结构特征。信件分拣、指纹识别、人脸识别、车牌识别等都是此方面典型的应用。13机器视觉检测技术的应用自上世纪八十年代初开始,国外有关视觉检测技术的研究逐渐兴起。美国人首先将视觉检测系统应用于制造业8,其中,有100多家公司跻身于视觉检测系统的经营市场。而
20、国内的视觉检测研究从上世纪九十年代才开始得到重视。相关资料表明,目前视觉检测技术已经在印刷电路板的检测、汽车车身检测、钢板表面的自动探伤、机械零件的自动识别分类和几何尺寸测量、大型工件平行度和垂直度测量、容器容积或杂质检测及农产品的检测等领域得到了广泛应用。在电子工业中,由于超大规模集成电路的出现,使得集成芯片IC的密度和复杂度大大提高,PCB的布线变得更加复杂。传统的检测方法越来越不适应,检测成本越来越高。而视觉检测以其快速、精确的优点,为印刷电路板PCB和集成芯片IC的自动检测提供了高性价比的新方案。PCB和IC的检测代表了一类重要的视觉应用领域,目前在PCB和IC的生产线上,大约60的检
21、测任务是由机器视觉检测来完成的。PERKINS等人描述了用于检测平板上元器件如装配的PCB的机器视觉系统,系统应用边缘检测,细化和连接边缘成分段直线来处理PCB图像,并对准模型和场景在分割描述的基础上决定匹配点9。FRANCILAHAJNAR等人描述对电路板自动检测的机器视觉系统10,他们应用亚像素边缘检测技术和半自动校正系统来分辨电路板的物理特性,通过检测电路板的尺寸反映刀具的磨损情况。东北大学本科毕业设计(论文)第一章绪论4在汽车制造业中,视觉检测主要用在轿车车身生产线,对车身侧围、底盘、以及整个下身总成关键尺寸进行检测,还用于生产线中机器手的定位、瞄准,从而实现机器手的自适应自动化安装,
22、大大提高了汽车产品质量和生产效率,降低了生产成本。SCHMIDBERGER等人用一个装配在机器人上的照相机来检测大尺寸平面上的信息,移动机器人拍摄不同部位图像,通过图像处理的方法比较被测零件与标准零件图像,从而检测裂缝、折叠、孔洞丢失等缺陷11。DIMITRIOSKOSMOPOULOS等人开发了汽车用自动检测间隙系统12,任务是测量车身与装在其上的各种面板包括门,发动机罩等之间的间隙尺寸。该系统在多于30处位置进行检测,测量的有效RMS误差01MM。在机械零件检测中,主要包括零件的自动识别与分类、零件几何尺寸与形位误差的测量以及工件表面或内部的缺陷检测。机械零件的视觉检测是将三维物体拍摄成二维
23、的数字图像,根据图像来分析和理解空间物体。大部分机械零件的构成要素是直线和圆弧,对它们的检测,常采用测量点序列进行拟合以求得参数值。在MILLS研究的尺寸测量系统中13,使用高分辨率线扫描相机来获取圆柱形零件的检测图像,通过对图像的处理及分析,计算其尺寸误差。BREMNER描述了一个使用XY驱动条钢形状的尺寸检测系统14,在32MM2的视场内达到001MM的精度。视觉检测在农业中的应用主要体现在农产品的检测方面,农产品的图像检测技术按其目的不同可分成分级、检验和分类。1999年,JPALIWAL等人研究了不同品种小麦的识别技术15,基于彩色参数和傅立叶描述算子,利用最小距离分类器,对五种加拿大
24、小麦的识别,其准确率分别为100、94、93、99和95。XLOU等人对完整小麦和破损小麦的检测进行了研究,分别采用基于统计分类器的K最近邻法和基于BP网络分类器的检测方法。试验结果表明,基于BP网络分类器的识别准确率高于基于统计分类器的方法16。在医药业中,胶囊类的药品包装一般使用铝塑板包装,其优点是方便、卫生及密封性好。但存在漏装、残缺、漏粉等现象。针对这一问题,左奇等人提出一种基于局部二值化的视觉检测方法17。相关实验表明,检测为合格品的正确识别率为9995,识别速率达200粒/。机器视觉检测已经渗入到工业生产的各个领域。成为保证产品质量的一个重要环节。东北大学本科毕业设计(论文)第一章
25、绪论514课题背景及本文主要工作注塑制品的应用以轻工业和建筑业为主,目前在发达国家,其消费比例可达40以上。随着功能性塑料的开发,更多的注塑制品进入医疗卫生领域。现在塑料作为一种新型材料,正在迅速进入办公室自动化、海洋开发、信息产业等技术领域,并逐渐向其他领域拓宽18。但是注塑产品的质量检测却是令每个注塑企业头痛的问题。如果不掌握正确的注塑质量检测方法,就很难控制注塑件的质量,甚至会出现一些意想不到的品质问题,给企业造成很大的经济损失。一些注塑企业由于对注塑生产过程中的产品质量检测方法不当,经常出现各种产品质量问题(如外观、颜色、结构、尺寸、强度、装配不良等),造成注塑产品不良率高、批量退货、
26、客户抱怨、延误交期,导致注塑过程中废品率高、料耗大、成本高,企业的竞争力下降。而现在国内检测工具多为投影仪、精密高度尺、针规、量块、半径样板、卡尺等。而这些离线检测方法不利生产过程的自动化,不符合现代制造业检测实时,在线,非接触的要求。于是现在少数大型注塑产品生产商,就开始采用机器视觉的办法进行在线实时检测。正是这种基于机器视觉的检测方法使得注塑产品检测过程的自动化、智能化成为可能。基于此,本文将研究重点放在实现注塑制品的机器视觉检测,提高注塑制品检测的效率以及产品的生产质量。本文在东北大学流程工业与综合自动化重点实验室的注塑生产过程基础上设计并实现了基于机器视觉技术的检测系统,实现注塑制品的
27、自动质量检测,分拣,以及为注塑机控制提供定性控制反馈消息的功能。主要工作包括以下几个方面1在调研注塑生产过程、查阅大量文献的基础上,本文完成了基于机器视觉的注塑制品质量检测系统的软硬件设计。根据系统要求,对硬件设备进行选型,搭建机器视觉检测系统的硬件平台。在硬件平台的基础上,利用VC编写摄像头的控制代码。改进人机界面,增强软件功能。用软件实现理论研究的算法,对图像进行处理。并与注塑机控制系统进行通讯,实现交互控制。2针对所获取的图像存在背景、噪声等干扰信息,不适于直接进行缺陷检测的问题,本文研究了相关的预处理算法。针对单一采用阈值或差影法进行背景分割都存在缺陷的情况,本文采用先阈值后差影的方法
28、,得到了优于上述两种算法的分割背景制品图像。为了解决分割背景处理后,有可能出现的噪声问题,本文改变了常规的滤波步骤,东北大学本科毕业设计(论文)第一章绪论6在得到背景图像前先进行滤波,然后再判别背景与目标。克服了邻域平均法对零散噪声克服不足以及中值滤波方法在大面积噪声处理时失效的问题。增强了背景分割算法对于外界环境变化的适应能力,提高了算法的实用性。3在取得满意图像的基础,进行制品缺陷的特征提取研究。首先,分析了注塑制品质量缺陷的特点,提出将注塑制品缺陷分为形状缺陷以及纹理缺陷分别进行特征提取的思路。在形状特征提取方面,本文提出一种兼顾实时性与准确性的方法,利用几何特征检测的迅速性对制品进行初
29、步的定性判断,如有缺陷的制品产生,再通过不变矩得到缺陷的细节特征。在纹理特征提取上,结合灰度共生矩阵,GABOR小波滤波器各自的优点,对特征向量进行优化组合,减少了传统方法的特征向量维数,在保证准确率的情况下,提高了分类效率。4最后,对注塑制品的缺陷检测方法进行了研究。选择多分类支持向量机并根据系统的特点与要求对分类器进行了设计。综合应用上述方法,实现了基于机器视觉的注塑制品缺陷检测,获得了较高的检测正确率,较好的满足了注塑制品检测的要求。东北大学本科毕业设计(论文)第二章系统的设计与实现第二章系统的设计与实现上一章介绍了机器视觉检测系统的研究现状,分析了当前机器视觉检测系统存在的问题及发展方
30、向,为本文对机器视觉检测系统的研究奠定了基础。本章首先对机器视觉检测系统的组成、原理及相关设备选型进行研究,结合实际注塑生产过程设计并实现了注塑制品视觉检测系统硬件平台的搭建;在VISUALC60编程环境下建立注塑制品视觉检测系统人机界面,为后续工作提供基础软件平台。21系统总体结构基于机器视觉的检测技术是一种有效的非接触检测技术,广泛应用于各种加工件的在线检测以及高精度、高速度的测量。典型视觉检测系统由CCD传感器、光学系统、计算机数据采集和处理系统、机械运动工作平台等部分组成19。本文所设计的机器视觉系统结构组成框图如图21所示。图21注塑制品机器视觉系统结构图视觉检测系统的硬件由光源、C
31、CD摄像机、图像采集卡、工业计算机,机械臂组成;软件为在VC平台下编写的图像获取程序及其他相关功能组件。整个视觉系统的工作过程如下首先由机械臂将注塑制品夹至两台摄像机的位置,拍取制品的正反两面的图像;然后通过1394采集卡将图像传送到工业PC机,通过图像处理软件的运算,得到制品的缺陷信息,并将这些信息发送到注塑生产控制上位机中;最后,控制系统根据所得到信息对控制参数进行调整,并控制分拣系统将缺陷制品与合格制品分拣到不同位置。22硬件系统的设计与实现视觉系统的硬件设计优劣直接关系到图像获取的效果,并且对图像处理方法的选择东北大学本科毕业设计(论文)第二章系统的设计与实现8以及检测效果产生直接的影
32、响。因此,系统的硬件设计与实现是视觉检测系统搭建的重要环节。221硬件系统设计获得注塑制品的过程,称之为注塑成型或者注射成型,或者简单的称之为注塑20。一个完整的注塑工艺流程主要由闭模、注射座前进、注射、保压、预塑计量、冷却、开模、取出制品等程序组成,如图22所示。注射注射座前进闭模保压预塑计量冷却开模取出制品图22注塑机生产过程为了在获得制品待检测信息的同时保证生产过程的连续、稳定,本设计使用视觉传感器与取出机构配合共同完成采集制品图像信息。本文根据机器视觉工作原理的基本结构设计(如图23所示),以及注塑制品的特点对设备进行选型并将硬件系统组装实现。光源生产过程控制PC被测物体图像采集卡工业
33、PC视觉传感器图23机器视觉检测系统结构图222系统关键设备选型机器视觉检测系统关键设备的选型与检测的要求息息相关,本文依据GBT1448693塑料件尺寸公差标准,在考虑最小可测的形状以及纹理特征基础上,查阅大量文献,进行了相关实验,确定了光源、数字摄相机、光学镜头、采集卡以及工业计算机等关键设备。1光源与照明方式在机器视觉应用系统中,合适的光源与照明方式往往是整个系统成败的关键21。光源与照明方式的配合应尽可能地突出物体的特征,在物体需要检测的部分与那些不重要部分之间产生明显区别,增加对比度;同时还应保证足够的整体亮度,使得物体位置的变化不影响成像的质量。LED光源具有形状自由、使用寿命长、
34、响应时间短、颜色自由、综合成本低等优点,且在外部条件外部光噪声,目标的倾斜,材质和系统类型不断变化的情况下均能持续的获得对比鲜明的图像。因此,选用LED光源作为视觉检测系统的光源。在此基础上,结合实验室注塑制品特点,选用线条照明方式单向照明,如图24所示,实现对东北大学本科毕业设计(论文)第二章系统的设计与实现9制品照明,该照明方式可以通过对照射角度的调节,实现对制品边缘以及纹理特征的突出显式,为实现对制品缺陷的检测提供可靠的保证。图24CCS公司LDL/LDQ系列LED灯2数字摄相机由于CCD相机具有体积小巧、性能可靠、清晰度高等优点,本设计选用了BASLER公司的CCD数字摄像机。相对于其
35、他视觉系统而言,注塑制品体积较大、精度较高,因此,本设计选用了200万像素CCD黑白摄像机;其型号为BASLERA641F,分辨率为12361624,传感器类型为逐行扫描CCD,机械光学接口为C型,外部接口为IEEE1394;3光学镜头考虑到本实验系统测量距离固定、视场较大,且镜头必须与摄像机配合使用等因素,本设计选用了COMPUTARM1214MP百万像素固定焦距镜头,其焦距为12MM,分辨率在中心和边缘处超过100线对/MM,视场角H404、V308。另外,实验过程中发现,光的反射作用对图像的影响同样不可忽视,而偏振片能够使光的透振方向与景物周围反射光的偏振方向垂直,可以消除光反射产生的影
36、响,使得影像清晰,突出被检测特征部分的信息。因此,本设计选用与镜头配套的偏振片,来减弱光反射对于图像所造成的影响。4图像采集卡本设计针对BASLAR公司的A641F面扫描摄相机,选取了双路IEEE1394接口的图像采集卡,其具有高速、稳定、大缓存等特点,保持视觉传感器与PC机之间的通讯与数据传输;5工业计算机本设计选用惠普公司生产的PAVILION畅游人V1369CN计算机。该计算机采用强大的支持超线程技术的INTEL64位P293G处理器,全面支持64位应用程序;512MDDR2内存,进一步提升系统性能;全新NVIDIAGEFORCE7300LE显卡,增强的视觉体验;80G东北大学本科毕业设
37、计(论文)第二章系统的设计与实现107200R/M的高速大容量硬盘提供快捷方便的信息存储。223硬件系统的实现硬件系统实现最重要的部分就是摄像头与光源位置的选择。摄像头的安装位置主要根据机械臂的工作流程来选取(如图25)。本系统选用了机械臂上行与释放两个阶段的位置,对注塑制品进行图像采集。在上述两处位置进行图像采集不仅最大限度的获取了制品正面与背面的信息,而且易于摄像机的安装,便于系统设计。摄像机1与摄像机2及其光源的布置如图26、27所示。下行前进夹持引拔后退上行取样侧出释放复位开始图25机械臂工作流程图摄像头所在位置能够得到图像正反两面的信息,而且没有改变原本的注塑机生产过程,同时保证了图
38、像质量。图26摄像机1位置与光源东北大学本科毕业设计(论文)第二章系统的设计与实现11图27摄像机2位置与光源接下来将双回路IEEE1394图像采集卡插入计算机内,通过两条1394传输线,与相机连接,并安装相机驱动。然后进行光学调焦,得到清晰,且能突出图像主要特征的图像。通过上述各个环节的选型与设计,完成了注塑制品机器视觉检测系统硬件平台的搭建工作。系统如图28所示。图28注塑制品机器视觉检测系统硬件平台本系统主要有以下优点1该设计没有破坏生产的连续性,保证在正常的连续生产过程中也能得稳定的图像;2能够得到注塑制品正反面的图像信息;3通过高分辨率的数字摄像机,能够得到更精确的注塑制品的特征;4
39、系统各个组成部分采用模块化设计,易于改造与维护。东北大学本科毕业设计(论文)第二章系统的设计与实现1223软件系统的设计与实现本系统软件采用采用C语言,在VISUALC60下开发调试。与JAVA和C等现代编程语言相比,C在程序运行的效率、内存使用的可控性和编程的灵活性上具有优势。并且VISUALC平台能够提供良好的人机界面,便于用户的操作和使用。软件设计采用模块式设计思路,各功能模块都以主程序界面为初始启动界面,并通过主程序界面相联系。本系统软件具有良好的可靠性、易维护性、易扩充性及易装卸性。231软件系统基本框架本系统采用模块化的设计思想,化整为零,将各个功能用相应的模块来设计。在设计过程中
40、,遵循由上至下的设计方法,首先根据系统的总体需求,将系统划分为各个功能模块图像采集与显示模块、系统通信模块以及辅助功能模块三部分。这样不但增加了程序的可读性,也增加了程序的可维护性,使流程图更加清晰明了,同时避免了大量的重复编程工作。如图29与图210分别为软件的总体结构流程图和系统的程序界面。开始图像采集模块图像显示模块效果调节图片保存通讯模块图29机器视觉系统软件整体结构东北大学本科毕业设计(论文)第二章系统的设计与实现13图210机器视觉系统软件界面232图像的采集与显示模块图像的采集与显示是视觉软件系统最基本的功能,通过查阅和分析大量相关资料,本文编写了实用高效的程序,实现了图像的采集
41、与显示功能。2321图像采集模块图像采集模块编程是与硬件设备直接相关一个环节,也是计算机直接控制数字摄像机的过程。在这个过程中,计算机将不仅控制摄像机的起动和停止,还可以将摄像机实时传来的图像信息,以二维数组的形式存入计算机内存中,以备使用。考虑到实际操作的方便,本文建立了两个消息响应函数,一个是开始采集响应函数启动摄像机,进行图像数据的实时采集函数;一个是停止采集响应函数,主要来释放采集进程调用的一些内存资源,关闭摄像机。由于两部摄像使用大致相同,以下以摄像机1为例设计其响应函数。1采集开始消息响应函数程序在用户给出图像采集命令后,系统对摄像机进行一系列初始化工作,并把在图像缓冲区中的数据保
42、存在系统内存中。其程序流程图如图211所示。东北大学本科毕业设计(论文)第二章系统的设计与实现14开始摄像机与计算机连接结束采集给出提示对话框得到摄像机的设备名启动摄像机设置输出图像格式创造存放位图内存输出开始采集指令将采集图像信息放指定内存结束YN图211采集开始程序流程图2采集停止响应函数程序流程图在用户发出结束采集的命令后,程序并不会立即结束,而是需要进行相关的内存释放工作,保证内存的正确调用,使系统能够稳定运行。其工作流程图如图212所示。开始释放线程停止I/O请求释放在BCAM中建立的资源释放缓存结束图212采集结束程序流程图2322图像的显示模块经过上面的图像采集工作,仅是把摄像实
43、时采集到的图像信息作为一个二维数组放到指定内存中。即使运行程序,在程序的窗口中也无法显示图像。因此需要设计图像的显示模块,将内存中二维数组转化为图像格式,在计算机的屏幕上显示出来。1数位转换首先需要进行数位转换运算。因为本系统使用BASLER数字摄像机得到是16位的二维灰度图像。普通计算机只能显示8位图像数据,如果仍然采用16位灰度图像数据,不仅给编程造成不必要的麻烦,而且极大影响程了程序运行速度。所以这里要将16位数据转换成8位。这时要建立一段新的内存区域,用来存放转换后的图像信息。16位数东北大学本科毕业设计(论文)第二章系统的设计与实现15据中有12位颜色信息,4位其它信息,其方法是对其
44、右移位4位,然后仅保留低8位,去掉高4位,就能得到8位图像信息。2图像的显示用来作为图像处理的位图,都是DIB位图。实际上它就是存入内在中的去掉了14个字节位图文件头的BMP文件。它由两部分组成,即位图信息和像素数据。这两部分可以存放在一起,也可以分开存放。这种位图有着以下优点1采用单一位平面,结构比较简单;2坐标原点在左下角,图像从最低一层开始存放;3位图信息头中包括了图像的分辨率与颜色的倍数;4像素数据可以采用行程编码。像素数据已经由摄像机输入机算机内存。位图信息则可根据实际情况编写。而位图信息又由信息头和调色板数据组成。位图信息头如表24所示。调色板可以用256色调色板,只在设置RGB时
45、,令三个颜色分量相同,这样就实现了灰色图像的显示。利用STRETCHDIBITS在指定的位置以指定的大小来显示1394采集传来的图像信息,其流程图如213。使用开始采集的子程序来启动摄像机,将图像数据放放指定内存,用以位图形式显示出来。开始接收到WM_GRAB_FINISHED消息取得拆分窗口1的DC用STRETCHDIBITS函数显示图像设定图像显示方式为自动拉伸模式16位灰度转变成8位灰度结束内存中用来存放图像空间为空图213图像显示流程图233系统通讯模块前一小节完成了图像的实时采集与显示功能,但是仅仅这样,成像系统相对注塑机东北大学本科毕业设计(论文)第二章系统的设计与实现16来说还是
46、独立的。对摄像机来说,虽然它能够通过一些信息的检测完成拍照时间的判定,但是,由于机器视觉系统一直处于检测状态,这样就大大占用了系统资源,影响的整个系统的工作效率。这就需要注塑机控制系统给出确定的信号,来控制摄像机进行拍摄。而且通过视觉系统的检测,确定制品的质量状况,反馈给控制系统相关信息,实现产品的分拣以及控制系统的参数改善都需要我们建立二者之间通讯,保证成像系统注塑机协同工作。通讯功能的实现主要是通过WINDOWSSOCKET(简称WINSOCK)来实现的。它是WINDOWS环境下TCP/IP协议的网络编程接口。SOCKET也叫套接字,套接字是一个通信终结点,它是WINDOWSSOCKETS
47、应用程序用来在网络上发送或接收数据包的对象。套接字具有类型,与正在运行的进程相关联,并且可以有名称。MFC为使用WINDOWSSOCKETS编写网络通信程序提供了两种模型,内嵌在两个MFC类中即CASYNCSOCKET和CSOCKET。一个标准的有连接的通信程序中函数调用关系,本系统以成像系统的计算机作为服务器,控制注塑机工业的PC机作为客户端。在注塑机的机械手在经过注塑制品出口时,即摄像机镜头中心近似水平的位置延迟2秒,客户端立即向服务器发信号,告诉服务器摄像机1所采集到的图像就是注塑制品正面的图像。服务器保存该图像信息后就向客户端发信号,告诉它延迟2秒可以提前结束,继续运行。当机械手将注塑
48、制品放到传送带上之后,客户端要发信号告诉服务器,摄像机2现在所采集到图像信息是注塑制品反面的图像信息,服务器对相关的相关图像信息保存,处理后,将检测结果发送给注塑机控制系统并对传送带进行相关控制操作。如果制品合格,传送带正转。如果出现质量缺陷,传送带反转,从而实现制品的分拣。其流程图如214所示。东北大学本科毕业设计(论文)第二章系统的设计与实现17开始连接WINSOCK库绑定套接字创建一个流式套接字分配端口等信息向客户端发送信息,使机器手继续运行接收客户端请求BREAK设置监听状态M_DISCONNECT是否为真接受消息以JPEG形式保存图像以JPEG形式保存图像如果接收数据为1向客户端发送
49、信息,使传送带运行关闭监听状态结束套接字连接TURE断开WINSOCK库连接结束NYYN图214通讯流程图234辅助功能模块在实现了图像显示和系统通讯等基本功能之后,本文又编写了辅助功能模块。添加的辅助功能使软件系统能够更加方便快捷的得到用户满意的图像。2341图像效果调节可以由用户输入亮度,增益,快门等设定值来调节得到的图像效果。亮度是指画面的明亮程度,单位是堪德拉每平米CD/M2或称NITS。人眼之所以能看到物体的明暗,是因为物体所反射色光的光量(热量)有差异之缘故。光量越多,明度越高,反之明度越低。快门的设定将会影响摄像头的曝光量。得到图像的效果如何与曝光量有很大关系,也就是说应该通不同的光线量使CCD能够得到的图像清晰度是有很大不同的。而且曝光控制还可以用来调节景物整体亮度,如果摄像对象过于黯淡,可以调节快门标尺来增加亮度。以上的调节功能使用户能够根据实际工作的环境来调节得到图像的显示效果,方便东北大学本科毕业设计(论文)第二章系统的设计与实现18快捷的得到用户需要的图像。2342图像保存功能除了可以通过系统间的通讯来保存图像,该系统还提供了两种其他保存图像的方式。1系统自动判定保存该方法是在视觉系统与控制系统无法联网的情况下设计的备用方案。该方法的原理是每相