随着电子技术、图像传感技术和计算机技术的加快速度进行发展,利用基于图像传感技术的视觉在线检测的新方法已慢慢的变成为外观缺陷检验测试的重要手段,因为这种方法具有自动化、非接触、速度快、准确度高等优点。
《产品外观缺陷机器视觉在线检测技术及设备开发》一文由合肥工业大学仪器科学与光电工程学院卢荣胜教授投稿分享,包括自序、研究背景、典型系统组成、成像技术及实现策略、关键核心单元部件、缺陷识别与分类、结束语、致谢几个部分。由于篇幅较长分为四篇发布,以下为第一部分:自序、研究背景、典型系统组成。
本人1985年大学毕业后在量仪厂从事量具、刃具、工装、专机与机加工工艺开发等技术工作,于1992年从师费业泰教授攻读硕士与博士学位,从事精密机械热变形误差、精密仪器精度理论方面研究, 1998年末博士毕业后又拜师天津大学叶声华教授,从事机器视觉在线检验测试方面的博士后研究,研究方向随之聚焦于机器视觉与光学精密测量领域。之后在香港城市大学、英国帝国理工学院和哈德斯菲尔德大学进行了为期6年的三维机器视觉、自动光学检测和光学测量研发技术工作,于2006年5月返回母校合肥工业大学任教。回国后继续从事机器视觉与光学测量方面的研究,坚持面向平板显示、新能源、软性电路板、半导体等先进制造产业,注重技术的应用开发。先后主持了国家自然科学基金项目3项、863专项1项、国家科技支撑项目1项、国家重大科学仪器设施开发专项1项、国家重点研发课题1项、以及其它省部级项目和产学研合作项目10余项,在机器视觉与光学测量领域已培养硕士和博士研究生100余人。
鉴于在机器视觉技术探讨研究及应用开发方面20余年的研究积累,2021年无锡市锡山区政府与我们科研团队合作,联合创立了一个新型科学技术研发机构——无锡维度机器视觉产业技术探讨研究院,采用实体化运营模式,面向先进制造产业链,从事机器视觉与光学精密测量方面产业共性关键技术研究与产业化开发。研究内容与产业化经营事物的规模涉及机器视觉缺陷在线检测、三维机器视觉精密测量、机器人视觉引导、半导体检测、机器视觉关键零部件开发等。开发的视觉系统与仪器已经在平板显示、光伏、锂电池、软性电路板、半导体等行业得到成功应用。
在产品制作的完整过程中,由于生产环境不理想、制造工艺不规范等种种原因,零部件和产品外观难免会含有多种缺陷,如印制电路板上出现孔位、划伤、断路、短路和污染,液晶面板的基板玻璃和滤光片表面含有针孔、划痕、颗粒,带钢表面产生裂纹、辊印、孔洞和麻点,铁路钢轨出现凹坑、鼓包、划痕、擦伤、色斑和锈蚀,等等。这些缺陷不仅影响产品外观,更重要的是影响产品性能,严重时甚至危害生命安全,对用户造成巨大经济损失,因此,现代制造业对产品的表面上的质量控制非常重视。
产品外观缺陷在线检测最传统的方法就是采用人工目视检测法,目前高端制造工厂大部分都采用自动化生产,但人工目视检测岗位仍占据工厂整体人员的15%-30%。鉴于人工目视检测存在对人眼伤害大、主观性强、准确率低、不确定性大、易产生歧义和效率低下等缺点,已很难满足现代工业对产品质量及外观慢慢的升高的严格要求。随着电子技术、图像传感技术和计算机技术的加快速度进行发展,利用基于图像传感技术的视觉在线检测的新方法已慢慢的变成为外观缺陷检验测试的重要手段,因为这种方法具有自动化、非接触、速度快、准确度高等优点。目前,外观缺陷视觉在线检测技术已大范围的应用于工业、农业、生物医疗等行业,尤其在现代制造业,如平板显示、光伏、锂电池、半导体、汽车、3C电子(计算机、通讯和消费电子科技类产品)等领域,对可以在一定程度上完成机器换人的外观缺陷视觉检测技术需求越来越旺盛。
产品外观缺陷机器视觉检测是基于人眼视觉成像与人脑智能判断的原理,采用图像传感技术获取被测对象的信息,通过数字图像处理增强缺陷目标特征,再通过Blob(Binary large object)分析、模板匹配或深度学习等算法从背景图像中提取缺陷特征信息,并进行分类与表征。在工业应用领域,外观缺陷视觉检测系统其实就是一种智能化的数字成像与处理系统,即采用各种成像技术(如光学成像)模拟人眼的视觉成像功能,用计算机处理系统代替人脑执行实时图像处理、特征识别与分类等任务,最后把结果反馈给执行机构,代替人手做相关操作,执行产品的分类、分组或分选、生产的全部过程中的质量控制等任务。
液晶面板显示器制程中关键工艺节点,开发的三种缺陷视觉在线检测系统。该系统能很好地揭示一个视觉在线检测系统的各个组成部分、关键技术难点,以及所需的关键零部件。主要技术参数为:待测幅面大小≤1800x2200mm, 快速发现缺陷分辨率10μm, 复检显微分辨率0.5μm, 并行图像处理与缺陷识别系统采用CPU+FPA+GPU 主从分布式异构并行处理架构,检测时间节拍20s。
系统组成与关键零部件单元可用图2示意图来清晰地描述,它由精密传输机构、光源、相机阵列、显微复检、并行处理、控制、主控计算机、服务器等单元模块,以及与工厂数据中心互联的工业局域网组成。图 3 展示了我们开发的手机液晶显示屏背光源模组缺陷转盘式多工位视觉在线检测系统的结构组成,该检测系统包括自动上料、编码、对准、检测、分选、返修识别等几个部分。
2. 监视相机发出工作同步指令后,气动与电动缸组成的送料系统把工位(1)处的背光源模组从传输带上吸起来,然后在气动滑台的带动下,把工位(1)处的背光源模组搬运到工位(2)处。在放到工位(2)上之前,计算机根据工位(1)上方的相机拍摄到的模组位置与姿态,发出指令给真空抓取吸盘角度校正电缸,初步校正背光源模组在空间的角度。当背光源模组运送到工位(2)后,模组在工位(2)处由4个气动滑缸从四边向中间对中,校正模组的位置,然后背光源模组下方的相机,对模组成像,识别待检背光源模组喷码序列号,作为有缺陷模组在返修过程中,从缺陷数据库中自动调出缺陷信息,指导返修任务。
1. 背光源模组被自动送料机构传输到工位(3)后,转盘在控制管理系统的控制下,转到工位(4)。在工位(4)的上方安装一个相机,检测背光源模组定位是不是正常,模组LED灯工作是不是正常,并把信息传给主控计算机。如果一切正常,则后续检测工位按预定的方案进行仔细的检测;如果不正常,后续检测对该模组不检测,然后传送到工位(9),由分选机构抓取,传送到不良品传输带上。
对于检测到的不良品,再采用人工目视复检,并对不良品进行返修。在返修工作台上放置一个电脑,并安装一台成像系统,拾取不良品背面的编码。返修显示电脑通过工业以太网与缺陷数据库服务器相连,相机在电脑的控制下,获得带返修的不良品编码后,根据编码从服务器中调用缺陷信息,显示在屏幕上,导引返修人员对不良品做到合理的返修。
应用案例 HT8840便携式高精度温室气体分析仪应用于水域系统CH4排放量观测项目
1428万!南昌大学绿色食品江西省实验室透射电子显微镜、冷场发射电子显微镜等采购项目
1583万!南昌大学绿色食品江西省实验室超高效液相色谱-三重四极杆线性离子阱复合质谱仪、体积排除色谱-多角激光散射仪等采购项目
1327万!南昌大学绿色食品江西省实验室气相色谱-四极杆-飞行时间质谱仪等进口设备采购项目
1200万!南昌大学绿色食品江西省实验室600MHz核磁共振波谱仪采购项目
基因和细胞治疗解决方案详解:加速的实验室——丹纳赫 以科技加速新疗法开发