呆板视觉手艺与呆板视觉检测编制的使用案例

  • A+
所属分类:机器视觉
利用视觉技术检测热轧钢材的表面,即便钢材的温度超过1000℃,也好像它们是冷的一样。 为了生产无缝钢管,需要先将钢坯输送到炉中加热。接着,将坯料穿孔以形成厚壁的中空壳体
呆板视觉手艺与呆板视觉检测编制的使用案例

呆板视觉手艺与呆板视觉检测编制的使用案例

  利用视觉技术检测热轧钢材的表面,即便钢材的温度超过1000℃,也好像它们是冷的一样。

  为了生产无缝钢管,需要先将钢坯输送到炉中加热。接着,将坯料穿孔以形成厚壁的中空壳体,之后将芯棒插入壳体中。然后在芯棒式无缝管轧机中进行伸长轧制。在伸长工艺之后,坯料输送到推进台,在那里它被推动穿过一系列轧辊机座。最终形成具有连续更小壁厚的中空长钢管。

  尽管与热轧工艺一样有效,在轧机台架中的轧辊机座偶尔可以在钢表面上产生标记和缺陷,这些缺陷在热条件下非常难以检测。因此,在质量改进项目中,许多制造商希望尽可能早地识别这些缺陷,以避免以相当大的代价生产出大量有缺陷的材料。

  为了解决这些问题,西班牙Tecnalia公司的工程师开发出了一套称为Surfin的机器视觉系统,其能使钢铁制造商在钢板从推进台推出时,就检测到这类缺陷(见图1)。检测这种缺陷为制造商提供了生产过程中任何问题的指示,使制造商能在早期阶段对推进台进行预防性维护,防止将任何有缺陷的钢管交付给客户。

呆板视觉手艺与呆板视觉检测编制的使用案例

  图1:西班牙Tecnalia公司的工程师开发出了一套称为Surfin的机器视觉系统,其能使超过1000℃的钢板从推进台推出时,就可检测到钢材上的缺陷。

  由轧辊机座产生的这种钢管表面上的典型缺陷,通常遵循重复模式持续出现,直到轧机支架改变。这些缺陷包括表面上的裂缝、轧机支架阻挡标记、裂纹以及分离的钢材,其随后会粘贴到钢管表面的另一部分上。

  开发人员面临严峻的挑战。这种生产环境中的条件可谓极端恶劣:不仅以6~7m/s的相对高速生产钢管(Surfin可以工作在高达10m/s下),而且钢材从轧辊机座推出时的温度约为1000℃,再加上环境脏、存在水和油蒸汽,从而使缺陷检测更为棘手。

  由于钢材的热表面辐射的光与IR、红光、橙光和黄光波段的热发射直接相关,因此捕获钢材表面反射的所有光的图像,将使相机中的传感器饱和,因为相机对钢管辐射的所有光都敏感。为了解决这一问题,Surfin系统(专利号ES2378602和EP2341330)使用的光,其波长远离炽热钢材所发射光谱的波长。

  然后,系统中相机捕获的图像,通过美国Edmund Optics公司的窄带光学带通滤光片(中心波长为470nm、带宽为10nm)和一个红外(IR)辐射滤光片。这两个滤光片使CCD相机只接收所需波段中的辐射,而加入IR滤光片来保护电子系统免受热辐射。受控照明技术允许系统捕获钢管整个表面的图像,就好像钢管是冷的一样。

  为了使系统能捕获钢管表面的360°图像,该系统使用了加拿大Teledyne DALSA公司的三套14000 lines/s的Spyder 3线°的角度间隔垂直于轧制钢管轴平面、安装在保护性罩壳中,围绕在推进台的输出端。在该系统的前一个版本中,在每台相机的两侧使用加拿大Laserglow Technologies公司的两个200mW 473nm蓝光激光光源,对钢管表面进行暗场照明。由于系统的几何形状,其可以实时地连续捕获钢管的完整图像(见图2a和b)。

呆板视觉手艺与呆板视觉检测编制的使用案例

  图2:a):为了使系统能够精确地捕获钢管表面(3)的360°图像,系统使用三组激光器(1)和14000 lines/s线)。B):激光器和相机组以120°角度间隔安装在垂直于滚动轴平面的同一平面内,相机位于推进台输出端周围的保护罩壳中。

  由于环境的温度很高,保持相机连续冷却至关重要。为此,将压缩冷却空气注入到保护罩壳中,保护相机和激光设备免受热和恶劣环境的影响。空气不仅冷却系统,而且之后过量的空气通过窗口排出,激光器通过该窗口输出光束,相机通过该窗口捕获图像,防止鳞状物、氧化物、灰尘和液体沉积。

  一旦捕获了钢材表面的图像,接下来便通过光纤千兆以太网链路将图像传送100m到达控制室中基于PC的服务器上。在这里,首先对图像进行预处理,以利用诸如直方图均衡等定制图像增强算法,来增强图像的对比度。由于原始图像中的可用数据由近对比度值表示,所以该技术增加了图像的全局对比度。

  图像增强之后,使用定制软件处理,在系统的先前版本中,该软件采用基于支持向量机(SVM)的辅助学习系统。一旦系统被教育通过纹理、对比度和尺寸,识别来自不同样品的缺陷,则算法可以自动检测和分类生产环境中最重要的生产缺陷(见图3)。

呆板视觉手艺与呆板视觉检测编制的使用案例

  图3:钢材中出现的典型缺陷包括(a)材料粘贴(b)材料被去除和(c)辊痕。

  基于PC的服务器用于存储来自相机的图像、被发现的缺陷数据,以及缺陷在钢管上位置,还将在Oracle数据库中存储压力、温度、速度信号、通信和其他钢管生产数据的报警,用于质量控制和可追溯性。还可以通过在连接到公司局域网(LAN)的计算机上安装客户端应用,对服务器上的数据进行远程检查。

  自从该系统最初开发以来,已经经历了几次增强,系统的结构现在已经过重新设计,能够更容易地对准和调整相机和调节照明。

  较新版本的系统还采用了液体而非空气制冷技术,使照明和传感器能够更靠近钢管放置,从而实现更热或更大面积的钢管成像。美国Metaphase Technologies公司的LED光源也已经替代了早期的激光器,使光源的寿命从2000小时增加到了50000小时,并且消除了诸如散斑之类可能破坏相机捕获的图像的因素。

  软件用户界面也得到了改进,现在工厂操作员能在钢材上出现缺陷时,看到它们的位置和特定属性(见图4)。现在还可以在数据库上存储几个月的生产数据,这样工厂经理就能查看可能发生的任何错误的周期性,并安排定期预防性维护操作。该系统还可以支持多用户,这些用户不仅可以本地访问系统,还可以通过互联网访问系统。

呆板视觉手艺与呆板视觉检测编制的使用案例

  图4:定制的软件用户界面,使工厂操作员能够实时看到钢材上缺陷的位置和特定属性。

  Surfin系统最重要的一项最新发展,是用内部开发的候选窗口探测平台和用于缺陷分类的卷积神经网络(CNN),来替代之前基于SVM的分类器。CNN可以学习从训练图像中提取表征每种类型缺陷的相关特征并执行分类,而SVM仅将其输入映射到可以揭示缺陷类别之间差异的一些高维空间。

  通过假定所有感兴趣的对象(例如缺陷)共享将它们与背景区分开的共同视觉属性,候选窗口探测平台输出可能包含缺陷的一组区域。随后,CNN提取学习特征,并且对图像数据执行实际的缺陷分类。

  CNN分类器通过具有缺陷的热钢管图像的定制图像数据库进行验证,并且发现基于深度学习的方法,能够减少检测到的假阳性和假阴性的数量,其明显优于之前的SVM分类器。

  执行两类分类(如缺陷与无缺陷)时,最相关的性能指标是AUC,或ROC(接收器工作特征)曲线下的面积,通过在x轴上绘制假阳性率和在y轴上绘制真阳性率,然后计算此函数下的面积(见图5)。

呆板视觉手艺与呆板视觉检测编制的使用案例

  图5:在执行两类分类(如有缺陷与无缺陷)时,最相关的性能指标是AUC或ROC(接收器工作特征)曲线下的面积。模型越好,AUC越接近1。采用这种方式,当比较几种模型时,可以通过选择最高的AUC来选出最佳模型。虽然SVM分类器的AUC值为0.88,但是对于两类分类情况,CNN-Surfin分类器的AUC值为0.997。

  理想情况下,该函数的值对于x轴上的每个值都为1.00,因此模型越好,其AUC越接近1。以这种方式,当比较几种模型时,可以通过取最高AUC值来选择最佳模型。虽然SVM分类器的AUC值为0.88,但是对于两类分类情况,CNN-Surfin分类器的AUC值为0.997。

  此外,对于给定的模型,可以选择阈值以使系统能够决定样品是否有缺陷。由于模型的输出通常是0和1之间的概率值,如果概率值大于阈值,则样本将被标记为NOK,否则标记为OK。

  通过将阈值移向1.0,能以“增加假阴性的数量”为代价来减少假阳性的数量,反之亦然。然后可以通过在x轴上绘制阈值,以及在y轴上绘制特异性或线-假阳性率)和灵敏度或线-假阴性率),来可视化检查系统工作在何处。

  对应于阈值的垂直线切割两条曲线的点,产生假阳性率和假阴性率。阈值的常见选择是产生近似相等的假阳性率和假阴性率。对于CNN-Surfin,得到1.58%的假阳性率和1.49%的假阴性率(见图6)。与之相比,SVM版本的Surfin的假阳性率为17.98%,假阴性率为18.00%,由Surfin做出的分类错误数量减少了12倍。

呆板视觉手艺与呆板视觉检测编制的使用案例

  图6:对应于阈值的垂直线切割两条曲线的点,产生假阳性率和假阴性率。阈值的常见选择是产生近似相等的假阳性和假阴性率。对于CNN-Surfin,假阳性率为1.58%,假阴性率为1.49%。

  现在,新的分类器准备在生产环境中运行。此外,Tecnalia公司的工程师们正在努力继续改进系统,目的是使钢铁生产商能够生产零缺陷钢材。例如,已经使用CNN-Surfin评估了4类问题(OK以及3种类型的缺陷),通过AUC(平均延伸)进行归类,得到AUC = 0.9956。但目前正在收集更多的样本,以使结果更具统计学意义。

  Surfin系统自推出以来,已经交付到诸如西班牙Tubos Reunidos和Aceros Inoxidables Olarra等公司,其能够在热工艺生产的早期阶段检测到生产问题。Tecnalia公司正与其他钢铁生产公司合作部署该系统,以检测形状更复杂的钢材,例如用于建筑和土木工程的U型或H型截面钢梁。

  文章出处:【微信号:PLC-DCS,微信公众号:工控培训】欢迎添加关注!文章转载请注明出处。

  直播主题及亮点本次直播,讲者将结合自己过去16年中在机器视觉领域的研发经验,讲解智能视频分析技术的基本概念、基本方法、以

  随着我国“互联网+”战略的逐步落地,产业互联网将成为未来国家最重要的基础设施之一。云计算、大数据、人....

  最近有网友在后台给我留言问我机器视觉是什么?今天小编在这里就给大家解答机器视觉是什么的问题。

  在现代工业控制系统中,PLC以其高可靠性、适应工业过程现场、强大的联网功能等特点,被广泛应用。可实现....

  当今,物联网可谓是在各大媒体出镜率最高、而且与“智能”联系密切的名词之一。从“管理、控制、智能”的角....

  本作品主要用GD32F350R8做了一个光源控制器用于为机器视觉相机提供稳定的光源控制,增加了外部触....

  随着机器视觉技术的进步,在工业和医疗领域机器人换人浪潮中,越来越多的机器人开始上岗了。

  只需上传一张正面照,经过所谓的“古典周易+人工智能”的分析,就能算出你下半生的财运、事业运、情感运等....

  由于 LabVIEW 视觉模块所包含函数过多且未汉化,层次结构过于复杂,各函数功能和接线端定义难以记忆和区分...

  工业控制计算机是工业自动化设备和信息产业基础设备的核心。传统意义上,将用于工业生产过程的测量、控制和....

  OPC代表OLE(对象链接和嵌入)过程控制。OPC是最流行的数据连接标准,用于在控制器,设备,应用程....

  机器视觉优势:机器视觉系统具有高效率、高度自动化的特点,可以实现很高的分辨率精度与速度。机器视觉系统....

  由于机器视觉系统在现代自动化生产过程中的应用逐渐被认知,经济危机只是暂缓了机器视觉的推广应用进程,生产企业自动化程度的提...

  随着技术的发展,机器视觉技术在交通各领域都发挥着越来越重要,而且应用广泛。 ...

  机器视觉技术在食品、农产品的检测、分级中具有广阔的应用前景。为此,综述了机器视觉技术在稻米品种、胚芽....

  铸造行业是个劳动力密集的,主要以人力为主的行业。随各个的制造业都开始使用工业机器人作业,铸造行业也将....

  现在我们的工业机器人已经应用到了很多的领域,因为它具有的力量、速度以及精准度都已经可以替代人类做部分....

  随着机器学习和机器人等自动化技术在日常生活中发挥越来越重要的作用,它们对工作场所的潜在影响不出所料地....

  过程控制就是对温度、压力、速度等模拟量进行的闭环控制。PLC控制技术能够根据工业制造流程编写各种各样....

  如何提高RS485总线 总线具有结构简单、成本低廉、通信速率高、传输距离远等诸多优点,因而被广泛应用于工厂自动化、工业控制、安全监控...

  利用机器视觉系统代替人进行药片包装缺损检测,可以提高生产效率,降低生产成本。基于机器视觉技术的药片包....

  机器视觉就是用机器代替人眼来做测量和判断。机器视觉系统是指通过机器视觉产品(即图像摄取装置,分 CM....

  工业镜头相当于人眼的晶状体,如果没有晶状体,人眼看不到任何物体;如果没有镜头,那么摄像头所输出的图像....

  机器视觉长期以来用于工业自动化系统中,以通过取代传统上的人工检查来提高生产质量和产量。从拾取和放置、....

  如今,随着工业4.0的到来,机器视觉技术在工业自动化中逐渐起着十分重要的地位,机器视觉技术的不断创新....

  随着工业自动化升级,工业生产对精度、效率、可靠性等方面提出更高的要求。在这种大背景下,激光设备的性价....

  阿里云发起的 “数字人体”视觉挑战赛——宫颈癌风险智能诊断正式举行发布仪式

  宫颈癌是妇科最常见的恶性肿瘤,也是妇女的主要杀手之一,宫颈癌的防治非常重要。在医疗行业,医生通常采用....

  视觉 传感器 与放大镜不同,当然,也不同于显微镜。每一个放大入眼的细小,都有不同的器物去领略。人类的....

  图像采集:图像采集主要是通过摄像头采集图像,如果是模拟信号,要把模拟信号转换为数字信号,并把数字图像....

  光电传感器包含一个光传感元件,而视觉传感器具有从一整幅图像捕获光线的数以千计的。图像的清晰和细腻程度....

  目前,宇瞳光学是全球安防监控镜头出货量最大的生产供应商,是海康、大华、宇视、韩华等头部安防企业(下游....

  工业级无人机市场还处于摸索与投入期,但考虑到未来巨大市场潜力,国内各大无人机厂商相继进入这个领域。

  从1998年到今天,CompactPCI总线工控机在国内发展迅速,并得到了一定程度的应用,但远没有达....

  机器视觉就是用机器代替人眼来做测量和判断。机器视觉系统是指通过机器视觉产品将被摄取目标转换成图像信号,再传送给专用信息处...

  利用机器视觉技术与D-S证据理论,实现数字显示仪表的自动读数。首先,利用机器视觉中色彩空间选择,阈值....

  机器人视觉是一项综合技术,是实现工业自动化、工厂智能化的关键零部件之一。现在主要分布在电子制造业、汽....

  在一些特殊的领域,需要使用到的计算机有着特殊的要求,一般来说,这种计算机称之为工业计算机。由于工业计....

  控制类产品名目繁多,各家叫法不一。通常使用的控制类产品包括DCS、PLC两大类。我们又将DCS的概念拓展到FCS。 D...

  据业内人士介绍,在印刷行业中,机器视觉技术主要用于高精确检测、高精度尺寸测量、目标位置定位等。但目前....

  随着信息化和工业化的快速融合,物联网、云计算等技术已被广泛用于提升设备性能,令工厂生产变得更高效。

  变频器是应用变频技术与微电子技术,通过改变电机工作电源的频率和幅度的方式来控制交流电动机的电力传动元....

  网络系统是未来智能工厂的基础,但成败取决于数据收集、处理和分析能力,这就是机器视觉派上用场的时候了。

  文章称,机器人已经超越了科幻领域,现在正在多个行业中创造革命浪潮,尤其在复杂程度较高甚至危及生命的行....

  根据我国机器视觉行业CAGR为23.81%的增速水平,预测2019年我国机器视觉行业市场规模将达到1....

  工业平板电脑就是工业电脑上常说的触摸屏一体机,整机性能完善 ,具备市场常见的商用电脑的性能。

  有源信号和无源信号是相对于电流信号而言的。若传感器设备有独立的工作电源,那传感器传出的电流信号就是有....

  关键基础设备系统网络攻击干扰事件越来越频繁,对于许多工业控制系统来说,网络入侵不是是否会发生的问题,....

  在工业控制领域,威胁可以是情况、能力、行为或事件,而由威胁导致的后果,不仅仅是信息安全资产的破坏,更....

  图像处理软件作为机器视觉系统的重要组成部分,主要通过对图像的分析、处理和识别,实现对特定目标特征的检测。由于机器视觉系统...

  我们现在的工业生产可以简化的分为工业装备和控制系统。控制系统能够保证工业的自动化生产,但是自动化的生....

  工业平板电脑也叫工业计算机或工业一体机,其具有计算机属性和特征,如主板,CPU,内存,硬盘,显卡等。

  许多工业自动化应用需要能够承受恶劣环境条件的计算机。一些例子包括防尘计算机,宽温计算机和防水计算机的....

  在一些特殊的领域,需要使用到的计算机有着特殊的要求,一般来说,这种计算机称之为工业计算机。由于工业计....

  播种均匀性是影响播种机播种性能和播种质量的重要指标。提出了一种集机器视觉、模式识别和自动控制于一体的....

  随着图像捕获系统的分辨率增加,机器视觉的可能性也增加,因为可用于评估的细节以相应的速率增加。

  机器视觉技术的不断创新,推动了工业自动化、智慧安防以及人工智能等行业的进步,也为各个行业领域的应用带....

  典型的机器视觉系统主要由光源、镜头、工业相机、图像采集卡或图像处理器,以及控制输出单元等硬件构成。其中,工业相机是机器视...

  视觉技术是近几十年来发展的一门新兴技术。机器视觉可以代替人类的视觉从事检验、目标跟踪、机器人导向等方面的工作,特别是在那...