新利彩票

NEWS CENTER

新闻中心

您现在的位置:首页 >>新闻资讯 >>企业动态:企业动态

【分享】电子科技大学教授周涛:我们怎么做工业生产中的缺陷检测?

自动化的检测,实际上是蛮简单的事,基本在工业生产中,在生产的不同环节,在最后环节,也有可能在中间环节,我们会发现生产的元器件出现问题,大部分这些检测都是基于光学进行检测。但是都是通过人用肉眼来看。但是现在我们尽可能想用自动化的办法来检测。目前,自动化的检测方法,可以取代80%甚至更多的人的检测。

以前检测的方法就是100%人工看的,不管是在最终还是在过程中,现在我们是希望用模型,用机器学习进行判断,其中有一部分机器学习判断不了,我们人工来判断。

缺陷检测中存在几个问题。首先我们要对缺陷的类型进行分类。一般来说一个元器件,它出现缺陷不是一类,它可能有几百种缺陷,我们不仅说它好不好,还要说它属于哪种缺陷?我们还要判断这个缺陷位置在哪?多大多小?同时还要对我的样本进行管理。与此同时,还要能够进行自动化的监测预警等等,这些都是目前我们需要做的。

这是一些比较典型的案例,这些缺陷以前是需要人肉眼来看,这个是重庆的一个半导体,大家可以看到,下面这个图的缺陷,也许你们坐的比较近的还能看到这个缺陷,但是上面这个缺陷,我相信肉眼不可能看到。有些缺陷我们知道它的原理,比如说成都的这个厂,我们知道这个缺陷是缺角,或者有颗粒。

一般,大家看到这个问题,一般而言就会想,这就是一个深度学习的图像分类问题,但实际上不是这么简单,不是用简单的一些数据包就能解决的问题。因为它面临着很多比较难的、核心的待解决的一些算法问题。

第一个问题,不同类型的缺陷样本,它的数量高度不平衡,比如说左边这些图,我们大概是在500万的片子里面,这个缺陷比较多,它总的不良率20%左右。最多的缺陷有8万个样本,但是有不到一万,甚至还有的就是几百,这就是不同类型的缺陷,它样本可能不一样。那这种小类型,很小的缺陷就很难被判断出来。

第二个问题,同一类别的缺陷,这样的样本数量不均衡,因为绝大部分还是好的,所以大家看到我们右边蓝色的部分,有缺陷的样本不超过总数的1%,75%的缺陷里面有缺陷的样本,都不会总量的1%。所以绝大部分情况下,我们的正负样本是高度不均衡的。

第三个问题,缺陷尺寸变化大。我们看到最小的检测缺陷大概是5×5,就是25个像素,最大的我们检测到的缺陷,它可以覆盖到一千多个,中间差4万多倍,所以它的缺陷可能是百万像素量级的,也有可能是十几万像素量级的。

第四个问题,无法通过简单的图像特征区分缺陷类别。比如说右边那个图很大看不清楚,都是一个黑点,它的局部特征是一样的,但是我们要看纹理。这是和大家比较熟悉的,卷积神经网络正常相比是有些难度的。

这些问题当然是可以解决的,我简单说一下解决这些问题的核心方法。因为你们不完全是做管理性工作。第一个问题是,我们怎么去解决这个缺陷样本分布不均呢?首先,我们不再用同等规模大小的框,第二,我的框不再是一个方框,我可能是一个复杂的多边形结构。第三,我不是简单的从右上角到三上角平滑的过度。

我们这个模型不断的微调,我必须要知道某一条生产线,比如说这个生产线,这个加工工艺是刻时,它可能出现缺陷的类型就十几种,这个你要对每个阶段加工什么东西,用什么工具,在哪条生产线上判断?这个需要大量数据的验证。

在有了这些之后,我们就能把后面第二阶段的学习,拆成按生产工艺和加工类型来做。从在局部来看,它的缺陷样本和不均匀性就会下降,并且使得后面学习速度很快,学习到一定程度再返回过去,改变原来的大格局。

第二类比较简单的,就是正负样本分配不均,大家看我把它画成网格,这个时候我们怎么做呢?大家回忆一下我们本科的时候,或者研究生一年级的时候,有一个叫代价曲线,我把一个东西从0分到1和1分到0它的代价是不一样的。比如说一个健康人,我们把健康人判断成病人,这个代价是小的,因为他做过一次检查,但是我把一个病人看作是健康的,这个代价比较大。

但是,我们现在用同样的思路,但不用这个方法。原来我们看蓝色那条线,一般我们做损失函数,它尾部绝大多数增量占比比较大,所以应该是占比99%以上,所以说它尾部这部分下面的面积,实际上很大。因为这个原因,所以我们要改变损失函数,要尽量把尾部压平,压到外部这条线上,使尾部的缺陷缩小。

第三类就是我们刚才讲的,怎么样解决有4、5万倍尺度差异的缺陷,有的是十几万像素,有的是百万像素。我们可以做一个类似金字塔的一个结构,但是计算量特别大。在你做卷积的时候,多加一些附加的计算,把不同尺度的特征再算出来。所以我们在做缺陷发现的时候,就不再做图像的缺陷发现,而是做特征的缺陷发现,这样我们可以很快解决这个问题。这个问题稍微比较复杂,前面比较简单,我们把Attention block,使网络结构能够从全局信息中选择性地扩大有价值的特征channe并抑制无用的特征channe。

所以大体上用这个方法,我们在一些地方做实验,整体提高了很多,比如刚才讲的这些例子,我们做一些大型的面板生产厂商,80%都需要人工的,全都用手检,准确度也提高了。

源自:互联网

浏览量:49 时间:2019-03-11
网站备案: 陕ICP备14005293-1号

幸运快乐8plothaven.com版权所有 2016 西安获德图像技术有限公司 AllRight Reserved.

友情链接:幸运快乐8  幸运快乐8官网  幸运快乐8  幸运快乐8开奖  幸运快乐8  幸运快乐8  幸运快乐8  

免责声明: 本站资料及图片来源互联网文章,本网不承担任何由内容信息所引起的争议和法律责任。所有作品版权归原创作者所有,与本站立场无关,如用户分享不慎侵犯了您的权益,请联系我们告知,我们将做删除处理!