简介基于机器视觉的旋转编码器缺陷检测系统是一套面向工业质检场景的实战项目资源适合机器视觉、图像处理方向的开发者和生产制造领域的质量工程师。资源围绕伺服电机生产线中的编码器表面缺陷识别问题完整覆盖了从图像采集、ROI提取到形态学分析的核心流程。压缩包共30个文件以Python脚本、BMP/PNG图像样本及说明文档为主包含segment.py、detect.py等关键算法代码以及配套测试图像和README文档压缩后大小约76.82MB便于本地搭建环境复现。目前已有60人浏览学习。通过该包可以掌握自适应ROI动态选取、腐蚀膨胀等形态学操作在缺陷检测中的应用技巧并借助提供的图像数据验证识别效果适合正在做工业视觉课题或希望提升代码实践能力的读者参考借鉴。1. 机器视觉做旋转编码器缺陷检测为什么人工目检先顶不住伺服电机产线上的旋转编码器缺陷检测过去最常用的手段是人工目检而这正是机器视觉最该接手的场景。一个日产量两万只的车间检验员要在八小时内盯住成千上万个圆盘表面0.2mm的断缝、针尖大的孔洞、一粒凸起看久了全是主观判断漏检率随疲劳直线上升。这套基于机器视觉的旋转编码器缺陷检测系统用工业相机配合图像处理技术通过自适应ROI提取先把码盘从背景里稳定切出来再用形态学算法对断裂、孔洞、凸起分类判别把漏检率从人工的眼力波动压到可量化的统计指标单工位处理时间能到几十毫秒。搞这类检测最难的不是把算法跑通而是让它在线上稳定工作——这正是这套系统的定位适合正在评估视觉选型的质量工程师也适合想把一个OpenCV检测项目从Demo推到产线的技术人员。2. 成像与缺陷特征先解决“拍得清”再谈“算得准”2.1 编码器表面缺陷的图像特征与两大干扰源旋转编码器从结构上看是一个带码道或栅格的圆盘外面套外壳、带引脚和定位孔。表面缺陷大体分三类断裂、孔洞、凸起。断裂主要出现在外壳边缘和码道环带上宽度往往只有0.1~0.3mm在图像里是一根贯穿环带的细窄暗线或亮隙最大特点是不连续。孔洞来自注塑气泡、夹渣脱落表现为圆形或椭圆暗斑边缘灰度渐变常带一侧阴影。凸起是附着在表面的锡渣、塑封毛刺或者外部异物在低角度环形光照射下顶部发亮周围拖着一圈明显梯度。有两类干扰源比缺陷本身更难处理。第一类是编码器表面自带的字符丝印、引脚、定位孔和防呆槽它们有固定位置灰度特征和缺陷高度相似第二类是壳体弧面在固定光源下产生的镜面反射会在图像边缘形成一条月牙形高光带几乎和凸起长得一模一样。理解这两类干扰后面调ROI和掩膜才有依据否则很容易在算法参数里绕不出来。2.2 相机、镜头与光源选型一套能跑产线的参数组合选相机前先把指标算清楚。假定产线上要求识别的最小缺陷宽度是0.15mm按经验缺陷至少要在图像里占5个像素边缘检测和形态学才稳定于是像素分辨率0.15/50.03mm/pixel。如果视野定在60mm宽度对应传感器像素数60/0.032000也就是横向2000像素面阵相机的总像素至少400万到500万。这个级别采用500万黑白面阵相机帧率选30fps以上。黑白优于彩色检测表面结构与颜色无关黑白相机的量子效率和分辨率利用率都更高还省掉拜耳插值带来的边缘伪影。焦距按成像公式走f工作距离×传感器宽度/视野宽度。例如1/1.8英寸传感器宽度约6.4mm工作距离200mm视野60mm算得f≈21.3mm取25mm定焦或对应远心镜头。光源是这套系统里最容易返工的一块。黑色塑料外壳配金属码盘的混合材质低角度环形光能同时压出凸起的顶部高光和孔洞的月牙阴影背光则把外形轮廓打得干干净净对断裂检出最有效金属高光面再用同轴光补一场。常见做法是设置两个采集工位一个用背光切外形一个用低角度环形光看表面两个工位共用同一套ROI定位只是阈值方向相反。缺陷类型推荐光源图像特征断裂背光或同轴光轮廓/码道环带连续性中断呈细窄陡变线孔洞低角度环形光圆形暗斑边缘渐变常带月牙阴影凸起低角度环形光或同轴光局部高亮斑块边缘梯度明显提示光源方案要最先定。光源定错后面算法再调参数都是玄学。2.3 为什么不用全图阈值分割自适应ROI和形态学的定位很多OpenCV图像处理项目里拿到灰度图先做一次全局阈值把前景切出来就完事。但这个套路在旋转编码器上一定会翻车壳体是高光加深色纹理并存光源在弧面上分布不均工件每次到工位的角度和位置都有偏移同一套阈值在不同型号上灰度分布完全不同。固定阈值只能照顾某一个工位的某一种光照。所以系统的主线不是“分割”而是“定位局部判断”。先用自适应ROI提取在每一帧里重新找到编码器的圆心与半径把检测区域限定在一个环形带内再在ROI内部做形态学判断。ROI稳定阈值和结构元参数就可以全产线共用ROI漂移所有下游算法参数都会跟着失效。形态学在这里的角色是空间滤波不是灰度滤波处理的是“缺陷与周围像素的相对关系”——断裂是不连续孔洞是局部变暗凸起是局部变亮这些信息比绝对灰度更抗光照变化。用MATLAB图像处理或OpenCV做原型验证的人最常犯的错是先钻到算子参数里调忘了先问一句每一帧要从图像的哪个位置开始算。答案就是自适应ROI。3. 自适应ROI提取从杂乱背景里把码盘区域干净切出来3.1 粗定位最大连通域与最小外接圆一次找稳定位的前提是编码器和背景要分得开。在背光工位背景亮、编码器本体暗用一次阈值加最大连通域就能拿到完整外轮廓注意不要直接对原图做阈值先做一次开运算把离群的灰尘和反光点去掉轮廓才干净。我的做法是加一个总面积占比兜底避免小反光斑块被当成编码器本体。import cv2 import numpy as np def locate_coder(src_gray, area_ratio0.3): # 背光工位亮背景、编码器本体为暗块若用低角度环光工位则去掉 INV _, bin_img cv2.threshold(src_gray, 0, 255, cv2.THRESH_BINARY_INV cv2.THRESH_OTSU) kern cv2.getStructuringElement(cv2.MORPH_ELLIPSE, (7, 7)) bin_img cv2.morphologyEx(bin_img, cv2.MORPH_OPEN, kern) # 去孤立噪点 contours, _ cv2.findContours(bin_img, cv2.RETR_EXTERNAL, cv2.CHAIN_APPROX_NONE) if not contours: return None main_cnt max(contours, keycv2.contourArea) area cv2.contourArea(main_cnt) if area src_gray.size * area_ratio: # 面积占比兜底防误判 return None (cx, cy), radius cv2.minEnclosingCircle(main_cnt) return (int(cx), int(cy)), int(radius), main_cnt这段的流程是阈值翻转让编码器本体变成白前景开运算去掉孤立点按轮廓面积取最大连通域最后用minEnclosingCircle得到外接圆。THRESH_BINARY_INV THRESH_OTSU会先由Otsu自动算出暗场阈值再取反适合背光工位如果换到低角度环形光工位编码器表面偏亮、背景偏暗就换成THRESH_BINARY。面积占比0.3是经验值视场里编码器占画面更大或更小时要重新标定防止把视场边缘的支撑结构误识别进来。3.2 检测环带用半径比例把有效区域裁干净找到外接圆后检测区域要做成环形带。整圆的内部并不都是有效表面中心是轴承和端盖反射强、灰度乱外圈有一圈固定台阶这两个区域都要挖掉。inner_ratio和outer_ratio就是换型号时最常调的配方参数不同型号的码盘环带宽度不同通常由人工拿着卡尺在图上量一次就能定。def extract_ring_band(gray, center, radius, inner_ratio0.35, outer_ratio0.92): h, w gray.shape[:2] mask np.zeros((h, w), np.uint8) r_outer int(radius * outer_ratio) r_inner int(radius * inner_ratio) cv2.circle(mask, center, r_outer, 255, -1) cv2.circle(mask, center, r_inner, 0, -1) # 挖掉中心区域 band cv2.bitwise_and(gray, gray, maskmask) return band, mask这段先生成一张全黑掩膜在掩膜上画出外圆再在中心位置画一个内圆把它挖成环形最后用bitwise_and把检测区域之外的灰度清零。ROI一旦限定到环形带后面的极坐标展开和形态学都只在这块小面积上运算性能压力也小很多。inner_ratio和outer_ratio写成配置文件换型号只改这两个比例不动代码。3.3 极坐标展开与角度对齐把旋转检测变平移检测在直角坐标下做形态学有一个绕不开的问题编码器是回转体同一类断裂在圆周不同角度上的朝向都不一样代码里要同时准备横、竖、斜几个方向的结构元参数组合膨胀得非常快。把环形带做极坐标展开之后横轴对应角度、纵轴对应半径码道断裂就从“任意朝向”变成“沿横轴方向的断口”孔洞和凸起不受影响。这一下等于把旋转问题变成了平移问题后面所有形态学核的方向都固定下来。def polar_ring(gray, center, radius): # 输出尺寸横轴周长纵轴半径保证两方向分辨率接近 cols int(2 * np.pi * radius) rows int(radius) polar cv2.warpPolar(gray, (cols, rows), center, radius, cv2.INTER_LINEAR | cv2.WARP_FILL_OUTLIERS) return cv2.rotate(polar, cv2.ROTATE_90_COUNTERCLOCKWISE) def align_band(polar_ref, polar_cur): # 用模板匹配求角度方向偏移再按偏移循环回卷 res cv2.matchTemplate(polar_cur, polar_ref, cv2.TM_SQDIFF_NORMED) _, _, _, max_loc cv2.minMaxLoc(res) shift max_loc[0] return np.roll(polar_cur, int(shift), axis0)warpPolar的dsize我习惯用(周长, radius)让角度方向和半径方向的分辨率大致相等INTER_LINEAR对灰度检测够用没必要增加耗时。旋转换一种坐标习惯关键是整个项目里统一否则核的方向会全部对不上。OpenCV 4.5.2以上才自带warpPolar老版本就自己写一个双循环坐标映射逻辑完全一样。角度对齐用模板匹配求偏移np.roll把整行循环挪回来极坐标本身是环形的roll正好对应圆周方向。偏移量超过正负5度说明夹具异常直接报警不要强行校正。4. 形态学算法检测断裂、孔洞与凸起膨胀腐蚀与顶帽黑帽的分工4.1 灰度形态学与二值形态学怎么选形态学检测的第一步是确认在哪个图像域里做。二值形态学速度快但阈值分割会把与背景灰度接近的细断缝、浅孔洞直接丢掉丢失的是缺陷渐变边缘的信息。灰度形态学直接对原图的灰度做局部极大/极小运算——膨胀就是取邻域最大灰度腐蚀就是取邻域最小灰度在黑色塑料表面上能保留缺陷的真实对比度。所以这套系统选择在灰度域做二值化只出现在最后判断轮廓的阶段。OpenCV的morphologyEx对灰度图直接可用注意结构元形状和尺寸。尤其在极坐标展开图里“沿码道方向”对应横轴“沿半径方向”对应纵轴对断裂这种长条缺陷结构元要按方向设置成不对称的。4.2 断裂检测闭运算弥合加差分卡死长条状断口断裂是环带在角度方向上的不连续。做法是先闭运算、再差分。闭运算由膨胀加腐蚀组成对灰度图的作用是填平比结构元小的暗缝那些宽度明显小于核的断裂会被弥合而字符和正常纹理变化幅度小闭运算前后灰度几乎不变。把闭运算结果和原图做绝对差分被弥合的断裂处就会出现一个明亮的窄条。def detect_break(band, kernel_len9): # 断裂沿码道方向横轴用横向结构元做闭运算填缝 kern cv2.getStructuringElement(cv2.MORPH_RECT, (kernel_len, 1)) closed cv2.morphologyEx(band, cv2.MORPH_CLOSE, kern) diff cv2.absdiff(band, closed) # 被弥合的断缝位置灰度差明显 _, thr cv2.threshold(diff, 0, 255, cv2.THRESH_BINARY cv2.THRESH_OTSU) contours, _ cv2.findContours(thr, cv2.RETR_EXTERNAL, cv2.CHAIN_APPROX_SIMPLE) defects [] for cnt in contours: x, y, w, h cv2.boundingRect(cnt) # 断裂在角度方向上延伸远大于厚度方向呈长条状 if h 2 and w 3 and w 2 * h: defects.append((x, y, w, h)) return defects结构元用(kernel_len, 1)横向矩形对应横轴沿角度方向。kernel_len的选取比整条算法的任何参数都关键它要大于最小缺陷宽度又要小于字符间距否则字符笔划会被当成断裂填充。更稳的经验是先拿50张已知断裂坏品做扫描画“kernel尺寸→差分信号峰值/背景噪声”曲线取拐点上一条。过滤条件里w2*h是长条断口的形状判据把圆形孔洞排除在断裂检出的结果之外。4.3 孔洞检测黑帽变换加圆度过滤孔洞在展开图上是圆形或近似圆形的暗斑。这类缺陷用黑帽变换最直接黑帽闭运算结果-原图提取“比邻域暗的区域”对比度和形状都保留。之后再做一次Otsu二值化按面积和圆度过滤。这里不用管孔洞的绝对灰度只关心它在局部是不是比周围暗——这就是灰度形态学抗光照变化的原因。def detect_hole(band, kernel_size5, min_area8): kern cv2.getStructuringElement(cv2.MORPH_ELLIPSE, (kernel_size, kernel_size)) blackhat cv2.morphologyEx(band, cv2.MORPH_BLACKHAT, kern) _, thr cv2.threshold(blackhat, 0, 255, cv2.THRESH_BINARY cv2.THRESH_OTSU) contours, _ cv2.findContours(thr, cv2.RETR_EXTERNAL, cv2.CHAIN_APPROX_SIMPLE) holes [] for cnt in contours: area cv2.contourArea(cnt) if area min_area: continue x, y, w, h cv2.boundingRect(cnt) # 圆度面积相对外接矩形展开图上允许轻微拉伸 roundness 4 * area / (np.pi * w * h) if 0.4 roundness 1.6: holes.append((int(x), int(y), w, h)) return holeskernel_size对孔洞检测既要小于最小孔洞直径又不能小于噪声颗粒尺寸。实际操作中min_area按像素给定需要先通过标定尺把mm换算成像素展开图上孔洞会在半径方向有少量拉伸所以圆度判据放宽到0.4~1.6别按教科书里0.8~1.2去卡不然轻微形变就把真孔滤掉了。4.4 凸起检测顶帽变换加紧凑度过滤凸起在低角度环形光下表现为局部高亮斑块。顶帽变换原图-开运算结果正好把亮细节单独提出来。凸起的伪装是字符丝印和高光纹理字符笔划长而规则凸起是紧凑斑块所以过滤条件里用面积加紧凑度面积/外接矩形面积来区分。def detect_bump(band, kernel_size5, min_area10): kern cv2.getStructuringElement(cv2.MORPH_ELLIPSE, (kernel_size, kernel_size)) tophat cv2.morphologyEx(band, cv2.MORPH_TOPHAT, kern) # 顶帽结果对单像素噪点敏感先过一次中值再二值化 tophat cv2.medianBlur(tophat, 3) _, thr cv2.threshold(tophat, 0, 255, cv2.THRESH_BINARY cv2.THRESH_OTSU) contours, _ cv2.findContours(thr, cv2.RETR_EXTERNAL, cv2.CHAIN_APPROX_SIMPLE) bumps [] for cnt in contours: area cv2.contourArea(cnt) if area min_area: continue x, y, w, h cv2.boundingRect(cnt) # 紧凑度过滤排除长条状字符笔划 if h 2 and w 2 and area / (w * h) 0.5: bumps.append((x, y, w, h)) return bumps如果产线光照波动明显Otsu阈值在顶帽图上不稳定建议换成固定阈值标定时取20张正常品计算顶帽灰度均值与方差阈值定在均值加3倍标准差。这个阈值要写成配置参数供现场快速调整不要写死在代码里。紧凑度用area/(w*h)0.5基本能排除字符那种细长条剩下的就是真正的局部高亮。5. 生产线上最容易踩的五个坑从漏检调参到节拍失控5.1 高光月牙被当成凸起先调光源再调算法现象黑色外壳边缘出现月牙形高光带被反复报为凸起缺陷误检率达到整批次不可用的级别。原因低角度环形光在弧面上产生镜面反射高光带的灰度分布、形状和凸起在特征空间里高度重叠形态学参数调松调紧都躲不开。解决先调光源再调算法。把环形光换成漫射穹顶光亮度压到不饱和如果工位结构限制只能用环形光就把ROI环带靠外圈的反射区裁掉只保留反射均匀的中段环带。同时把正常状态下稳定出现高光的区域在掩膜里置为“不检测”从源头排除。5.2 换型号就全检漏检ROI坐标不能写死现象A型号调好的整套参数切到B型号后漏检率直接从0.1%跳到30%检查代码逻辑没改ROI中心却偏移了7个像素。原因ROI坐标写成了代码常量换型号后夹具定位点不同圆心在图像里的位置移动。ROI一偏后面极坐标展开、形态学全部跟着失效。解决圆心和半径必须逐帧从图像里重新算不依赖上一次的位置。把inner_ratio、outer_ratio、极坐标尺寸、结构元尺寸都做成配方表切换型号只加载对应配方不重新编译。这套系统的立身之本就是“自适应”而不是“记住”。5.3 闭运算把真断缝填平了结构元到底该选多大现象0.15mm的真裂缝闭运算核设成9像素差分图干干净净裂缝被当成普通缝隙填平了。原因结构元宽度大于缺陷宽度时闭运算会把缺陷当作背景的一部分处理弥合得无痕迹。解决结构元不能大于最小缺陷宽度的1.5倍。精确标定法是用50张已知断缝坏品绘制kernel尺寸和差分信号峰值的曲线取拐点的临界值。宁可偏小偏小还有残差可以判断偏大则信号直接消失什么都没有。5.4 单张处理120ms、节拍50ms性能优化要按证据链走现象Python加OpenCV实现单张处理120ms产线节拍只有50ms整线被算法拖死。原因全图处理、大核形态学、大量轮廓全部遍历每一步都不重累加起来就是120ms。解决先把耗时按函数拆开测量找到瓶颈再动。常见做法是ROI定位后立刻裁剪只在环带区域做极坐标展开闭运算核改横向1×9减少无效计算轮廓遍历前先按面积排序只处理前30个候选。这一套下来单张通常能压到30~40ms再不够再考虑转C或调用GPU算子。性能优化按证据链走不要无脑加多线程。5.5 字符误报压不下来缺陷掩膜和算法各管一件事现象丝印字符和引脚阴影反复报警形态学参数无论怎么调都压不下去。原因字符和缺陷在灰度表现上本质相同形态学只能区分形状分不出这是设计字符还是外部缺陷。解决把“缺陷能出现在哪”和“缺陷长什么样”分开处理。采集一批正常品统计每个像素位置在多次成像里的稳定度稳定出现的结构字符、引脚、定位孔在“允许缺陷掩膜”里置0检测时缺陷候选必须落在允许区域才报警。这个掩膜和ROI一样按型号归档换型时自动加载。形态学解决“缺陷长什么样”掩膜解决“缺陷能出现在哪”两件事绝不混在一起调参。6. 端到端验证与纹理投影如何在量产前把漏检率压到0.1%以内实验室里把形态学参数调到刚好不误检只能算第一步。真正交付前我会用留一法把系统按产线流程完整验证一遍把已经标注好的图像样本分成5折每一折轮流当验证集其余4折用来标定阈值最后统计5次平均的漏检率和误检率。样本量至少300张断裂、孔洞、凸起三类都要有足够正样本不够就回现场补拍宁缺毋滥。评估指标计算方式建议目标漏检率缺陷样本被判为合格的比率0.1%以内误检率合格样本被判为缺陷的比率0.5%以内单张耗时采集到输出判定结果的时间节拍余量的一半以内型号切换时间更换配方并恢复稳定的时间2分钟以内还有一个交叉验证技巧在极坐标展开图上做横向灰度投影。正常码道在角度方向上灰度平稳断裂处会在对应半径带出现一个窄尖峰。把每行灰度沿横轴做差分得到一条连续性评分曲线某段连续超阈值就判为断口候选与形态学差分结果互相印证。这个技巧救过我很多次尤其当闭运算把浅断缝填得差不多的时候投影曲线仍然会保留一个明显的异常尖峰。我早期做这类检测习惯拿到图先套一层中值滤波把噪点磨干净结果细裂纹被磨得看不见漏检全发生在自己加的预处理步骤上。后来想明白噪声是随机分布的散点缺陷是连续且有结构的灰度异常正确顺序应该是先ROI限位置再形态学判形状最后才做轻量降噪。现在我到现场第一件事是蹲在产线边上把带缺陷的坏品亲手挑出来标完再写第一行代码。这个习惯让我少走了一半弯路。希望帮到你。本文还有配套的精品资源点击获取