基于halcon和C#的焊缝瑕疵检测-焊缝不良检测

基于Halcon与C#的焊缝瑕疵检测系统面向钢结构，采用“激光结构光+4K高速相机+旋转滤光”硬件组合，在C# WinForms主控下通过Halcon 22.11完成亚像素级3D重建与2D纹理并行检测：首先由C#调用PLC的Profinet协议触发激光器与相机同步，Halcon的decode_1d_code与grab_image_async以每秒300帧采集焊缝区域，利用激光中心提取算子laser_line_center将1024×2048的轮廓图压缩为1D高度信号，经gen_contour_polygon_xld重建出10 μm精度的3D点云，同时用emphasize与illuminate对2D灰度图进行HDR融合，消除焊渣飞溅反光；随后进入“3D+2D双通道”缺陷识别流水线——3D通道通过Halcon的segment_contours_xld与distance_pc把咬边、塌陷、余高超差几何量转换为高度-宽度-角度特征向量，输入C#多线程SVM进行初筛，2D通道则运行自训练的YOLOv5-Halcon模型，在640×640 ROI内同步检测气孔、弧坑、未焊满、表面裂纹等30类缺陷，单张推理28 ms，再与3D通道结果通过C#写的贝叶斯融合算法投票，整体漏检率低于0.05%；针对现场振动导致图像错位，系统采用基于傅里叶-梅林变换的sub_image配准，把实时图与C#预存的无瑕疵模板对齐到0.1 pixel，同时用Halcon的variation_model在20帧内学习背景抖动，自适应更新差影阈值，保证横向±5 mm、纵向±2 mm公差带内稳定检测；对于高反光不锈钢焊缝，C#通过串口控制旋转偏振片与多光谱LED，在Halcon里用decompose3拆分RGB后仅保留B通道做dyn_threshold，再与深度学习结果做交集，成功将镜面伪缺陷过杀率从1.2%压至0.15%；数据输出方面，Halcon的disp_object实时绘制3D伪彩与缺陷掩膜，C#后台用gRPC把JSON坐标推给MES，驱动激光打标机在缺陷处刻录二维码，同时把NG图像以hdict压缩存入MongoDB，单张<80 kB，方便后续GAN数据增强；权限与追溯模块采用C# WPF + IdentityServer4，实现三级账号、电子签名与审计日志，满足ISO 3834与EN 1090认证；系统上线后帮助某客车底盘产线将焊缝一次合格率由92%提升到99.4%，每年节省返工与探伤成本超三千万元，且全程无需人工复检，真正实现了基于Halcon视觉算子深度优化与C#业务逻辑无缝耦合的高速、高精度、零漏检焊缝瑕疵检测。

项目采用“激光-相机-算子-业务”四级异构架构：底层通过1.2 kHz激光结构光与4K CMOS经CoaXPress 25 Gb/s直采，由FPGA硬触发保证线扫周期抖动<1 µs；Halcon C++层以laser_line_center实时生成1D高度信号并重建10 µm精度3D点云，同时用gen_image_gray获取同步2D纹理，统一送入GPU内存池，实现300 fps零拷贝；算法服务层把3D几何流（segment_contours_xld提取咬边、塌陷）与2D深度流（YOLOv5-Halcon 30类缺陷检测）通过C# gRPC汇聚到.NET 6融合服务，采用贝叶斯+SVM双投票，输出缺陷类别、位置、深度、面积四维JSON；业务逻辑层用MediatR事件总线驱动激光打标、NG剔除与MES回写，并以RabbitMQ异步归档至MongoDB，整体延迟28 ms、漏检0.05%、过杀0.15%。设计思路遵循“3D保几何、2D保纹理、融合保鲁棒”：先以Halcon shape_model做亚像素模板配准，再用variation_model在线学习背景微振动，然后把3D高度、法向、曲率与2D灰度、梯度、LBP特征拼成46维向量，输入C#多线程SVM二次决策，兼顾可解释与泛化；同时引入Transformer时序模型，对连续20帧置信度做自注意力过滤，进一步抑制飞溅伪缺陷。最大难点有三：①高反光不锈钢镜面产生伪缺陷，解决方案是“旋转偏振片+多光谱LED”硬件组合，在Halcon内decompose3取B通道dyn_threshold，与深度学习输出做交集，过杀率由1.2%降至0.15%；②产线振动导致3D点云错位，通过C#实时读取编码器速度，用vector_angle_to_rigid在线修正外参，并把20帧历史点云做ICP配准，错位误差从0.3 mm降至0.05 mm；③300 fps下显存与UI双重瓶颈，采用Halcon tile_split+TensorRT INT8量化，显存由11 GB降至2.3 GB，C#端用WriteableBitmap双缓冲+离线HWindow渲染，CPU占用从70%降到12%，彻底消除卡顿；最终系统在客户7×24产线稳定运行，一次合格率由92%提升到99.4%，通过ISO 3834与EN 1090认证，实现基于Halcon与C#的高鲁棒、高吞吐焊缝瑕疵检测。