广安乾寻科技有限公司

一、项目具体功能模块 1. 视觉图像采集模块 对接海康威视工业相机，软硬触发自动拍照，采集无序堆叠 PCB 物料图像； 2. 无模板视觉识别模块 自研深度学习识别算法 + 残差网络追踪，无需提前制作像素模板，识别任意版型电路板，自动计算物料几何中心、矫正放置角度； 3. 机器人运动控制通讯模块 基于汇川机器人 SDK 开发，通过 Modbus TCP 协议将视觉坐标实时下发机械臂； 4. 柔性抓取执行模块 配套柔性吸盘专用抓取算法，控制机械臂有序取料、角度矫正、平稳放置传送带； 5. 产线数据与异常管控模块 自动识别光学 / 背景干扰，减少 NG 故障信号，全流程数据记录，配套完整源码交付。 二、 使用者落地实现的功能 1. 柔性无换型生产：摆脱传统单一版型限制，多种 PCB 物料无需制作模板即可自动识别，大幅减少换型调试工时； 2. 全自动无人上料：物料小车到位后全程自动化 —— 拍照识别→坐标计算→机器人抓取→对位下料，无需人工值守上料、调机； 3. 抗干扰稳定生产：解决车间光线、物料堆叠背景干扰问题，降低设备报错停机频次； 4. 产线效能优化：提升上料节拍速度，缩减岗位人力投入，减少不良品触发； 5. 完整自主可控交付：项目配套全部源代码，企业可自主二次调试、迭代优化，同时配套技术落地培训。 三、项目运用的核心技术 1. 硬件对接开发：汇川机器人硬件 SDK、海康威视相机 SDK 二次开发； 2. 视觉底层算法：OpenCV 图像处理、自研残差网络目标追踪结构、自研检测头与专属损失函数； 3. 无序物料识别算法：无模板堆叠物料识别、亚像素级几何中心计算、物料角度自动矫正； 4. 工业通讯：Modbus TCP 实时坐标传输； 5. 运动控制：柔性吸盘抓取专属运动算法，机械臂联动调度逻辑。 四、项目核心优势 1. 识别精度高：物料识别准确度 98.1%，适配 PCB 高端制造精度标准； 2. 生产效率提升：上料流程速率整体提升 30%； 3. 人力成本节约：无需专人值守调机、制作模板，节省产线 20% 人力成本； 4. 稳定性更强：受光线、物料背景干扰产生的 NG 报错信号减少 13%； 5. 柔性通用：无模板识别，支持多版型共线生产，换型零模板制作成本； 6. 交付完整可控：项目源码一次性交付，企业具备自主迭代、维护能力，适配长期产线升级。

1. 具体功能模块 整机硬件集中控制模块 统一集成电磁阀、夹具轨道直线电机、丝杆电机、主轴、PLC 各类硬件信号，开发整机统一 SDK，完成全部硬件底层驱动集成，实现机床全部件集中调度控制。 多维度精度漂移抑制模块 通过 10 轴 IMU 采集振动数据搭建微震误差模型，搭配 WHT11 温度传感器构建热形变补偿模型，基于 U-Net 网络搭建刀具磨损识别模型，从震动、温度、刀具损耗三个维度抵消加工精度偏移。 双目高精度视觉定位模块 搭载 2000 万像素双目 CCD 相机，采用改进 ResNet18 网络完成金手指追踪定位，搭配自研亚像素几何边缘查找算法，70 毫秒内锁定精准加工坐标。 自适应恒强光源控制模块 采用 PID 闭环控制环形 LED 光源，支持工控机、设备自带控制器双端调控，软硬触发模式可选，消除导轨移动、车间光照波动带来的图像像素特征丢失问题。 轴联动运动加工模块 通过 Modbus TCP 通讯传输视觉定位坐标，系统自动反算加工轴位置，补偿物料倾斜偏差，联动主轴、丝杆完成全自动切削加工。 全流程自动化闭环模块 覆盖物料上料、夹具自动定位、视觉检测、高精度加工、成品出料完整工序，实时记录精度、速度、报废数据，支持设备运行状态实时监控。 2.功能 无需人工调整夹具物料倾斜角度，系统自动完成定位补偿，省去人工校准工序，实现全流程无人加工闭环。 稳定实现 0.8μm-1.4μm 加工精度，满足高端 PCB 金手指小于 10μm 的高精度生产要求。 自动抑制刀具加工弹跳、高温热漂移、刀具磨损带来的加工误差，有效降低产品报废与返工数量。 消除机床移动、现场光照变化对视觉成像的干扰，长期生产过程中金手指图像特征完整保留，加工成品一致性稳定。 一套控制系统统筹光源、视觉、电机、主轴、PLC 全部硬件，不用搭配多套独立控制程序，设备运维操作简单。 3. 技术 整机全硬件 SDK 集成开发，多电机、主轴、电磁阀、PLC 底层驱动协议整合技术。 多传感器融合误差补偿技术，包含 10 轴 IMU 微震建模、WHT11 温度热形变补偿、U-Net 刀具磨损视觉识别。 2000 万像素双目 CCD 视觉成像技术，改进 ResNet18 目标追踪算法，自研亚像素物料边缘查找算法。 PID 恒强环形光源自适应调控技术，支持软硬双触发成像控制。 Modbus TCP 工业实时通讯技术，视觉坐标反算与多加工轴联动运动控制技术。 4. 优势 加工精度稳定维持在 0.8μm-1.4μm，远超客户 10μm 的精度标准，适配高端 PCB 精加工生产需求。 产品废品率降低 32%，有效减少原材料损耗与返工工时。 产线整体加工速度提升 60%，单位时间产出量大幅提高。 完全取消人工调机、校准工位，实现全自动无人化连续生产。 自适应光源系统解决光照变化干扰，视觉成像长期稳定，设备故障率更低

本项目致力于构建一套面向复杂工业环境的具身智能无人系统集群协同平台，旨在将云端大模型的强大推理能力、边缘端具身智能的实时决策能力与多种无人系统终端的精准执行能力深度融合，打造一个能理解高层级自然语言指令、自主完成工业现场复杂作业任务的分布式智能系统。系统的核心业务逻辑遵循端边云三层协同架构。在终端层，平台集成了工业级多旋翼无人机、四足机器狗、轮式巡检机器人等异构载体，每类终端均搭载高性能嵌入式计算单元（如NVIDIA Jetson Orin或国产化瑞芯微方案）与各类传感器，包括激光雷达、毫米波雷达、深度相机、高精度RTK定位模块及多种工业检测探头，并运行实时操作系统以实现微秒级底层控制响应与多源传感器数据的前端融合。边缘层部署于现场服务器或5G基站侧，运行蒸馏压缩后的百亿级参数具身小脑模型，负责接收云端下发的全局任务规划，并将其拆解为实时的运动控制指令与局部路径规划，同时承担多机间的协同感知与动态避障决策。云端则部署千亿级参数的多模态大模型，作为系统的具身大脑，能够理解操作员以自然语言或图形化方式下达的抽象指令（例如对三号仓库泄漏阀门进行紧急处置），并通过模型微调技术适应特定工业场景的术语与工艺要求，完成复杂任务的自主分解、全局路径搜索及多智能体资源调配。 在功能实现层面，系统提供了完整的闭环作业能力。感知端通过激光雷达与视觉融合SLAM技术实现恶劣光照、粉尘或雨雾条件下的高精度三维建图与定位；识别端利用深度神经网络对工业设备状态、仪表读数、异常泄漏、火灾隐患等目标进行实时检测与分类；规划端基于大模型的常识推理与场景理解能力，生成符合安全规范的动作序列，并能够在执行过程中根据环境反馈动态调整策略。控制端则输出高频率的关节角度、推力或转向指令，确保无人机平稳悬停、机器狗复杂地形越障、机械臂精细操作等动作的顺滑与精准。集群协同方面，系统支持异构智能体之间的自主编队、任务分工与信息共享，例如无人机高空快速侦察全局态势，机器狗抵近检测地面细节，而携带机械臂的机器人则负责实际接触操作，三者通过自组网或5G链路实时交换状态数据，实现相互补位与故障冗余。当通信链路出现中断时，各终端可启用本地决策模式维持基本作业能力，待链路恢复后再进行任务同步。 对于上位机软件，平台提供基于Qt或Web技术构建的跨平台综合监控与交互中心，具备三维态势感知数字孪生界面，能够实时展示所有在网智能体的位置、姿态、电量、任务进度及传感器数据流；操作员可通过语音或文本输入自然语言指令，系统将其转化为机器可执行的计划并呈现在界面供确认；同时，上位机还集成了数据记录与回放、故障报警、远程遥控接管、系统自检与OTA升级等运维工具，并支持多用户权限管理，确保工业现场的安全合规操作。