业务和功能介绍
基于RK3588的红外小目标识别系统，其核心业务功能在于实现对“低慢小”飞行器等远距离、小像素目标的高精度实时检测与智能预警。系统通过接入多路RTSP视频流，利用RK3588强大的6.0TOPS NPU算力，结合专门针对小目标优化的深度学习算法，能够在复杂背景和昼夜条件下稳定识别像素面积小于32*32的物体。一旦检测到目标，系统立即启动动态预警，通过消息订阅机制向监控中心推送告警信息，并自动锁定与智能追踪目标。在追踪过程中，系统能有效应对目标短暂遮挡、相机抖动等干扰，保持跟踪的稳定性。最终，系统支持定制化输出，可根据需求将带有目标标记框、坐标信息的视频流，通过RTSP、UDP、SDI、CVBS等多种接口协议输出，或存储为H.264/H.265格式的视频文件，满足不同平台和反制系统的集成需求
项目实现
在项目实现上，需充分利用RK3588的异构计算架构进行全流程硬件加速，以保障实时性。首先，通过MPP（Media Process Platform）模块对多路红外摄像头的RTSP流进行硬件视频解码加速，大幅降低CPU负载。解码后的图像数据送入RGA（Raster Graphic Acceleration）模块，完成尺寸缩放、格式转换等预处理，为推理做好准备。核心的识别任务由RKNN推理框架承载，将训练好的小目标检测模型（如优化后的YOLO系列）部署到RK3588的NPU上运行，实现推理加速。为提高吞吐量，需采用多线程编程模型，将视频流解码、图像预处理、NPU推理、结果后处理及输出等任务流水线化，并行执行。整个系统的协同通过消息订阅机制实现，各模块间通过消息队列进行松耦合通信，例如，推理模块将识别结果发布为“目标检测”消息，追踪和预警模块订阅该消息并触发相应动作，使得系统架构灵活，易于扩展和维护。最终，处理结果可定制化输出至网络或本地，完成从感知到决策的闭环。
示例图片视频
相似推荐
端到端自动驾驶轻量化模型设计
本项目主要面向无人驾驶仿真研究、智能车辆轨迹跟踪与轻量化控制算法验证场景，围绕端到端自动驾驶技术开展系统设计与实验开发。项目基于 CARLA 仿真平台构建虚拟驾驶环境，通过采集车辆前视图像、行驶状态和控制指令等数据，训练轻量化神经网络模型，实现从环境感知输入到车辆控制输出的端到端映射。项目可用于自动驾驶算法教学、科研训练、数据采集、模型训练、仿真测试和轨迹跟踪效果评估，为低成本、高效率的自动驾驶算法验证提供支持。
本项目主要功能包括仿真环境搭建、自动驾驶数据采集、数据预处理、模型训练、模型推理和效果评估等模块。系统可在 CARLA 仿真环境中生成车辆行驶场景，自动采集车辆前方图像、方向盘转角、油门、刹车等控制数据，并生成对应的数据标签文件；同时支持对采集数据进行划分和预处理，形成训练集、验证集和测试集。模型部分采用轻量化端到端神经网络结构，通过输入车辆前视图像，直接预测车辆控制指令或轨迹跟踪相关参数，从而实现车辆在仿真道路中的自主行驶与轨迹跟踪。项目还支持训练过程记录、模型保存、测试推理和结果可视化，便于对算法性能进行分析和改进。
智慧园区管理平台
通过数字孪生技术，真实的真实整个园区的场景，通过物联网设备管理以及大数据分析，实时展示园区的整个状态。通过对接的硬件设备，实时显示园区的环境，气象，污水等数据，通过算法实现精准决策，完成控制设备的调控
电商平台web、app、小程序-石联网
石联网是全球最大石材行业国际性电子商务平台；由主站、会员站、手机站 、手机 app 、微信小程序、会员中心、后台管理构成，采用微服务模块化架构设计，运用新的.net core、webapi、efcode、await/async、多线程、rabbitmq、quartz.net、elasticsearch、redis、git、jenkins和devops 持续集成和自动化部署、ids 4身份认证、sqlserver 、vue/element-ui、Html5、js、css等技术
智能家居平台
1 全屋智能设备控制及场景定时控制（10多种设备）。
2 用户控制设备指令通过APP下发到平台，平台通过自定义协议下方到设备，实现用户和设备的交互。根据不用场景设置相应的设备关联控制和定时控制。
3 对接第三方设备天猫精灵、alexa、rokid语音机器人通过语音控制设备。
动态监控大屏系统
构建一个基于物联网设备运行数据的实时监控系统，通过大屏幕可视化展示设备运行状
态、性能指标和异常情况，帮助运维人员快速掌握设备整体运行状况，及时发现并处理潜
在问题，提高设备管理效率和系统可靠性。系统适用于制造业生产线、智慧楼宇、能源设
施等多种物联网应用场景
帮助文档
Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服