音视频 嵌入式软件 软件定制 案例

智能工牌系统是一款基于ESP32-S3-WROOM-1-N16双核主控设计的企业级智能穿戴终端，面向中大型企业现场作业人员实现语音录音及音频文件智能下传等核心管理功能，系统由智能工牌终端、云平台、管理后台及移动端APP四部分组成。终端侧集成ES8388音频Codec与MEMS麦克风，支持长按录音后自动以MP3格式缓存至TF卡，并通过Wi-Fi STA模式连接企业局域网，采用三级下传策略（SOS录音实时上传、普通录音闲时批量上传、大文件断点续传）配合自适应带宽探测算法将音频文件可靠上传至阿里云OSS存储，同时具备Wi-Fi指纹定位、一键SOS上传GPS与现场录音、电子围栏越界告警及NFC自动考勤打卡功能；云平台基于阿里云IoT Core实现设备接入与设备影子同步，OSS管理音频文件归档，规则引擎联动告警与事件处理；管理后台采用Vue3与Leaflet地图提供实时人员定位热力图、音频回放与下载、电子围栏绘制及任务工单闭环管理；移动端基于Flutter实现管理员实时监控与SOS响应以及员工端签退打卡与工单接收。

本类项目是基于非制冷红外探测器的成像模组项目。 旨在实现低功耗、小体积、高质量图像以及视频接口高兼容性。 本项目是团队合作项目，我主要负责FPGA工程架构设计、软核软件架构设计，并参与某些具体的算法/视频接口/外设驱动的实现及调试。

立项背景：随着智能汽车普及，车主对车内影音播放、多媒体交互需求提升，项目目标搭建适配小米座舱的一体化音视频播放底座。核心模块包含多路音视频解码、车载多媒体播放器、蓝牙音源接入、音效均衡调节。车机识别U盘/蓝牙/车联网流媒体音源，调用FFmpeg完成多格式音视频硬软解，用户通过中控屏切换音源、调节环绕音效，系统适配车载降噪算法，同步联动车内扬声器分区发声，满足行车影音娱乐需求。

1，打造独一的音视频显控平台 2，采用分布式管理，各个设备节点相对独立，由管理节点进行信息交互。 3，依赖hisi/rk平台进行音视频采集和编码，音视频路由切换，图像推送，图像抓取，第三方设备接入，快捷键设置，个性化设置，各独立节点之间信息交互等功能。

在RK3676的板卡上，智能摄像头NVR,后续可配置，授权切换到不同的具体产品。包括 人脸捕捉和识别(8人,30FPS) 行人det+动作识别pose+行为分析(22FPS), 车辆det+车牌det+车牌号码识别(22FPS), Heat Map （热力图渲染输出） Real-time People Counting （实时人员统计） Suspicious activity monitoring （可疑活动监测） Object detection & tracking （物体检测与追踪） People tracking （人员追踪） Vehicle detection & identification （车辆检测与识别） Vests and helmets （反光背心与安全帽检测） Fall Detection （反光背心与安全帽检测）

1.此项目主要为满足商业场景下有线视频信号一分多路显示的需求。 2.产品主要包含MCU(STM32)和视频传输芯片，其中MCU通过模拟I2C与视频传输芯片的I2C寄存器进行交互，实现有线视频传输的接收与分配。接收芯片将接收到的一路视频信号，分成完全相同的4路输出，输出到不同的显示设备上。

IP语音系统是基于IP网络传输语音信号的电话通信系统，通过部署IP语音中继设备将传统电话网络与IP网络连接，实现跨区域免费通话，本项目是基于网络终端设备，实现在路由器上的IP电话功能，控制协议使用SIP协议，媒体使用RTP协议，配合软交换实现各种补充业务，主要客户是各国网络运营商，通过RJ11口连接电话机，实现电话功能。

. 基础核心功能 一键呼叫： 用户按下按钮，触发呼叫。 声光提示： 接收主机发出响亮铃声和不同颜色的灯光闪烁，确保提醒不被忽略。 多级联动： 一个呼叫可以同时通知多个终端（如护士站、走廊屏、护士随身接收机）。 呼叫记忆与排队： 当接收方忙时，系统自动存储呼叫顺序，依次处理。 解除与重置： 服务人员到场后，在现场或主机上解除报警，系统重置待命

该一体机产品基于MTK9630 Android11平台开发，并搭配windows OPS，可安装使用第三方Android应用，也可切换到搭配的OPS通道使用windows系统，同时支持USB-A/C口，HDMI/VGA/DP，有线/Wifi/BT等基础功能。可根据客制化应用于教育机、会议机、广告机等使用场景，覆盖教育、会议、广告等不同领域的需求。

实现不同音频算法的不同功能，例如像FFT利用优化，卷积核实现和优化，DRC等和降噪等，满足不同产品的性能需求，例如算力限制和内存限制等，再对产品进行调音测试等一系列验证，再根据客户的要求进行改进产品效果

SBC是IMS网络边缘用于实现IP接入、互通和安全保护的网元，存在于接入网络与IMS网络之间或不同IMS网络之间，是用户接入IMS的入口点。SBC作为B2BUA将用户和IMS核心网进行隔离。 SBC的主要功能包括： 注册管理功能 NAT穿越功能 信令防火墙功能 媒体资源管理功能 Qos策略控制 IP安全机制 SBC的部署有两种方案： 一是SBC与P-CSCF独立设置； 二是SBC和P-CSCF合设。

商城和个人中心比较常规，就只介绍主要的设备模块。 用户在添加新的设备时，输入设备id和设备密码，如果与数据库里面的信息匹配，就添加到设备页。用户在点击蓝牙配网，输入WiFi名称和密码后可进行配网，点击设备详情可查看设备信息。

语音流3A算法集成自动增益控制、回声消除和噪声抑制三大核心技术。AGC动态调节麦克风输入音量，确保语音信号稳定；AEC通过识别并消除扬声器反馈的回声，避免声音重叠干扰；ANS则有效抑制环境噪声，提升语音清晰度。该算法支持多采样率及多平台，具备低延迟和高兼容性，满足视频会议、语音通话和智能助手等场景需求，极大改善用户通话体验。

该功能实现对语音流中DTMF信号的实时检测与解析，支持多种采样率和编码格式，具备高识别准确率和强抗干扰能力，识别率达到99%以上。通过精准捕捉和解码DTMF信号，满足通信设备对信令控制的严格需求，确保系统稳定可靠运行，有效提升通信系统的智能化水平和交互效率，增强用户体验和业务响应速度，适用于网关、IP电话及其他通信终端设备的广泛应用场景。

多段压缩算法通过将音频信号划分为多个频段，针对性调节各频段动态范围、增益，并且可以自主划分频段，适应不同采样率语音流，提升音质和清晰度，广泛应用于专业音频处理和通信领域，满足高质量音频需求，具有重要研究价值和应用前景。

VALPSOLA语音变调算法能够在不损害语音自然度的前提下，独立调节语速与音调，广泛适用于实时通讯场景。该算法可有效抑制啸叫、实现变调变声功能，提升通话质量与用户体验，同时具备低延迟特性，端到端延迟控制在80ms左右，满足实时交互需求。

压缩器：压缩器是一种音频处理工具，用于减小音频信号的动态范围。它通过降低信号峰值幅度，使弱信号更明显，增强整体声音的一致性和控制感。 扩展器：扩展器与压缩器相反，用于增加音频信号的动态范围。它可以减少背景噪音，使得音轨中的安静部分更加安静，主要用于改善音频清晰度和减少不想要的噪音。 噪声门：噪声门是一款专门设计用来消除背景噪音的效果器。当输入信号低于设定阈值时，噪声门会关闭，阻止任何声音通过，从而有效地消除无声期间的噪音。 门限器：门限器是一种特殊的压缩器，其作用是当信号电平超过或低于某个设定阈值时，对信号进行截断处理，确保输出电平保持在固定的范围内，常用于防止过载和保护音响设备。

实时监控和拍照功能，多个摄像头实现全面的监控记录。 录像回放功能，帮助执法人员方便调监控回放。 支持多格式的录像转码操作，便于信息数据的管理与共享。 登录/注册、摄像头采集画面实时显示、视频播放、存储、回放、截图、图片查看、视频/图片日期查询、系统日志功能。

本停车管理系统功能强大，全面覆盖停车管理各个环节。系统具备稳定网络连接，支持便捷登录注册，实现车辆出入场精准管控。可上传车辆特征图片，录制并存储视频，方便随时查询与播放，确保车辆信息全程可追溯。提供车辆信息查询及导出功能，满足多样化数据需求。实时心跳功能精准更新剩余车位，让车位管理一目了然。系统日志记录功能，详细记录操作流程，保障系统运行安全可靠。全方位满足停车管理需求，为停车场运营提供高效、智能解决方案。

ffmpeg编码，gstreamer取流显示。主要实现小区主要干道监控，小区门口监控，集成实时显示，实时调看某个位置监控。可分权限管理查看。分级展示这些功能。使用到推流媒体，拉流媒体。流媒体服务器维护管理，权限管理。