程序聚合 软件案例 日东新能源mom项目(数据采集部分)

日东新能源mom项目(数据采集部分)

2026-04-04 13:19:45
行业:物联网
载体:网站、云服务/云平台
技术:Rust、Redis、MQTT

业务和功能介绍

1.负责设计并实现高并发工业设备数据采集层,构建从边缘层到应用层的实时数据管道。
2.系统需要支撑生产环境下7×24小时不间断采集,处理多源异构设备(PLC、智能磅秤、传感器阵列)的数据接入。
3. 峰值吞吐量达 10,000+ 消息/秒,端到端延迟控制在 50ms 以内。

项目实现

一,边缘数据采集层
1.采用 Rust 语言重构原有 Python 采集服务,利用其零成本抽象和内存安全特性,将运行时内存占用降低 82%,CPU 使用率减少 65%,彻底消除 GC 停顿导致的采集延迟抖动。
2. 基于 tokio 运行时构建多线程异步架构,实现 10,000+ 并发连接的设备接入能力。采用 tokio::sync::mpsc 实现无锁队列,配合背压(Backpressure)机制防止内存溢出。
二,协议解析引擎
针对工业磅秤自定义串口协议(RS-485),实现状态机驱动的字节流解析器,处理粘包、半包、乱序等边界情况
三,消息总线与数据管道
1. 部署 EMQX 集群作为设备接入层,设计多级 Topic 命名空间,利用 MQTT 5.0 的 Shared Subscription 实现采集服务的负载均衡与故障转移。
2. 使用 Redis Stream 作为高吞吐消息队列(而非简单的 Pub/Sub),利用消费者组(Consumer Group)实现采集端的水平扩展与断点续传。
四,实时数据推送层(WebSocket + 协议优化)
基于 tokio-tungstenite 构建 WebSocket 网关,采用二进制协议(MessagePack)替代 JSON,减少 60% 传输体积。

示例图片视频


Ryan
30天前活跃
方向: 后端-Rust、后端-C#、
交付率:100.00%
相似推荐
印刷报价系统
当前中小印刷企业及商户普遍依赖人工核算报价,存在报价效率低、误差大、标准不统一等问题,且新人上手难、客户流失率高,业务与客户数据缺乏数字化管理,难以支撑企业精细化经营。为解决行业报价痛点,特立项开发印刷报价系统。 项目旨在搭建标准化智能报价体系,支持参数配置、智能报价、单据及客户管理、数据统计与权限管控,可实现快速精准报价、数据统一留存。有效提升业务办理效率,规范经营流程,为企业成本管控和业务优化提供数字化支撑。
通用公开数据采集系统-支持多平台合规数据爬取与自动化导出
针对企业手动采集公开数据效率低、易出错的痛点,开发了这套通用合规数据采集系统。核心功能包括静态网页数据自动抓取、数据清洗去重、Excel/CSV结构化导出、批量任务调度与实时进度显示。系统全程遵守robots协议与网站访问频率限制,采用Python+Requests实现稳定请求,确保合规爬取公开数据,无需客户额外配置环境即可运行。
电商平台web、app、小程序-石联网
石联网是全球最大石材行业国际性电子商务平台;由主站、会员站、手机站 、手机 app 、微信小程序、会员中心、后台管理构成,采用微服务模块化架构设计,运用新的.net core、webapi、efcode、await/async、多线程、rabbitmq、quartz.net、elasticsearch、redis、git、jenkins和devops 持续集成和自动化部署、ids 4身份认证、sqlserver 、vue/element-ui、Html5、js、css等技术
旅行社订单管理后台-启游星saas系统
产品模块:酒店/包房,机票/切位,门票,一日游,跟团游,打包产品。 订单模块:对接OTA,代下单,订单确认,收款,申请付款,发票 财务:对账,收付款,佣金,结账,发票(可接电子发票)银行日记账。 报表:收益报表,客户报表,业绩报表等。
通通秘境
该项目是一个以「秘境探索」为主题的互动H5平台,用户通过完成探索任务同时搭配地图玩法获得秘宝等虚拟资产,可进行探索、转赠、兑换、商城消费,并配合团队、排行榜、订单、商学院、活动、渠道商等完整闭环。
帮助文档   Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服