程序聚合软件案例基于SAM大模型结合U型架构的语义分割算法

基于SAM大模型结合U型架构的语义分割算法

Benjay

2025-04-28 18:31:35

行业：智慧数字孪生

载体：算法模型

技术：Python、PyTorch

业务背景

1.客户原本需要对辖区的建筑、道路、耕地、林地和水体进行面积统计，此前使用遥感卫星图片结合ArcGis进行目视解译，人力和时间成本都很高；
2.客户希望借助AI算法进行语义分割自动识别五类地物进行面积统计。

功能介绍

1.多源异构海量遥感影像样本库：根据已有高分辨率卫星影像及配套地理国情监测、国土调查等业务数据，结合深度学习模型训练样本要求，制作辖区范围内的总计约10万张以上的样本库据；
2.地表覆盖要素智能提取模块：利用深度学习模型，以多源异构海量遥感影像样本库为基础，开发地表覆盖要素智能提取模块。可对覆盖辖区全域的影像进行地表覆盖要素自动提取，主要涉及耕地、林地、水体、建筑物、道路五类土地利用类型；
3.多时相遥感影像变化检测模块：开发多时相遥感影像变化检测模块，在深度学习模型训练的基础上，基于分割对象提取两期影像上的光谱、纹理、上下文特征差异，结合语义特征，提取出两期影像的变化之处，并获得两期影像的变化图斑和对应变化矢量。

项目实现

1.项目周期1年，由我负责算法研发，另外还有项目经理1人，数据标注人员1人；
2.对已标注的大幅遥感影像和标签进行批量裁剪,筛选其中标注质量比较高的影像和标签,再统计各类别数通过直方图进行类别平衡处理;
3.对已筛选好的影像和标签进行旋转、翻折、颜色对比度等处理扩增数据样本;
4.算法模型整体采用U型结构;
5.为匹配SAM的编码器输入，图像处理为1024*1024大小；
6.编码部分由两个并行编码器组成：基于残差结构网络的编码器和基于SAM大模型的编码器；
7.训练中冻结SAM大模型编码器参数；
8.将SAM大模型编码器输出与U型结构Center部分以及残差结构网络编码器输出连接；
9.使用跳跃连接与特征提取网络的多尺度特征进行融合来缓解降采样全局信息丢失的问题;
10.使用注意力机制对输入的多尺度特征进行空间和通道的注意力模块生成特征权重加权到特征图得到最终生成的特征;
11.对多类地物模型推理的概率矩阵加上背景模拟softmax多分类模式，进行同一维度的阈值比较得到概率值最大的矩阵索引即为当前地物的类别；
12.使用多类地物要素结果融合方式后再对二值掩膜图进行形态学处理、连通域查找和规则化处理使得最终结果更接近真实影像结果。

示例图片视频

Benjay

24小时内活跃

方向：人工智能-计算机视觉与图像处理、桌面端-.NET、

交付率：100.00%

查看主页

相似推荐

客服系统

使一线客服能够便利的记录及处理工单, 并能够对学员的历史诉求进行查询。后续又主键完善工单流转审核等功能, 使管理者能够更有效的控制客服对学员诉求的处理效果。有时客服需要在多个系统来回切换进行工作, 因此对部分系统合并提高客服工作效率。

学习记录收集,清洗,统计

使用gin框架完成接口开发, 参考MVC系统架构, 由于是纯接口架构省略 view层, 添加service层, model层用于存放orm 数据表结构体及对数据的增删改查操作(使用gorm操作mysql)的封装作为最基础的封装层, 接口可复用逻辑放入service层用于实现可复用业务逻辑, controller层用于路由指定, 参数解析, 返回结构格式化等接口独有逻辑. 使用nsq及阿里云日志服务进行队列消费, 使用队列用以保证数据能快速上报成功提高并发能力, 后续数据清洗统计等操作使用队列消费完成, 并处理成可用于快速统计的中间表来保证部分统计的相对实时性.

AI教育培训软件-铸星

智能易用，AI赋能搭载DeepSeek、通义千问支持多模型切换，提供多轮对话、模型微调及知识库搭建服务，助力高效学习与工作多种题型支持单多选、判断、填空、问答、文件题、编程题 AI解析用户答题完成后，可以点击查看多维度AI解析内容，帮助巩固内容智能批改客观题自动评分，支持AI批改（一键智能评分），编程题OJ系统评判安全防护多种答题配置防止泄露答案和试题信息答题答卷保护禁止复制、剪切、分享试题内容智能防作弊体系实时异常操作监测（如分屏/切屏），随机抽题+选项乱序杜绝舞弊高持久性的考试存储服务数据保护和快照备份机制多样配置，减负增效丰富的任务类型，随心设定作业/考试：支持题目预览、解析展示、随机组卷（题目/选项随机）、按题赋分或总分设置比赛：自由参赛与任务推送双模式，灵活控制参与方式样式自适应系统可多平台访问，数据同步，支持APP部署高并发设计强大的答题并发负载能力 3万+使用用户案例经验优秀的缓存答题机制采用随机间隔时间自动保存答题数据至缓存，避免数据丢失高效的任务处理方式采用分表设计优化任务处理效率，提升数据访问速度智能题库管理支持单选、多选、编程题等7种题型，可分类管理（如按课程或知识点）。提供题目导入（Word解析）、智能批改、AI解析生成等功能，提升题目管理效率。题目可设置为公开或隐藏，满足不同使用场景。多场景任务管理考试/作业：支持定时发布、随机抽题、选项乱序等防作弊功能。比赛：支持个人赛/团队赛，提供排名统计和结果导出。 AI评卷：调用大模型（如DeepSeek、通义千问）生成评分建议，减少人工批改负担。 AI助手与数据分析基于企业私有知识库的AI问答，支持多模型切换。统计题目正确率、选项分布等数据，为教学改进提供依据。权限与系统管理角色分级（管理员、教师、学生），控制题库、任务等模块的访问权限。日志审计记录关键操作，保障数据安全。

用户中心-尚未写完-别审核

1. 与企业微信双向同步，上万家学校和教育局，支持配置上行和下行同步 2. 高并发读取接口，多级缓存技术 3.分库分表，根据组织和区域，做出数据规划产业互联网教育平台用户中心系统，是专为教育行业打造的权威用户身份认证与管理平台，面向全国范围内的学生、家长、教师及教育局工作人员提供统一身份服务。该系统在疫情期间支撑了爆发式增长的业务需求，已完成面向亿级用户规模的架构升级，具备以下核心能力：海量用户支撑能力采用分布式微服务架构，支持5000万至1亿用户的平滑扩容通过动态负载均衡和弹性伸缩，可应对开学季、健康申报等高峰并发场景多级缓存体系保障高并发下的响应速度，核心接口平均延迟<200ms 健康码智能生成系统支持全国区县教育局自定义健康问卷模板采用边缘计算架构，实现N个区县同时填报时的负载均衡实时数据分析引擎，每分钟可处理百万级健康数据上报智能预警机制，异常数据30秒内触达责任教师教育专属安全体系符合等保2.0三级要求的隐私保护方案师生身份信息多重加密存储基于区块链技术的健康数据存证防刷单、防代填的智能验证机制多端协同能力全平台覆盖：支持教育局PC管理端、学校移动端、家长微信小程序等多终端接入统一消息中心：重要通知可30分钟内触达千万级用户智能填报助手：自动记忆常用信息，家长填报效率提升60% 该平台已在全国28个省级行政区、3000余所学校落地应用，日均处理健康申报数据超2亿条，为教育系统疫情防控提供了坚实的技术支撑。系统设计遵循"平战结合"理念，既满足应急状态下的高并发需求，又为常态化教育管理提供数字化基座。

toB在线学习平台-深溪学堂

1、直播、录播、清晰度、倍速切换、跑马灯、水印等功能。 2、在线考试、测评、问卷调查等功能。 3、查看、导出PDF测评报告等功能。 4、实时聊天、上传文件等功能。 5、班级、课程定位打卡考勤等功能。 6、视频记忆播放、防挂机重播等功能。