程序聚合 软件案例 基于SAM大模型结合U型架构的语义分割算法

基于SAM大模型结合U型架构的语义分割算法

行业:智慧数字孪生
载体:算法模型
技术:Python、PyTorch

业务和功能介绍

1.客户原本需要对辖区的建筑、道路、耕地、林地和水体进行面积统计,此前使用遥感卫星图片结合ArcGis进行目视解译,人力和时间成本都很高;
2.客户希望借助AI算法进行语义分割自动识别五类地物进行面积统计。
1.多源异构海量遥感影像样本库:根据已有高分辨率卫星影像及配套地理国情监测、国土调查等业务数据,结合深度学习模型训练样本要求,制作辖区范围内的总计约10万张以上的样本库据;
2.地表覆盖要素智能提取模块:利用深度学习模型,以多源异构海量遥感影像样本库为基础,开发地表覆盖要素智能提取模块。可对覆盖辖区全域的影像进行地表覆盖要素自动提取,主要涉及耕地、林地、水体、建筑物、道路五类土地利用类型;
3.多时相遥感影像变化检测模块:开发多时相遥感影像变化检测模块,在深度学习模型训练的基础上,基于分割对象提取两期影像上的光谱、纹理、上下文特征差异,结合语义特征,提取出两期影像的变化之处,并获得两期影像的变化图斑和对应变化矢量。

项目实现

1.项目周期1年,由我负责算法研发,另外还有项目经理1人,数据标注人员1人;
2.对已标注的大幅遥感影像和标签进行批量裁剪,筛选其中标注质量比较高的影像和标签,再统计各类别数通过直方图进行类别平衡处理;
3.对已筛选好的影像和标签进行旋转、翻折、颜色对比度等处理扩增数据样本;
4.算法模型整体采用U型结构;
5.为匹配SAM的编码器输入,图像处理为1024*1024大小;
6.编码部分由两个并行编码器组成:基于残差结构网络的编码器和基于SAM大模型的编码器;
7.训练中冻结SAM大模型编码器参数;
8.将SAM大模型编码器输出与U型结构Center部分以及残差结构网络编码器输出连接;
9.使用跳跃连接与特征提取网络的多尺度特征进行融合来缓解降采样全局信息丢失的问题;
10.使用注意力机制对输入的多尺度特征进行空间和通道的注意力模块生成特征权重加权到特征图得到最终生成的特征;
11.对多类地物模型推理的概率矩阵加上背景模拟softmax多分类模式,进行同一维度的阈值比较得到概率值最大的矩阵索引即为当前地物的类别;
12.使用多类地物要素结果融合方式后再对二值掩膜图进行形态学处理、连通域查找和规则化处理使得最终结果更接近真实影像结果。





示例图片视频


武汉熵玥智能科技有限公司
30天前活跃
交付率:100.00%
相似推荐
在线教育平台压力测试
本次在线教育平台压力测试,模拟高并发上课、直播授课、多人打卡及作业提交等场景。检测系统承载能力、响应速度与稳定性,排查卡顿、闪退、接口超时问题,优化资源配置,保障高峰时段教学服务平稳运行。
答题卡识别评分
一套基于计算机视觉和深度学习的答题卡自动评分系统,实现降低阅卷成本,无需专用设备;提高阅卷效率,实现自动识别和即时评分;支持灵活的答题卡格式;提供完整的成绩管理和统计分析功能。 用户管理模块支持管理员、教师、学生三种角色,采用JWT认证登录。答题卡识别模块可以上传答题卡图片,自动识别学号、选择题答案和主观题区域。自动评分模块实现选择题自动比对答案并计分,主观题提取作答区域供人工批阅。成绩管理模块提供成绩录入、查询、修改和删除功能。试卷管理模块支持创建试卷、设置标准答案和管理试卷状态。统计分析模块提供成绩分布、及格率、平均分等统计报表。答题卡生成模块可以根据试卷信息生成标准答题卡模板。 答题卡识别评分流程: 首先用户上传答题卡图片,系统对图像进行预处理,包括灰度转换和二值化。然后通过投影切割算法定位题目区域。接下来并行处理三个任务:使用CNN模型识别学号,通过区域比对识别选择题答案,以及提取主观题作答区域。选择题部分自动比对标准答案并计分,主观题部分提取的区域供教师人工批阅。最后将所有成绩汇总并存储到数据库。
弈路千年围棋知识对弈多平台科普小程序-弈路千年
业务和功能介绍 立项背景与目标 围棋作为国家级非物质文化遗产,承载着东方哲学与战略智慧,但当前传统传播形式单一,年轻受众参与门槛高,线上平台也多偏向硬核竞技或娱乐化,缺乏兼顾文化科普、互动对弈与社区交流的综合性服务载体。基于此痛点,本项目打造「弈路千年」围棋文化爱好者交流科普平台,旨在构建集文化科普、在线对弈、教学学习、社区互动于一体的非遗活化生态:一方面以轻量化、趣味化的形式拆解围棋千年文化,降低传统棋艺的学习门槛;另一方面为围棋爱好者搭建多端适配的交流阵地,实现文化传承、棋艺提升与用户社交的双向赋能,助力围棋文化的年轻化传播与可持续发展。 核心功能模块 围棋文化科普模块:涵盖围棋历史溯源、规则讲解、棋具介绍、名家棋事、经典棋局解析等内容,搭配IP形象「弈心」的引导式讲解,以图文、互动流程图等形式呈现,让用户沉浸式了解围棋文化内涵。 在线对弈互动模块:提供人机对弈、人人对弈多种模式,支持实时棋盘交互、AI辅助分析与对局记录保存,适配不同水平用户的对弈需求,还原真实围棋对局体验。 教学与学习模块:整合分级教学视频、经典棋谱资料、实战技巧解析,为用户提供系统的围棋学习路径,帮助用户从入门到进阶逐步提升棋力。 棋友社区交流模块:搭建棋友论坛、对局分享、兴趣群组功能,用户可交流心得、分享棋局、组队约战,构建围棋爱好者的专属交流阵地。 多端适配模块:支持小程序、网站/PC端、Pad端多端访问,实现用户数据、对局记录的跨端同步,适配不同场景的使用需求。 业务流程路径 用户进入平台后,可通过首页推荐快速触达围棋科普内容,或进入教学模块开启系统学习;也可直接进入对弈模块,选择人机/人人对局进行实战练习;对局后可将棋谱分享至社区交流心得,或在论坛与棋友互动、参与话题讨论、约战组队;平台通过内容运营与社区互动沉淀用户,形成「文化认知-学习提升-对弈实践-社区交流」的完整链路闭环,助力围棋文化传播与用户粘性提升。
easyjob-刷题App
1. 项目概述 EasyJob 是一个集刷题备考、经验分享、社区互动于一体的综合性学习与考试服务平台。系统采用前后端分离架构,分为管理后台(Admin)和用户移动端/Web端(API),旨在为用户提供高效的题库练习体验及知识共享社区,同时为管理员提供完善的内容管理与数据统计能力。 2. 核心业务模块 用户端 (C端) 面向普通用户,提供轻量级、流畅的学习与社交体验。 账号体系:支持邮箱注册、登录、自动登录及图形验证码校验,保障账户安全。 智能刷题: 分类浏览:支持按类别查看题目和模拟考试。 在线考试:创建试卷、计时答题、自动判分、查看错题解析。 错题本:自动记录答错题目,支持专项复习。 收藏功能:用户可收藏题目、分享文章或试卷,支持“上一题/下一题”快速切换浏览。 知识分享社区: 用户可以发布经验分享文章,支持富文本内容。 支持点赞、收藏及查看评论/回复。 搜索中心: 支持对题目、试卷、分享内容进行关键字模糊搜索。 个人中心: 头像上传与信息修改。 my 查看我的收藏、我的考试记录、错题回顾。 意见反馈:用户可提交反馈并与管理员互动。 版本更新:客户端自动检测最新版本,支持增量或全量安装包下载。 管理后台 (B端) 面向运营人员和管理员,提供全方位的数据管控。 数据看板:首页展示注册用户数、日活、内容发布量等关键指标的周统计趋势。 题库管理: 支持单题录入与 Excel 批量导入题目。 题目审核、上下架、删除及批量操作。 支持单选题、多选题、判断题等多种题型。 内容管理: 轮播图配置:自定义首页轮播图内容及排序。 分享管理:审核或删除用户发布的分享文章。 分类管理:维护题目和分享的分类体系。 用户与权限管理: 用户管理:查看用户列表、禁用/启用违规账号、查看设备信息。 角色权限:基于 RBAC 模型,配置角色菜单权限,支持超级管理员保护机制。 账号管理:新增后台管理员账号、重置密码。 反馈处理:查看用户反馈并进行官方回复。 APP发布管理:上传新版本 APK/IPA,设置灰度发布设备ID,控制版本强制更新策略。
终端公司中屏项目-中屏物联网
针对中国移动(运营商)背景下的“中屏项目” 1. 立项背景 (Background) 市场存量竞争: 传统的宽带业务增长趋缓,运营商需要从“卖带宽”向“卖服务/卖硬件”转型,提升 ARPU(每用户平均收入)。 家庭场景补位: 电视屏(大屏)主要在客厅,手机(小屏)具有私密性。在厨房、书房、床头等场景需要一个**“轻量级、免安装、强交互”**的第三屏。 智慧家庭战略: 作为中国移动“全家享”或“移动爱家”战略的重要落地载体,中屏是控制智能家居、宽带测速及办理增值业务的物理入口。 产品替代效应: 整合“智能音箱 + 网络电视 + 视频电话 + 智能网关控制台”于一体,降低用户购买多个单体设备的成本。 2. 项目目标 业务目标: 绑定宽带合约,提升用户黏性(Churn reduction),通过内置应用带动移动视频、音乐等权益销售。 产品目标: 打造一款具备“运营商特色”的智能硬件,实现开机即看(直播/点播)、一键触达服务。 技术目标: 构建基于 Android/HarmonyOS 的定制化系统,支持语音远场交互及远程运维管理。 3. 软件功能与核心功能 (Functions) 核心功能 (Core Features) 定制化 IPTV 直播/点播: 内置移动视频专区,支持频道直播(卫视/央视)和高清电影大片。 宽带助手/网关管理: 实时显示当前宽带网速、连接设备数、一键排障、一键修改 Wi-Fi 密码。 全家互通交互: 支持与手机端、电视屏(魔百和)进行视频通话(和家亲应用集成)。 智能音箱模式: 息屏状态下作为智能语音助手,查询天气、播放新闻、控制全屋智能家电。 业务自助办理: 屏幕集成话费查询、流量订购、宽带续费等 10086 快捷入口。 数字相册: 闲时循环播放家庭云盘(和彩云)中的照片。 4. 业务流程 (Business Workflow) A. 销售与开通流程 合约绑定: 用户在营业厅或通过上门装维人员办理“宽带+硬件”融合套餐。 账号激活: 设备首次开机,通过宽带账号/手机号自动下发配置(Zero-Touch Provisioning)。 权限下发: 系统自动激活内置的移动视频 VIP 权益及相关语音通话功能。 B. 日常使用业务流 语音/触控唤醒: 用户通过“你好,小移”或点击屏幕进入主界面。 内容分发流: * 娱乐流: 点击视频 -> CDN 加速 -> 高清播放。
帮助文档   Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服