程序聚合 软件案例 基于SAM大模型结合U型架构的语义分割算法

基于SAM大模型结合U型架构的语义分割算法

行业:智慧数字孪生
载体:算法模型
技术:Python、PyTorch

业务和功能介绍

1.客户原本需要对辖区的建筑、道路、耕地、林地和水体进行面积统计,此前使用遥感卫星图片结合ArcGis进行目视解译,人力和时间成本都很高;
2.客户希望借助AI算法进行语义分割自动识别五类地物进行面积统计。
1.多源异构海量遥感影像样本库:根据已有高分辨率卫星影像及配套地理国情监测、国土调查等业务数据,结合深度学习模型训练样本要求,制作辖区范围内的总计约10万张以上的样本库据;
2.地表覆盖要素智能提取模块:利用深度学习模型,以多源异构海量遥感影像样本库为基础,开发地表覆盖要素智能提取模块。可对覆盖辖区全域的影像进行地表覆盖要素自动提取,主要涉及耕地、林地、水体、建筑物、道路五类土地利用类型;
3.多时相遥感影像变化检测模块:开发多时相遥感影像变化检测模块,在深度学习模型训练的基础上,基于分割对象提取两期影像上的光谱、纹理、上下文特征差异,结合语义特征,提取出两期影像的变化之处,并获得两期影像的变化图斑和对应变化矢量。

项目实现

1.项目周期1年,由我负责算法研发,另外还有项目经理1人,数据标注人员1人;
2.对已标注的大幅遥感影像和标签进行批量裁剪,筛选其中标注质量比较高的影像和标签,再统计各类别数通过直方图进行类别平衡处理;
3.对已筛选好的影像和标签进行旋转、翻折、颜色对比度等处理扩增数据样本;
4.算法模型整体采用U型结构;
5.为匹配SAM的编码器输入,图像处理为1024*1024大小;
6.编码部分由两个并行编码器组成:基于残差结构网络的编码器和基于SAM大模型的编码器;
7.训练中冻结SAM大模型编码器参数;
8.将SAM大模型编码器输出与U型结构Center部分以及残差结构网络编码器输出连接;
9.使用跳跃连接与特征提取网络的多尺度特征进行融合来缓解降采样全局信息丢失的问题;
10.使用注意力机制对输入的多尺度特征进行空间和通道的注意力模块生成特征权重加权到特征图得到最终生成的特征;
11.对多类地物模型推理的概率矩阵加上背景模拟softmax多分类模式,进行同一维度的阈值比较得到概率值最大的矩阵索引即为当前地物的类别;
12.使用多类地物要素结果融合方式后再对二值掩膜图进行形态学处理、连通域查找和规则化处理使得最终结果更接近真实影像结果。





示例图片视频


武汉熵玥智能科技有限公司
30天前活跃
交付率:100.00%
相似推荐
终端公司中屏项目-中屏物联网
针对中国移动(运营商)背景下的“中屏项目” 1. 立项背景 (Background) 市场存量竞争: 传统的宽带业务增长趋缓,运营商需要从“卖带宽”向“卖服务/卖硬件”转型,提升 ARPU(每用户平均收入)。 家庭场景补位: 电视屏(大屏)主要在客厅,手机(小屏)具有私密性。在厨房、书房、床头等场景需要一个**“轻量级、免安装、强交互”**的第三屏。 智慧家庭战略: 作为中国移动“全家享”或“移动爱家”战略的重要落地载体,中屏是控制智能家居、宽带测速及办理增值业务的物理入口。 产品替代效应: 整合“智能音箱 + 网络电视 + 视频电话 + 智能网关控制台”于一体,降低用户购买多个单体设备的成本。 2. 项目目标 业务目标: 绑定宽带合约,提升用户黏性(Churn reduction),通过内置应用带动移动视频、音乐等权益销售。 产品目标: 打造一款具备“运营商特色”的智能硬件,实现开机即看(直播/点播)、一键触达服务。 技术目标: 构建基于 Android/HarmonyOS 的定制化系统,支持语音远场交互及远程运维管理。 3. 软件功能与核心功能 (Functions) 核心功能 (Core Features) 定制化 IPTV 直播/点播: 内置移动视频专区,支持频道直播(卫视/央视)和高清电影大片。 宽带助手/网关管理: 实时显示当前宽带网速、连接设备数、一键排障、一键修改 Wi-Fi 密码。 全家互通交互: 支持与手机端、电视屏(魔百和)进行视频通话(和家亲应用集成)。 智能音箱模式: 息屏状态下作为智能语音助手,查询天气、播放新闻、控制全屋智能家电。 业务自助办理: 屏幕集成话费查询、流量订购、宽带续费等 10086 快捷入口。 数字相册: 闲时循环播放家庭云盘(和彩云)中的照片。 4. 业务流程 (Business Workflow) A. 销售与开通流程 合约绑定: 用户在营业厅或通过上门装维人员办理“宽带+硬件”融合套餐。 账号激活: 设备首次开机,通过宽带账号/手机号自动下发配置(Zero-Touch Provisioning)。 权限下发: 系统自动激活内置的移动视频 VIP 权益及相关语音通话功能。 B. 日常使用业务流 语音/触控唤醒: 用户通过“你好,小移”或点击屏幕进入主界面。 内容分发流: * 娱乐流: 点击视频 -> CDN 加速 -> 高清播放。
在线教育平台包括普通话测评、云认证(在线考试)等多个模块
软件主要功能,在线教育平台。教师上传课程内容,可供课上授课、课下布置作业以及在线考试等功能。 核心功能模块包括: 幼乐美官网:幼乐美官方网站,展示公司情况等内容 学习云平台:作为主入口,教师上传一些文件、图片、视频等内容,进行课堂展示授课 学习云管理端:对学习云的整个内容的权限设置,包括账号权限以及模块展示权限等 投屏:学习云上传的内容,教师可以通过投屏展示在课堂上得大屏幕中,并且可以通过操作学习云app实现大屏幕展示的内容切换等 云考试:学生通过云考试平台进行考试,同时教师可以在此端进行对学生考试情况的批阅 云认证:学生通过此平台进行练习并考试,教师可以对学生的考试情况进行批阅,教师对学生的试卷进行编辑 云仿真:负责展示VR教学内容 普通话:学生通过此平台练习测评普通话等级 早期幼儿教育大赛:对早教相关专业的学生进行考试
在线教育(学习云)-普通话测评、早教考试、云考试、720场景、可视化数据
软件主要功能,在线教育平台。教师上传课程内容,可供课上授课、课下布置作业以及在线考试等功能。 核心功能模块包括: 学习云平台:作为主入口,教师上传一些文件、图片、视频等内容,进行课堂展示授课 学习云管理端:对学习云的整个内容的权限设置,包括账号权限以及模块展示权限等 投屏:学习云上传的内容,教师可以通过投屏展示在课堂上得大屏幕中,并且可以通过操作学习云app实现大屏幕展示的内容切换等 云考试:学生通过云考试平台进行考试,同时教师可以在此端进行对学生考试情况的批阅 云认证:学生通过此平台进行练习并考试,教师可以对学生的考试情况进行批阅,教师对学生的试卷进行编辑 普通话:学生通过此平台练习测评普通话等级 早期幼儿教育大赛:对早教相关专业的学生进行考试 720全景预览:对720全景图添加锚点,可以进行场景跳转。
Live Edu Online - 国际在线教育平台
Live Edu Online 是一个面向国际市场的在线教育平台,提供完整的在线教育解决方案。平台支持多种课程类型(录播课程、直播课程、1对1辅导、专题讲座),具备完善的社区论坛、会员体系、积分系统和学习进度跟踪功能。 核心特点 🌍 国际化支持:完整的中英文双语界面 📚 多元化课程:支持录播、直播、1对1等多种教学模式 💬 社区论坛:师生互动,话题讨论,知识分享 🎁 会员体系:多层级会员权益,积分兑换系统 📊 学习分析:详细的学习进度跟踪和数据分析 🔐 权限管理:完善的用户权限和课程访问控制 🎨 现代化UI:基于 Tailwind CSS 的响应式设计
智慧校园服务平台-教室借用申请系统
1、立项背景和目标 某高校教务处希望优化教室借用申请流程。传统纸质申请方式效率低、进度不透明,学生需要多次跑腿,老师审批不便。目标是开发一个移动端系统,让学生随时随地提交申请,老师在线审批,同时保留完整的申请记录便于追溯。 2、软件功能、核心功能模块的介绍 系统分为三个角色: - 学生端:注册登录、新建教室借用申请、提交审批、撤回草稿申请、查看处理进度、查看已通过申请详情 - 老师端:注册登录、查看待处理申请、开始处理、审核通过、打回申请 - 管理员端:预设账号登录、删除任何状态的申请 申请状态支持完整流转:草稿 → 已提交 → 处理中 → 已通过/已退回。每次状态变更自动记录操作人和时间,非法状态转换会被拦截并返回409错误。 3、业务流程、功能路径描述 学生登录后进入首页,点击"新建申请"填写借用日期、时间段、教室类型、用途、预计人数等信息,创建成功后申请出现在"草稿申请"列表中。学生点击"提交申请"后,申请状态变为"已提交",移动到老师的"待处理申请"列表。 老师登录后看到待处理申请,点击"开始处理"后状态变为"处理中"。老师可以选择"审核通过"让申请变为"已通过",或选择"打回"让申请退回给学生重新修改。所有操作都会自动生成处理记录,学生可以随时查看。 已通过申请支持折叠展示,点击可展开查看完整信息和处理记录,界面简洁高效。
帮助文档   Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服