程序聚合软件案例基于大模型的多模态检索-阿里云

基于大模型的多模态检索-阿里云

2025-12-07 23:42:28

行业：企业服务(saas)、搜索

载体：云服务/云平台

技术：ONNX Runtime、OpenCV、PyTorch、Transformers

业务和功能介绍

改进传统基于实体检测和协同过滤的短视频推荐方式，转为利用多模态 ai 技术的推荐方式，解决原有推荐方式缺乏语义理解的缺点。自动生成视频描述和视频推荐标签，降低用户使用难度
功能：
1. 利用多模态召回以及倒排索引检索视频
2.实现对视频内容理解并回答问题

项目实现

1. 主导 Clip 预训练框架设计（ViVit + Bert），通过对比学习实现视频关键帧与描述的语义对齐，在 8 卡 4000+GPU 小时算力下完成 3000 万+ tokens 训练，语义匹配度提升30%，为推荐系统提供高精度特征提取基础。2. 微调 Blip 模型生成视频描述，用户生成描述认可率从 65%提升至 80%（+15%），显著降低用户生产内容门槛。3. 构建 Query2Label 多标签分类 post trtraining 流程，优化多标签生成逻辑，实现推荐标签召回率 0.76（较传统协同过滤提升 22%），支撑精准内容分发。4. 部署端到端模型服务至阿里云，支持视频描述与推荐标签动态生成。

示例图片视频

头秃中

30天前活跃

方向：人工智能-NLP和自然语言处理、人工智能-计算机视觉与图像处理、

交付率：100.00%

查看主页

相似推荐

猫咪民宿网站

面向猫咪寄宿业务的预订与管理系统原型，项目名称为 CatInn 貓酒店管理系統。系统以繁体中文为主，覆盖前台预订流程与后台管理场景，支持房型选择、猫咪资料上传、附加服务、接送服务、联络资料填写、确认预订与预订单生成等核心功能。整体定位是高还原度业务原型，强调暖黄色猫咪主题视觉、平板与桌面端兼容，以及贴近实际门店运营的使用流程。

个人学习向关于ai的能力扩展-无

允许ai读取桌面内容，使用键盘和点击，打开外部文件和直接开启url。可以接入游戏minecraft进行简单的活动。支持长期记忆和记忆的管理，删减，删除某一用户的全部记忆等等，可以连接live2d，理论上可实现模型控制（因为没做完）。

基于大模型的自动化渗透系统-全智渗透

产品定位：智能渗透测试系统是一款基于大语言模型的自动化安全测试工具，帮助用户快速发现目标系统的安全漏洞。核心功能： 1. AI智能探测：用户输入目标地址（IP或域名），系统自动规划并执行渗透测试流程，无需手动编写命令 2. 实时交互：类似聊天的Web界面，实时显示AI决策过程、命令执行结果和任务进度 3. 多LLM支持：支持OpenAI、阿里千问、DeepSeek、豆包、智谱等主流AI模型，灵活切换 4. 人机协作：支持AI自主模式和人工干预模式，用户可中途介入控制测试方向 5. 自动报告：测试完成后自动生成HTML格式报告，包含漏洞详情和修复建议 6. 对话管理：支持多会话管理、上下文记忆和历史记录保存

优惠快递-优惠快递

智能快递比价：接入多家快递/同城配送，用户下单时自动比价，自由选择高性价比服务。生活服务CPS：整合外卖、票务等生活类CPS接口，赚取多平台返佣。自动化利润优化：集成多API实现智能比价与自动下单，最大化每单收益。多主题UI切换：内置多套视觉风格，一键换肤，适配不同运营场景。三级分销系统：支持团队裂变推广，快速扩大用户规模，收益即时结算。零成本API资源：提供现成API接口注册渠道，无需额外采购或开发。自动分账提现：分佣自动到账，用户可自助提现，对接支付宝/微信自动打款接口。超低费率通道：集成0.2%微信服务商通道，并支持多通道自由注册。智能轨迹与地址识别：集成快速物流查询及地址AI解析（可选用API或AI通道），精准提取姓名、电话、地址信息。小程序推广工具：生成带参推荐二维码，支持小程序APPID接入小窗广告推广。深度定制服务：支持UI与功能模块定制，打造完全属于您自己的独特小程序。

多商户商城-镖师养车

1、项目主体为app、小程序客户端，PC后台，商户端app,围绕畜牧服务聚合周边商户入驻。 2、通过商户入驻给商户分配微信、支付宝子商户号。 3、项目实现入驻商户在线app、小程序支付、线下主扫、被扫支付，支付完成后微信、支付宝的分账。