程序聚合 软件案例 根据特定关键词抓取图片,并进行图片清洗

根据特定关键词抓取图片,并进行图片清洗

2026-04-11 19:43:52
行业:人工智能
载体:爬虫/脚本
技术:Python

业务和功能介绍

根据给定的几个关键词,从网络上抓取不少于1000张图片,且图片大小符合特定尺寸,抓取后对所有图片进行去重,计算清晰度并排序,接着将每张图片的大小都缩放到特定尺寸,并按照特定规则命名,打包即可

项目实现

icrawler: 核心爬取引擎
opencv-python & pillow: 图片处理 (尺寸、格式等)
imgdd: 高性能图片去重
cleanvision: 自动检测模糊、曝光异常等质量问题
pandas: 用于管理去重和检测后的文件清单

完整性检测:尝试用 OpenCV 读取图片,任何读取失败的都被视为损坏文件,立即删除。
格式与尺寸统一:
对于能够打开的图片,使用 Pillow 将其转换为 RGB 三通道的 JPG 格式。
缩放处理:保持原图比例,将长边统一缩放至特定尺寸。
对所有图片进行哈希比对,识别并删除内容完全相同或高度相似的图片。
图片模糊检测 (使用 cleanvision):利用 cleanvision 的 find_issues() 功能扫描所有图片,它会返回一个包含 "blurry", "dark", "low_information" 等标签的报告。

示例图片视频


NightShadow
24小时内活跃
方向: 爬虫/脚本-爬虫/脚本、
交付率:100.00%
相似推荐
售后服务管理系统
本套售后管理系统,是深度贴合制造业一线业务场景的轻量化协同工具。它无需推翻企业现有管理体系,不依赖高额定制开发,无缝衔接金蝶ERP,精准填补现场业务与后端管理系统的衔接空白,用最小成本实现售后管理数字化升级。 系统适用对象覆盖全生态售后相关角色,包括企业售后部全体人员、销售人员、授权经销商及合作电工,不同角色配备专属操作入口与功能权限,操作简单易上手,无需复杂培训即可快速落地使用。 在登录方式上,系统采用双端适配模式:内部售后、销售人员通过企业微信工作台登录,实现PC+移动端协同办公;外部经销商、合作电工通过微信小程序登录,扫码即用、无需安装额外软件,真正做到随时随地办业务,一键操作提效率。
内部AI问答平台
系统集成 AI 知识助手、多模态助手、企业知识库三大核心能力,支持仪表板快速生成、拖拽式大屏搭建、智能报告生成与剧本化编辑,并提供 AI 机器人聊天及自定义指标配置,打造覆盖智能交互、数据分析与可视化应用的全链路企业级平台。
证券H5积分商城系统
作为前端核心开发,我的任务是主导积分商城的前端架构设计,并独立负责商品展示、积分兑换、订单管理等核心模块的开发。关键目标是打造一个稳定、流畅且用户体验良好的H5应用,并确保与券商APP原生环境无缝集成。
批量数据处理与自动化运维脚本开发
本项目为批量数据处理与自动化运维脚本工具,旨在解决企业日常工作中大量重复的数据处理、运维操作问题,通过 Python 自动化脚本,实现数据采集、批量导出、定时任务、日志监控等功能。工具核心功能包括:1. 多源数据采集,支持 Excel/CSV/ 数据库等多格式数据自动提取;2. 批量数据处理,支持数据清洗、格式转换、报表生成;3. 自动化运维,支持定时任务、服务器监控、日志分析;4. 可视化配置,用户可通过简单配置实现自定义自动化流程,无需代码。工具可广泛应用于财务、行政、运维等多个岗位,大幅提升工作效率,减少人工错误。
AI 多 Agent 自动化办公系统开发
本项目为 AI 多 Agent 自动化办公系统,旨在解决企业日常办公中重复、繁琐的流程化工作,通过大模型驱动的多智能体协同,实现文档处理、智能问答、流程自动化等核心功能。系统核心模块包括:1. 智能文档解析 Agent,支持 PDF/Word/Excel 等多格式文件自动提取关键信息、生成摘要;2. 流程自动化 Agent,可自定义工作流,自动执行数据录入、报表生成等任务;3. 智能问答 Agent,基于企业私有知识库,提供精准的业务咨询服务。用户可通过可视化界面快速配置 Agent,无需代码即可搭建专属自动化办公系统,大幅提升办公效率,降低人力成本。
帮助文档   Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服