程聚宝
程序员
软件外包公司
项目案例
发布需求
人才入驻
登录
注册
原"程序聚合"
工作台
程序员
软件开发公司
软件案例
发布需求
开发者入驻
帮助文档
小程序
登录
注册
原“程序聚合”
程序聚合
软件案例
通用网页数据采集爬虫程序
通用网页数据采集爬虫程序
时冯
2026-07-29 22:21:18
行业:
工业互联网
载体:
Windows应用
技术:
Python
业务和功能介绍
项目目标为解决企业、个人重复复制网页公开数据的低效问题。系统支持自定义目标网页,自动批量提取文本、表格、链接等公开页面信息;内置频率限制功能,规避高频访问风险;采集结果可直接导出Excel文件。适用于行情数据、商品信息、公开资讯批量收集场景
项目实现
基于Python开发,使用请求库实现页面访问,解析库完成网页内容提取。独立设计任务队列,支持多任务排队执行。开发中重点解决动态网页加载、页面结构多变适配两大难点,通过通用解析模板降低修改成本,交付后可快速适配不同网站采集需求。
示例图片视频
时冯
1天前活跃
方向: 爬虫/脚本-爬虫/脚本、游戏开发-游戏开发其他、
交付率:100.00%
查看主页
相似推荐
Python CSV/XLSX 表格自动化清洗工具
这是一个自主开发的表格数据清洗演示项目,面向需要重复整理 Excel、CSV 文件的办公场景。工具支持清除文本首尾空格、删除空白行、按照用户指定的列去除重复记录,并将处理结果保存为新文件,避免覆盖原始数据。用户通过命令行指定源文件、去重列和输出位置即可运行,适合客户名单、商品资料、订单记录等结构化表格的批量预处理。当前支持 CSV 和 XLSX 格式,后续可根据具体需求增加字段转换、表格合并和异常数据标记等规则。
人工智能单目标跟踪的移动端部署-人工智能钢管检测系统
本项目属于职务型作品,由本人历时三年独立完成。本作品主要解决油田物资系统油田管材的人工计数繁琐问题,采用分层模块化双线程架构,通过FFmpeg视频解码、MNN端侧模型推理、自研优化ByteTrack跟踪算法,实现视频目标检测、轨迹跟踪与精准去重计数功能。系统创新设计帧队列时序制衡机制,解决了双线程速率失衡、视频播放时序紊乱、跟踪ID跳变、计数不准等行业工程难题,具备低功耗、高稳定、时序精准的落地优势,适配移动端长短时间视频智能分析场景。
股票链
为了使用神经网络进行高效的股票分析与预测,我自主研发了这套从股票数据的获取、清洗、到模型训练与预测的项目。 除了被模块化的神经网络的结构设计有问题,致使训练越来越糟,以至于最终放弃,其它部分均已达到最终设计目标。
宠物社区
一套面向宠物医疗服务场景的多端业务系统,覆盖用户端 App、医生端工作台、运营管理后台和后端服务。用户端主要提供宠物健康管理、AI 问诊、在线咨询、医院医生查询、商城购物、二手商品发布、优惠券、社区互动、走失招领、公益活动、好友聊天、附近的人、通知消息等功能;医生端围绕在线问诊场景,支持医生查看咨询订单、进入会话、查看用户及宠物信息、维护在线状态和收入统计;管理后台负责平台运营,包括医院、医生、用户、宠物、商品、订单、AI 问诊、自查表、健康知识、急救指南、公益活动、社区审核、好友数据、系统配置、物流、审计日志等模块。整体上,它不是单一工具型应用,而是一个围绕“宠物健康 + 医疗咨询 + 内容社区 + 电商服务”的综合平台。 核心模块可以分为六类。第一类是医疗健康模块,包括宠物档案、健康统计、护理计划、AI 问诊、自查表、问诊报告、医生咨询和医疗服务订单,负责承接用户最核心的宠物医疗需求。第二类是商城交易模块,包括商品分类、商品详情、SKU 规格、购物车、订单、支付、优惠券、收藏、二手商品、钱包收益等,形成商品浏览到下单支付的闭环。第三类是社交社区模块,包括好友申请、好友列表、即时聊天、离线消息、社区发帖、评论、点赞、关注、敏感词审核和内容审核。第四类是内容服务模块,包括健康知识、急救指南、系统文章、隐私协议、用户协议和关于我们。第五类是公益活动模块,包括公益项目、活动报名、打卡、捐赠、投票、走失招领和评论。第六类是后台运营模块,为以上所有业务提供数据维护、审核、统计和配置能力。
智慧医疗
1.面向大众的一款医疗助手系统 2.用户注册登陆后可以免费让大模型分析报告 3.跟大模型对话描述症状,可以给出建议 4.档案库 5.家庭团队概念 可以根据不同的身份问大模型问题并建立档案 5.C端只有居民端 6.B端有医生及居民端共社区或者更大范围定制化使用
帮助文档
Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服
微信扫一扫直接聊
无需加好友