程序聚合 软件案例 各项零散爬虫项目

各项零散爬虫项目

2025-07-16 17:09:01
行业:出行
载体:爬虫/脚本
技术:Python、Selenium WebDriver

业务和功能介绍

1.出行需求爬虫,可指定不同空间时间尺度不同范围进行爬取,比如全深圳分成3000+个网格的小汽车/公交的出行时间及路径,总需求量在100万级
2.公开数据的爬虫,比如香港跨境署数据、各市交通局数据
3.知网数据爬取,各种反爬措施
4.可构建含有llm的项目,比如意图识别、文本分类等初步或深度模拟人工的数据清洗
1.并行进行爬虫,并配有终止自启功能
2.按用户需求所需要格式组织成csv、json等
3.可借助LLM能力作意图识别等多种基于llm的操作
4.自动爬取、自动纠错
5.多尺度灵活爬取,不同空间、时间、范围
6.支持百度、高德多平台爬取
7.可根据指定渠道爬取
8.支持多层级深入爬取
9.根据需求制定反爬策略

项目实现

1.独立开发
2.按需爬取
3.自动爬取
4.自动纠错
5.支持多层级深入爬取
6.按用户需求所需要格式组织成csv、json等
7.多尺度灵活爬取,不同空间、时间、范围
8.根据需求制定反爬策略

示例图片视频


chjers
30天前活跃
方向: 人工智能-NLP和自然语言处理、人工智能-计算机视觉与图像处理、
交付率:100.00%
相似推荐
基于windows操作系统exe软件安全测试
专注 Windows PC 客户端安全测试,擅长 DLL 劫持、本地权限提升至 SYSTEM+TrustedInstaller、中间人 RCE、远程 RCE。国家信息安全漏洞库(CNNVD)收录 695 条,其中中危 15 条。在主流互联网大厂 SRC 获得赏金,涉及 PC 客户端类漏洞挖掘。具备完整的客户端漏洞挖掘、验证、报告撰写能力。
渠道运营平台
1、企业内部运营管理平台,包含登录、权限管理。 2、金融资讯管理开发和接口联调 3、用户画像管理开发和接口联调 4、基金投顾管理开发和接口联调 5、广告管理开发和接口联调 6、支付宝和微信红包发放活动开发和接口联调 7、营业部和投教基地管理开发和接口联调 8、进行菜单管理开发和接口联调 9、角色管理开发和接口联调 10、用户管理开发和接口联调
个人记账与资产管理平台
本项目是一套从零搭建的全栈个人财务管理平台,目标是替代功能单一的记账工具,把日常记账、资金账户、借贷往来、预算控制、资产盘点收敛到一个数据自主的系统中。系统由 12 个业务模块、23 个控制器、170 个 REST 接口、36 张数据表构成:记账核心支持三级分类树、商家联想、多平台支付与 CSV 批量导入导出,每笔账单自动联动账户余额并留存流水日志;借贷模块实现未结清 / 已结清 / 已放弃三态模型,支持分期还款与坏账核销;预算模块提供月度 + 年度双层体系与阶梯式执行规则;资产模块通过快照与趋势图呈现净资产变化;报表模块支持从月度 / 年度报表下钻到分类明细。系统还包含完整 RBAC 权限体系、软删除回收站、8 套主题实时切换与中英双语国际化。核心业务流程为:记一笔 → 余额幂等联动 → 报表与预算同步更新;借据从创建、关联账单凭证、分期还款到三态判定的完整生命周期;以及登录后由后端菜单树动态生成侧边菜单、路由与区块双重门控的权限链路。
慧算盘财务软件
慧算盘 · 智能财务管理系统 录入单据 → 自动生成记账凭证 → 自动出具财务报表与进销存报表 覆盖 **业务单据 / 进销项发票 / 出纳账 / 记账凭证 / 账簿 / 报表 / 进销存 / 固定资产 / 员工档案**,凭证与报表可直接调用本机打印机输出 提供 **Windows 桌面版 EXE**(带机器码激活与数据加密)与 **浏览器 Web 版** 两种形态
基于Tushare的股票行情批量数据分析工具
人工查阅单只股票历史行情、指标数据效率低,需要轻量化本地数据分析工具,批量拉取公开市场数据。批量获取股票日线行情、基础财务指标,自动计算涨跌幅、均线等统计指标对特定指标做回归量化分析,寻找行业热点,仅用于数据研究
帮助文档   Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服