程序聚合 软件案例 大众点评爬虫

大众点评爬虫

2026-05-07 12:42:15
行业:大数据、电商
载体:爬虫/脚本
技术:Python、Scrapy、Selenium

业务和功能介绍

需要输入搜索字符或者对类目下的大众点评商家数据进行收集
需要的主要字段是:商家名称,商家地址,商家类目,商家卖品sku,价格等
需要对一个城市收集上面的信息
对收集到的数据进行清洗
得出在这个城市开奶茶店的预测

项目实现

主要运用python脚本和selenium实现
分析网址反爬机制、获取源代码
破解字体反爬虫,用代理 ip 解决 ip 限制
爬虫的设计与实现
对原始数据进行数据清洗
对得到的数据进行可视化、特征工程、建模预测、模型融合
得出需求的预测

示例图片视频


万象维度大浩劫
30天前活跃
方向: 后端-Python、爬虫/脚本-爬虫/脚本、
交付率:100.00%
相似推荐
推客-h5-推客吧
目标: 1.降低操作门槛: 提供极简的 H5 移动端体验,实现“一键推广”、“多选推广”,让推客能快速上手。 2.提升转化与信任: 主打“自动机审”、“订单秒审”与“自动返佣”,解决传统网赚平台结算慢、数据不透明的痛点。 3.构建裂变体系: 通过“合伙人”制度、团队管理功能以及邀请机制,实现推客规模的指数级自发增长。 核心业务模块介绍 主要划分为四大核心业务模块: 首页: 作为推客登录后的第一落脚点,主要承担平台重要通知、活动福利下发以及核心业务(微店、邀请)的快捷入口功能。通过资讯流的形式展示“全新版本”、“订单秒审”等平台优势,建立用户信任。 精选 / 返佣区: 这是平台的核心变现场景。以瀑布流/列表形式聚合各类高佣金产品(如消费金融产品)。直观展示核心指标(佣金金额、结算周期如“次日/24小时”、审核方式如“CPA自动机审”),辅助推客快速决策并获取推广链接。 我的: 推客的个人工作台。整合了财务数据(总收入、可提现余额)、团队关系管理(我的团队、客户管理)以及平台附加服务(公众号、客服、App下载引导)。
人力资源管理系统
人力资源管理系统是一套面向企业人力资源管理全流程的数字化平台,旨在帮助企业管理者和HR团队实现对组织架构、招聘、考勤、薪酬、绩效、培训、合同等核心HR业务的高效管理。 本系统采用双角色门户设计:管理员端为HR及企业管理者提供全局数据驾驶舱和审批管理能力,实现对人力资源数据的实时监控与决策支持;员工端则为每一位员工提供自助服务门户,支持个人信息查看、考勤查询、请假申请、工资单查阅、绩效评估、培训报名等日常操作,提升员工体验和HR工作效率。
捷通云招聘人才招聘系统-捷通云招聘
捷通云招聘系统后端采用.NET8支持跨平台运行,可部署到Linux和国产操作系统,数据库采用EFCore可支持PostgreSQL、MySQL、MsSQL和国产数据库等。前端采用vue3+ElementUI,APP和小程序采用uniAPP开发。 系统架构 捷通云招聘系统后端采用.NET8,前端采用Vue3+ElementUI,APP和小程序采用uniAPP开发 操作系统 捷通云招聘可部署到Linux、Windows、macOS和国产统信UOS等市面任意主流操作系统 数据库 捷通云招聘数据库采用EFCore框架可支持PostgreSQL、MySQL、SQL Server、ORACLE和国产数据库
门禁打卡培训管理系统
本项目面向厂区访客、外来施工及应聘人员等入场管理场景,建设了一套“身份证核验/扫码验证 + 安全培训视频学习 + 在线答题 + 门禁放行 + 记录追踪”的一体化门禁安全准入系统,目标是替代传统人工登记、口头核验和纸质考试流程,提升入厂审核效率、身份校验准确率与现场通行管理水平。系统由 PC 管理后台、微信小程序端和 C# 门禁刷证终端组成。后台支持访客报备录入、Excel 批量导入、题库维护、入厂记录查询、异常进出日志追踪等功能;小程序支持访客登录验证、培训视频学习、在线考试、考试结果查看、报备记录查询,以及审批、公司名录、黑名单、管理员仪表盘等功能;门禁终端负责读取身份证信息、调用云端校验接口、根据校验结果进行语音播报并记录刷卡历史。整体业务流程为:管理员先在后台录入或批量导入报备信息并维护题库;访客到场后通过手机号、姓名、身份证号在小程序验证身份,按规则完成培训视频学习和安全考试;门岗处再通过身份证读卡器读取证件信息,系统联动云端判断是否已报备、是否考试合格、是否存在未签退或需重考等状态;校验通过后提示可入厂,否则进行原因播报和拦截,从而形成“报备-学习-考试-核验-入场-留痕”的完整闭环。
学习网页开发,翻译软件开发以及管理系统开发
1. 学习网网页开发(大创项目) 项目描述:面向程序员、学生及技术爱好者的一站式在线学习平台,作为大学生创新创业训练计划项目核心成员。 核心职责:担任前端开发负责人,主导视觉化设计与交互逻辑实现。 技术落地:基于 Vue 3 和 Node.js 技术栈,独立完成了从登录注册鉴权、主页面架构到各子功能模块的开发。 项目成果:完善了页面功能与内容生态,实现了高保真的视觉还原,显著提升了用户的学习体验与页面交互流畅度。 2. 智能翻译软件开发 项目描述:专为学生群体打造的高效辅助翻译工具,旨在解决多场景下的语言转换需求。 核心职责:负责后端架构与接口集成,打通多模型调用链路。 技术落地:利用 FirstAPI 聚合了多个主流大语言模型(LLM),并成功接入某知名翻译软件的成熟接口。 项目成果:实现了多模型并发调用与结果优选,保证了翻译的高准确率与响应速度,有效满足了学生群体的日常使用需求。 3. 综合管理系统开发(人力资源/校内教学) 项目描述:涵盖人力资源与校内教学管理的综合性后台系统,旨在提升管理效率与数据同步能力。 核心职责:担任系统开发主负责人,全权负责后端核心逻辑编写与数据库设计。 技术落地:采用 Java 结合 MySQL 的传统稳健架构,实现了复杂业务逻辑的数据处理与持久化。 项目成果:系统功能完善,界面普及度高且交互友好;经测试,系统具备优异的数据同步性,低时延、高性能,整体运行稳定性达到优秀标准。
帮助文档   Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服