3天前活跃

晚羽

• UID:31553
综合评分 34
方向: 后端-Python 爬虫/脚本-爬虫/脚本
沈阳市
1000元/8h
10年以上经验
求职意愿:接单·不求职(3天前更新)

个人简介

1、整体架构和技术实现 系统采用Python全栈架构,由数据采集层、清洗处理层、报表生成层三模块组成。采集层基于Requests+Playwright双引擎,支持静态/动态页面自适应抓取,内置UA池、请求间隔、异常重试等反爬机制。清洗层使用pandas进行去重、格式标准化、异常值过滤。报表层通过openpyxl生成专业双Sheet Excel,含条件格式、自动列宽、热销高亮等特性。 2、"我"的负责模块 独立完成全流程开发:从采集器设计、反爬策略编写、数据清洗逻辑实现,到Excel报表模板定制、样式优化,全部代码自主编写和测试。 3、关键功能和技术亮点 多页自动采集,请求间隔防封 pandas一站式数据清洗与统计分析 openpyxl生成双Sheet专业报表(商品明细+数据概览) 热销商品自动绿色高亮、条件格式

技能

核心技能: Beautiful Soup
其他技能: Flask、FastAPI、Pandas、Selenium、Scrapy
交流语言: 普通话( 母语水平 )
行业经验: 电商 大数据

项目案例

电商商品数据采集与分析系统
商品数据采集 → 数据清洗 → 多维统计分析 → 专业Excel报表自动生成 功能介绍 多页商品数据自动采集,支持请求间隔与反爬对抗 数据去重、异常值清洗、格式标准化处理 多维度统计分析:价格分布、销量排行、评分对比、分类占比 双Sheet Excel报表输出:商品明细页 + 数据概览页 热销商品自动高亮、条件格式、自适应列宽
电商 大数据

工作经历

教育经历

十四中
2003.09 - 2007.07
高中/中专
相似推荐
武汉市
后端-Python、爬虫/脚本-爬虫/脚本
技能:C、Python
北京市
后端-Python、桌面端-Java桌面开发
技能:Python、Java、Android SDK、AntiCaptcha、Spring Boot、Hibernate、MySQL
温州市
爬虫/脚本-爬虫/脚本
技能:Scrapy、Selenium
北京市
游戏开发-游戏开发其他、爬虫/脚本-爬虫/脚本
技能:C
深圳市
人工智能-AI应用开发、后端-Python
技能:Python、SQL、Go、Rust
帮助文档   Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服