电商平台商品数据采集爬虫系统产品系统

立项原因：为解决电商中小商家 “竞品商品数据采集效率低、手动统计耗时” 的问题，开发此爬虫系统；
行业场景：适用于电商行业的竞品价格监控、商品销量分析、类目数据统计等运营场景。

支持淘宝 / 拼多多等电商平台指定类目商品数据采集，包含 “商品标题、价格、销量、评价数” 等字段；具备自动 IP 代理轮换、User-Agent 随机切换的反爬能力；可对采集数据进行去重、格式清洗；支持定时任务自动运行，最终数据导出为 Excel 格式，方便商家直接使用。

负责项目全部开发工作：包含需求梳理、Python 爬虫代码编写、基础反爬方法实现；技术上使用 Requests 库 + XPath 解析数据，搭配免费 IP 代理池实现反爬；核心难点是处理平台的请求频率限制，最终实现数据采集准确率 90% 以上。