电商价格监控爬虫开源项目

项目包含两大模块：

1. 爬虫引擎模块：基于 Python 的模块化爬虫框架，支持多平台商品数据采集。采用深模块设计，将 HTTP 请求、页面解析、数据导出分层隔离。支持 User-Agent 随机切换、自动重试、请求间隔控制，有效降低被封风险。通过 session 注入 seam 设计，可在无网络环境下进行单元测试。

2. 数据处理模块：支持 CSV/JSON/Excel 多格式导出。数据自动清洗、类型转换、缺失值处理。内置统计分析功能（求和、均值、最值、分组汇总），可生成格式化 Excel 报表并附带柱状图/饼图可视化。

项目遵循专业工程标准：34 个单元测试全部通过，纯函数优先设计，接口小而实现深。