一、项目主要功能
商品详情采集:支持通过商品详情页 URL 抓取价格、评价数等核心数据。
搜索采集:支持按关键词搜索商品,获取搜索结果列表(由 -s 参数体现,但具体实现细节在文档中未展开)。
价格波动监控:定时或手动触发监控,自动对比历史价格,当跌幅超过设定阈值时触发告警。
登录态管理:首次使用需手动扫码登录(--login),Cookie 自动保存并复用,支持重新登录(--relogin)。
反爬处理:包含懒加载内容滚动加载、字体反爬解密(针对淘宝)、浏览器自动化操作绕过基础检测。
数据持久化:使用 SQLite(可配置)存储商品历史数据,支持查询与对比。
异常容错:三级重试机制(操作/页面/任务级),保障采集稳定性。
告警通知:支持企业微信 Webhook 和邮件告警,价格下跌或评价激增时推送通知。
点击空白处退出提示









评论