面向电商运营与市场分析人员,对公开商品目录进行定时抓取与历史价格追踪,自动发现价格波动和库存变化,替代人工盯价,为比价、选品、竞品监测提供数据决策支撑。
点击空白处退出提示
面向电商运营与市场分析人员,对公开商品目录进行定时抓取与历史价格追踪,自动发现价格波动和库存变化,替代人工盯价,为比价、选品、竞品监测提供数据决策支撑。
每 6 小时自动抓取公开书目站点约 1000 条商品,解析标题、价格、评分、库存、分类并过滤脏数据;SQLite 分三表存“当前态、追加式价格历史、运行台账”;FastAPI 提供 items/stats/history/categories 等接口;Next.js 仪表盘以 KPI 卡、分类条形图、价格趋势线、可搜索/排序/分页商品表和抓取运行面板(含“立即抓取”按钮)呈现,30–60 秒轮询自动刷新;带指数退避重试、部分失败降级、双格式日志与离线单元测试。
scraper/ 采集(引擎可一键切换 Playwright)、backend/ FastAPI 只读出数、frontend/ SWR 轮询渲染,三者经 SQLite 文件解耦;upsert 幂等写入 + 追加历史表天然支撑趋势图,WAL 模式读写不互锁,partial/failed 状态加退出码保证运行可观测。





评论