正信网点向导微信小程序产品系统

本项目面向征信服务渠道与线下网点信息管理场景立项。官方门户分散展示全国征信查询网点，人工检索成本高、难以统一维护。系统自动采集人民银行征信中心公开的网点名称、地址、电话与工作时间，解决网点清单不全、更新滞后、检索不便等问题，支撑网点导览、客服应答、线下服务指引等业务，降低重复整理与信息过时风险。

系统主要包含四类能力：一是分页列表抓取，按站点分页规则遍历全国网点列表并解析名称、地址、电话、工作时间；二是礼貌访问控制，支持自定义/轮换 User-Agent、请求间隔限速、失败退避重试，可选代理池轮换，降低对源站压力；三是断点续爬与增量落盘，中断后可从 checkpoint 继续，结果实时写入 JSON；四是数据去重与结果导出，按名称+地址+电话去重，输出结构化 credit_sites.json，便于检索、展示或对接地图/客服系统。全量约覆盖一万余条公开网点数据。

本人负责需求拆解、页面与分页机制分析、爬虫脚本开发、限速与代理策略设计、断点续爬与 JSON 导出联调。技术栈以 Node.js 为主，配合 Cheerio 解析 HTML、Undici 发起请求并支持代理；另提供 Python 备选实现。架构上采用“礼貌客户端 + 列表解析 + 断点持久化 + 结果输出”分层。难点在于站点固定每页 15 条、总量超万条需长时间稳定抓取，以及编码、失败重试与去重一致性；通过随机间隔、429/5xx 退避、原子写文件与断点恢复保障完整可用。