懂车帝网站爬取产品系统

为小型汽车资讯公司采集懂车帝平台的车型配置、用户口碑及区域报价数据，用于制作竞品分析报告和内容素材。

支持指定品牌 / 车型的精准抓取，通过 JS 逆向破解接口的 sign、x-sign 等加密参数，自动获取车型详细参数表、车主真实评价、各城市经销商报价，数据输出为 CSV 格式并去重清洗。

技术栈用 Python+JavaScript，先通过 Fiddler 抓包分析懂车帝移动端 API，找到加密参数生成的 JS 文件，用 Node.js 环境调试加密逻辑后，在 Python 中用 execjs 库调用 JS 函数生成合法请求参数；请求层用 requests.session 保持会话，配合自建 IP 代理池解决反爬封禁；数据解析用 jsonpath 提取接口 JSON 数据，对用户评价做简单的关键词提取；最后用 pandas 处理数据格式，确保单次采集 50 + 车型数据，参数准确率 99%，报价数据误差≤2%。