Python公开网页商品数据采集与Excel整理（个人演示项目）产品系统Vibe Coding

这是一个面向公开电商数据整理场景的个人演示项目。针对人工逐页复制商品名称、分类、价格、库存和评分时效率低、格式不统一且容易遗漏的问题，我开发了一套Python采集与整理流程，将公开练习网站中的商品信息转换为可以直接筛选、统计和复用的Excel/CSV结构化数据。

系统支持按目录分页读取公开商品页面，并继续解析每个商品的详情页面；提取商品名称、UPC、分类、价格、评分、库存、税费、评论数、商品链接、图片链接、来源页码和采集时间等16个字段。程序会自动清理文本和数值格式、按UPC去除重复记录，最终生成UTF-8编码的CSV文件，并输出商品数量、分类数量和平均价格等质量摘要。

本项目由我独立完成需求拆解、字段设计、Python编码、数据验证和材料整理。使用urllib发送HTTP请求，使用lxml与XPath解析页面，再通过pandas构建表格并导出CSV；程序包含自定义User-Agent、请求间隔、超时控制、URL规范化、金额解析和去重逻辑。项目共采集5个目录页及对应详情页，得到100条唯一商品记录。开发过程中使用Codex辅助编写和检查代码，最终由我本人运行、核验并整理交付结果。