美食菜谱爬虫（下厨房 / 美食 U / 美食公众号 & 小程序）产品系统

餐饮咨询业务中，依靠人工翻阅各类美食平台搜集热门菜品、用料配方，搜集效率低、菜品更新跟不上市场流行趋势，无法精准为合作餐饮客户做新品研发、食材采购规划。项目自动化抓取菜谱网站、美食公众号、小程序菜品数据，汇总全网热门菜品、用料配比，作为公司餐饮品类规划、食材选品的核心数据源。

分为多端内容采集、食材标准化清洗、定时增量抓取、数据库存储、数据输出模块。可抓取菜名、食材配料、烹饪步骤、用户热门点评等信息，支持按菜系 / 食材分类筛选，每日自动增量爬取上新菜品；统一食材单位、剔除广告无效内容，清洗后的数据通过 Excel/API 供给公司咨询部做菜品分析。

独立完成全平台美食类爬虫开发，统筹脚本编写、反爬适配。采用 Python+Playwright 处理动态页面，Redis 做去重缓存，MySQL 分类存储菜谱与食材信息；难点是小程序接口加密、公众号防盗链、前端异步渲染，通过抓包逆向、无头浏览器渲染、动态 IP 池解决，沉淀百万级菜品食材数据库。