网页数据爬虫

简易网页数据分析题提取，python爬虫。对于需要对多项产品进行可视化比较以及数据处理有很大帮助。
对于淘宝实现自动化可以用dict去自动跑商品搜索项进行大规模的数据采集。但是对于自动登录淘宝有反爬虫机制，在登陆那里我尝试过破解CAPCHA但是暂时没有一个最优解，有双重认证。所以采取了人工扫码登录，登录成功后在terminal回车可进行自动化操作。如果有更多的需求可以跟我沟通，我会去提供更多解决方法，由于本人还在上大学，所以暂时只提供一个最简单的爬虫项目作品作为参考。