python爬虫

实现功能：
1.爬取目标网站数据
2.进行数据清洗
3.存入Mysql数据库

技术点：
1.反反爬，携带cookie，使用随机user-agent
2.使用selenuim来模拟网页的“下拉加载更多”
3.收集后进行数据清洗，以增加准确度