1.分为数据分析以及爬虫两个模块,数据分析让用户更加清楚的看出天气、时间与地区等因素的变化关系2.本人负责数据分析以及爬虫的任务,使用scrapy框架进行数据获取,使用pandas、matplotlib、wordcloud等python库,进行数据分析3.难点在于对数据的清洗与爬取,数据获取后部分数据可能存在空值,乱码等情况,可以将这些问题数据用中间值填充或者是将问题数据行消除
评论