电影爬虫实战,使用异步爬取,涉及的库有aiohttp、asyncio、logging、motort、qdm等,程序爬取数千部电影,数据包括电影的上映时间、电影详情、评分、主演等等,由于是异步爬取,爬取的速度尚可,数据存储在mongodb数据库中,很适合正在学习python爬虫的大佬学习
评论