1.写了个爬虫程序爬取了京东商城的商品数据,包括评论 价格,图片,产品编号等。
2.使用了playwright自动化工具,代码中用了反爬措施,提高了代码成功率,比如翻页获取的时候加了随机等待等等
2.程序运行只要输入商品名称和页数就可以爬取整页商品详情页的数据,并写入数据库和execl表格中。
点击空白处退出提示
语言技术
Python
1.写了个爬虫程序爬取了京东商城的商品数据,包括评论 价格,图片,产品编号等。
2.使用了playwright自动化工具,代码中用了反爬措施,提高了代码成功率,比如翻页获取的时候加了随机等待等等
2.程序运行只要输入商品名称和页数就可以爬取整页商品详情页的数据,并写入数据库和execl表格中。
评论