使用selenium模拟用户登录,再使用requests库自动下载抖X电商平台提供的数据到本地Excel文件中,并写入远程数据库中。
数据库写入主要使用pandas读取Excel文件数据,修改部分参数后再进一步写入到远程MySQL数据库中。
项目难点:使用浏览器开发者工具获取抖X平台中响应的所有js,从中找到"webmssdk.js"文件,修改"webmssdk.js"文件,Python调用node执行webmssdk.js生产X-Bogus请求参数。
点击空白处退出提示
使用selenium模拟用户登录,再使用requests库自动下载抖X电商平台提供的数据到本地Excel文件中,并写入远程数据库中。
数据库写入主要使用pandas读取Excel文件数据,修改部分参数后再进一步写入到远程MySQL数据库中。
项目难点:使用浏览器开发者工具获取抖X平台中响应的所有js,从中找到"webmssdk.js"文件,修改"webmssdk.js"文件,Python调用node执行webmssdk.js生产X-Bogus请求参数。
评论