本项目属于计算机专业课程实训项目,用于采集猫眼电影平台对外公开的电影实时票房数据,解决人工手动记录票房信息效率低下的问题,仅用于毕业设计学术学习,不做商业使用。
点击空白处退出提示
本项目属于计算机专业课程实训项目,用于采集猫眼电影平台对外公开的电影实时票房数据,解决人工手动记录票房信息效率低下的问题,仅用于毕业设计学术学习,不做商业使用。
使用Python实现猫眼电影实时票房数据的自动化采集,可采集影片名称、综合票房、票房占比、排片场次四项核心数据。项目突破了猫眼平台的字体反爬机制,通过下载动态woff字体文件,结合PIL图像渲染与ddddocr OCR识别技术,建立字体编码与真实数字的映射关系,实现加密数字的自动解密。同时逆向分析了平台的自定义签名加密算法(MD5+Base64+时间戳),构造合法请求头获取JSON数据,最终将结构化数据批量写入Excel表格保存。
1、我负责项目的全部开发工作,包括猫眼票房API接口的逆向分析、字体反爬破解、数据解密与存储。
2、项目使用Python语言,核心技术栈包括requests(网络请求)、fontTools(字体文件解析)、PIL(图像渲染)、ddddocr(OCR识别)、jsonpath(JSON数据提取)、openpyxl(Excel写入)。实现亮点:①逆向破解了猫眼平台的自定义签名加密算法,通过MD5+Base64+随机时间戳+排序参数拼接构造合法signKey和mygsig请求头;②针对猫眼动态字体反爬,自动下载woff字体文件,利用fontTools提取cmap映射表,将每个字符渲染为图片后通过ddddocr进行OCR识别,建立Unicode编码到真实数字的映射字典,完成加密密文到明文的自动转换;③使用jsonpath精准定位JSON嵌套数据,将解密后的票房数据(影片名、综合票房、票房占比、排片场次)结构化写入Excel表格。难点在于字体反爬的OCR识别准确率保障以及签名算法的完整逆向还原。



评论