爬虫高级工程师
北京前端精通
0
1
2
3
4
5
个人介绍
深耕爬虫领域3年，熟悉Python生态下的Scrapy、PySpider、Requests等主流爬虫框架，能够独立完成从需求分析、反爬破解到数据清洗入库的全流程开发；精通HTML、CSS、JavaScript，对App逆向、无头浏览器渲染、代理池维护有丰富实战经验，曾主导过电商、企业服务领域多个千万级数据抓取项目，保障数据稳定性准确率超99%；熟悉MySQL、MongoDB等数据库，了解分布式爬虫架构设计，能适配不同量级的业务需求，期待能和团队一起解决复杂数据问题。
工作经历
2020-07-11 -2022-02-16某初创科技公司爬虫高级工程师
1. 独立完成中小规模爬虫项目：根据业务需求独立开发企业工商、招聘信息等多个垂直领域爬虫项目，从需求分析、反爬调研到开发上线全流程跟进，累计交付数据超8000万条，满足公司早期数据积累需求。 2. App逆向开发：参与多个移动端App的接口逆向工作，完成抓包分析、签名算法等数据
教育经历
2012-09-08 - 2016-06-17天津大学计算机科学与技术本科
熟练掌握数据结构、计算机网络、数据库原理等核心课程，为爬虫开发打下扎实基础 在校期间参与学校大数据实验室项目，负责网页数据爬取模块开发，完成百万级学术文献数据的采集与整理 自学Python爬虫开发体系，熟悉Requests、Scrapy等框架
