0
1
2
3
4
5
0
1
2
3
4
5
1月前来过
软件工程师
北京全职 · 1650/日 · 35887/月信用正常
工作时间: 工作日21:00-23:00、周末09:00-23:00工作地点:
远程
服务企业:
20家累计提交:
4工时
聊一聊
个人介绍
采集过上百家视听类网站app平台爬虫, 攻克过绝大多数主流视频平***博, 抖音等反爬手段熟练掌握scrapy, pyspider等爬虫框架, 熟练掌握flask, django, tornado等web框架熟练掌握mysql, mongo, es, redis常用命令熟练掌握rabbitmq, kafka等消息队列训练过破解验证码, 人脸识别, 色情识别模型, 有丰富的各种验证码破解经验熟练掌握docker化部署, 熟悉dockerfile的编写, 熟悉k8s常用命令
工作经历
2020-05-11 -至今知乎反作弊
1. 负责爬虫架构开发， 搭建整个爬虫架构体系 2. 负责为各部门提供数据支撑 3. 负责攻克反爬逆向难点， 搭建通用且稳定的反混淆工具
2018-05-09 -2020-03-26北京市博汇科技有限公司软件工程师
1. 负责爱奇艺, 优酷, 乐视, 搜狐等数百家视听平台的网站app数据采集, 清理, 统计 2. 负责智能巡检的搭建及优化, 巡检数百万网站数据并自动检测其中违规网站 3. 负责专项采集任务的实现, 广度优先的方式自动化采集任意指定网站中敏感数据 4. 负责爬虫框架的持续优化 5. 负责定制化接口的编写
2016-12-03 -2018-04-28北京市诸葛找房数据工程师
1. 负责链家, 房天下, 酷房网, 推推等数十家房产类网站的数据采集, 清理及入库 2. 负责采集小区城区商圈的数据并根据城区商圈坐标系构建小区城区商圈对应关系 3. 负责数据的统计并提供给运营人员使用
教育经历
和TA聊聊APP扫码和程序员直接沟通
该用户选择隐藏教育经历信息，如需查看详细信息，可点击右上角“和TA聊一聊”查看
