中文母语水平
英语无工具书面交流
0
1
2
3
4
5
11天前在线
数据采集工程师
广州全职 · 1000/日 · 21750/月信用正常
工作时间: 工作日19:30-1:30、周末0:00-00:00工作地点:
远程
服务企业:
23家累计提交:
13工时
聊一聊
个人介绍
半年后端开发经验，三年爬虫开发经验，
熟练掌握爬虫开源框架scrapy的使用，对常见的字体反扒、IP封锁、JS加密、滑块验证码反扒技术等都能攻克
熟练掌握web、app抓包
熟练掌握re、xpath、beautifulsoup等页面解析工具
有能力独立开发爬虫管理系统，实时监控数据采集质量
熟悉numpy、pandans等数据处理工具
熟悉机器学习sk-learn库的使用
熟悉ETL工具kettle
熟悉Mysql、Mongo、redies数据库的使用
工作经历
2021-07-01 -2023-03-01名创优品数据采集工程师
搭建分布式数据采集平台，主要用scrapy框架，有完善的数据质量监控系统，主要进行社交舆论的采集。亚马逊等海外电商平台也有采集。采集
2019-06-01 -2021-06-01广东数鼎科技有限公司爬虫工程师
1.爬虫的开发 2.反爬技术的攻克 3.爬虫管理系统的开发 4.ETL流程的开发 目前在开发自己维护的爬虫任务有50+个左右，程度稳定，无出现过重大失误。
2016-04-01 -2019-04-01广东链动科技有限公司爬虫工程师
1.后端开发：负责电商网站注册、登录功能的开发，使用框架是Django 2.爬虫任务需求分析、爬虫程序的开发、爬虫程序的维护，使用框架是scrapy 3.爬虫采集数据的检查、核对、交付
教育经历
2011-09-01 - 2015-06-01广东石油化工学院电子信息科学与技术本科
在校期间表现良好，曾担任班级学习委员，大学生社团联合会网络编辑部成员，文学社技术部部长
语言
作品
用户评价
zosen
不错 期待继续合作
