陈胖子123
1月前来过
全职 · 619/日  ·  13463/月
工作时间: 工作日20:30-21:30、周末10:00-19:00工作地点: 远程
服务企业: 3家累计提交: 1工时
聊一聊

使用APP扫码聊一聊

个人介绍

爬虫工作经验两年,熟练掌握urllib、requests、selenium等爬虫模块***数据抓取;熟悉 re、xpath、selector 等网页数据提取手段;熟练使用多线程、多进程编程;能够解决常规 js 逆向加密;构建过 cookie 池,构建过代理 ip 池;能够处理常规图片滑块,数字、文字验证码等反爬手段;了解 Linux 系统及其命令操作。

思维发散,思路清晰,乐于学习新知识,保持不断学习、不断创造价值的状态 良好的沟通能力,能很快适应工作,熟悉业务,融入到团队中,工作认真负责,踏实肯干 积极主动的工作态度,乐观向上的价值观,具备良好的团队开发意识 能按时在规定时间内完成公司交代的相关任务,良好的工作抗压能力。

工作经历

  • 2021-07-01 -2022-03-01龙绚数据运营有限公司数据工程师

    1.负责各大省份数据运营,维护爬虫服务正常运作。 2.参与项目,完成负责的模块开发。 3.对加密网站进行js逆向,利用execjs、或python还原的方式获取加密参数。 4.小程序端数据抓取。 5.内部使用的小工具的开发。

  • 2021-06-16 -至今成都矿浮科技有限公司爬虫工程师

    1.负责各大网站数据运营,维护爬虫服务正常运作。 2.参与项目,完成负责的模块开发。 3.对加密网站进行js逆向,利用execjs、或python还原的方式获取加密参数。 4.小程序端数据抓取。

  • 2019-10-15 -2021-06-15绵阳奇安信科技有限公司爬虫工程师

    1、根据产品经理提交的项目需求,抓取各大网站的信息; 2、对待抓取的网页进行分析,网页信息提取等技术开发; 3、对抓取的内容进行提取、处理、优化、去重、入库等操作; 4、优化抓取效率,提升爬虫的抓取效果; 5、对数据进行存储; 6、后期的代码维护。

教育经历

  • 2016-09-01 - 2020-06-15成都东软学院计算机科学与技术本科

    专业是计算机科学与技术系-信息安全方向,在校期间学习python爬虫相关知识,大三在公司实习爬虫岗位。

技能

HTML5
Ajax
Node.js
0
1
2
3
4
5
0
1
2
3
4
5
作品
某网站滑块验证码绕过

采集某网站数据,每次翻页或者进入详情页都会出现验证码,采集数据需要绕过该验证码。分析源码调试找出验证码出现到验证结束的整个逻辑,并将相关代码进行提取,在本地测试模拟,最后成功绕过。

0
2023-04-28 09:55
某网站cookie加密参数染过

采集某网站的信息需要绕过cookie加密参数,通过js逆向将加密参数的生成逻辑还原,并模拟请求发送给服务器,服务器校验通过。

0
2023-04-28 09:56
某盾滑块验证

染过某盾的所有加密参数,拿到正确数据。一共三个请求,第一个d请求检测当前客户端运行环境,无异常返回指纹,具有时效性。第二个get请求拿到imgcode,第三个携带一些加密参数以及轨迹信息给到服务器进行校验。

0
2023-04-28 10:37
更新于: 2022-05-31 浏览: 152