黑色乏味
41分钟前在线
大华建设管理有限公司python爬虫太原
全职 · 420/日  ·  9135/月
工作时间: 工作日10:00-15:00工作地点:
服务企业: 90家累计提交: 4工时
联系方式:
********
********
********
下载APP

扫码直接沟通

个人介绍

主要编写python爬虫
 1、熟练使用python语言,熟悉多线程多进程开发,熟悉http网络协议 
2、熟练使用scrapy、selenium框架进行爬虫开发 
3、能够基于scrapy-reids进行分布式爬虫
4、能够处理一些反爬问题(如IP封禁、验证码、滑块验证、字体加密、js逆向等) 
5、熟悉mysql、redis以及peewee ORM使用 
6、精通xpath、正则表达式数据提取
7、熟悉html、css、JavaScript前端网页技术 
8、精通fiddler、mitmproxy抓取手机app数据 
9、熟练使用flask、django

工作经历 和TA聊聊

APP扫码和程序员直接沟通

  • 该用户选择隐藏工作经历信息,如需查看详细信息,可点击右上角“和TA聊一聊”查看

教育经历

  • 2017-09-01 - 2021-06-01长安大学计算机科学与技术本科

    精通爬虫,精通爬虫,精通爬虫,精通爬虫,精通爬虫

技能

Python
0
1
2
3
4
5
作品
爬取招标网站

因为隐私原因 不会上传爬取结果,这也是很简单的轻量级爬虫,因为爬取网站类型繁琐,所以我写的是轻量级爬虫,如果需要换爬取省份的网站的话,只需到修改data参数以及正则表达式就可以

0
2021-09-06 16:44
批量爬虫

批量爬虫,进行爬取招标网站的信息,其中技术方面涉及到生成日志,并且抓取日志错误信息,设置代理池这些反爬操作,也是使用xpath抓取信息,抓取的数据是保存到数据库。

0
2021-09-06 16:19
爬取豆瓣网

很简单的requests库编写的轻量级爬虫,通过requests库进行解析,然后使用xpath进行数据抓取,通过引入csv以及json库进行保存数据,可以自行选择需要的保存方式。

0
2021-09-06 16:12
更新于: 04-08 浏览: 646

使用微信扫一扫

客户服务热线

0571-28120931

在线客服