明廷良
1月前来过
全职 · 300/日  ·  6525/月
工作时间: 工作日9:00-22:00、周末9:00-22:00工作地点:
服务企业: 8家累计提交: 2工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

熟练掌握python 异步编程,Tcp,Http,Websocket协议

熟练应用numpy,pandas,matplotlib,进行数据提取、清洗、数据可视化。

技术视频展示01:利用AST轻松搞定某点评滑块   


熟悉各种反爬机制,JS逆向 , JS代码混淆,AST

熟练应用 aiohttp ,requests、xpath、正则re, 等模块

熟练使用Fiddler,Charles,Mitmproxy等各种抓包工具

熟练应用scrapy,熟悉分布式爬虫的基本架构和流程。

熟练应用HTML/CSS/Ajax  JS/jQuery/Bootstrap等Web前端技术。


熟悉  Puppeteer ,Selenium ,NodeJS

熟悉mysql ,redis等数据库,非关系型数据库(mongodb)。

熟练使用Tornado,Django,nginx进行服务器后端开发。

熟悉linux命令和VIm命令,shell脚本编程,Git 的使用

工作经历

  • 2018-07-19 -2020-01-01北京国研网Python Web爬虫工程师

    前期主要使用 Python Tornado 进行Web后端开发,编写各种复杂数据的录入逻辑, 后期编写爬虫,爬取数据,并对数据进行去重,清洗,并录入数据库

  • 2016-07-19 -2018-07-19加里敦科技高级后端工程师

    使用PHP在猪八戒网上接单赚钱,主要做WEB后端开发,前端有时候也做

  • 2015-07-19 -2016-07-19北京尚学堂科技高级后端工程师

    使用java进行WEB后端开发工作

教育经历

  • 2010-07-18 - 2014-07-18湖北理工学院计算机科学与技术本科

    大学期间曾自学过C语言,汇编,数据结构

技能

java PHP
Linux
Mysql MongoDB Redis
Tornado Django等网页后端开发
HTML5
python数据采集
0
1
2
3
4
5
0
1
2
3
4
5
作品
物通网信息抓取

抓取物通网等网站的各城市物流信息并作展示

0
2020-07-19 08:42
大众点评商品评论爬取

抓取不同种类商品的评论,分析评论数量,进而得出商品的热度和它所在店铺的热度. 使用jieba将评论内容进行分词,去除停用词以及数字,进而得出用户的消费趋势

0
2020-07-18 21:34
美团外卖商品爬取

抓取美团外卖的商品,并按不同城市不同种类进行分类. 1,对商品标题进行文本分析,词云可视化 2,不同关键词word对应的sales的统计分析 3,不同省份的商品平均销售分布 4,商品价格对销售额的影响分析

0
2020-07-18 21:25
更新于: 2020-07-23 浏览: 356