proginn0921096448
17小时前在线
全职 · 300/日  ·  6525/月
工作时间: 工作日8:00-22:00、周末8:00-22:00工作地点: 远程
服务企业: 0家累计提交: 0工时
聊一聊

APP聊一聊

个人介绍

接 js逆向,航司数据采集,小视频数据采集等

爬虫技能:

熟悉HTTP/HTTPS协议,TCP/IP网络协议 掌握常见的爬虫、反爬知识和应对处理

熟练使用python lxml、BeautifulSoup、re、json模块进行数据提取 熟悉XPath 语法规则和CSS Selector的使用 熟练使用Selenium+phantomJS实现动态抓取 掌握Scrapy框架、以及编写各类中间件 了解scrapy_redis分布式框架,了解各组件工作机制 熟练使用fiddler抓包工具的使用

数据库技能:

熟练使用MySQL数据库,了解MongoDB、Redis的相关操作


工作经历

  • 2025-03-01 -至今爬虫

    爬虫开发:精通Python爬虫编程,熟练使用Selenium、BeautifulSoup、Scrapy等框架进行网页数据抓取。 JavaScript逆向:具备良好的JavaScript基础,能够深入解析网页中的JavaScript代码,应对混淆、加密等保护机制。 数据分析:熟悉数据清洗、处理和分析流程,能够运用Pandas、NumPy等工具进行数据预处理和统计分析。 数据库管理:了解MySQL、MongoDB等数据库的使用,能够高效存储和管理抓取到的数据

教育经历

  • 2017-03-01 - 2021-02-18郑州大学法律事务专科

语言

中文母语水平
0
1
2
3
4
5

技能

Python熟悉
0
1
2
3
4
5
作品
中国观鸟技术中心数据抓取

本项目是一个针对“中国观鸟记录中心”的自动化数据采集工具,旨在解决目标网站存在复杂反爬机制(如请求头加密、数据加密)导致的数据获取难题。JS逆向与加密请求头生成通过execjs调用外部JavaScript文件,复现了网站前端的加密逻辑。自动构造包含sign(MD5签名),timestamp(时间戳)

0
2026-08-03 02:43
下载次数:0
¥1000
更新于: 18小时前 浏览: 2