1、Python语言基础，MySQL、MongoDB和Redis数据； 2、熟悉HTML、CSS、JavaScript等Web前端技术； 3、掌握Linux常用命令，熟悉Ubantu系统的开发； 4、了解Web开发相关技术，熟悉Django、Flask框架； 5、熟悉request，urllib库；熟悉基于正则表达式、XPath、CSS等网页信息抽取技术；熟悉MySQL、Redis、MongoDB等数据库；熟悉HTTP协议，各种web认证机制；熟悉常见的爬虫反爬虫策略，如伪装http请求头、robot协议、Cookie等；熟悉网络爬虫相关技术，熟悉Scrapy爬虫框架，有爬取数据和反爬经验； 6.处理JS加密、字体加密、 css偏移等反爬 7.处理滑块验证码8.瑞数4-6版本，vmp版本不接