为了获取某些小说网站的小说的最新章节,开发了此爬虫工具。主要功能:1、定义几个常用的小说网站,这些都是采集的目标;2、分析这些网站的数据格式,使用HTTPConnection自动读取这些数据,并且把多个网站的数据进行比较;3、获取到的数据存储到TXT文本(每个章节一个文本),并将相关的索引保存到mysql中;4、利用MVC开发了一个配套的浏览网站声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态
评论