sf轻小说爬虫

我要开发同款

捕风的异乡人2023年03月12日

145阅读

所属分类python爬虫

作品详情

模拟浏览器发送请求，获取到小说数据，提取到小说文本，并保存。熟练通过正则，xpath，BeautifulSoup进行提取。运用多线程对爬虫进行加速。可获取到的数据量大，效率高。

查看全文

声明：本文仅代表作者观点，不代表本站立场。如果侵犯到您的合法权益，请联系我们删除侵权资源！如果遇到资源链接失效，请您通过评论或工单的方式通知管理员。未经允许，不得转载，本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP

实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

前往安装

分类

推荐作品

快手爬虫

对浏览器进行了模拟，定义了一个类，用面向对象的方法写的，对异步请求进行爬取，解析，保存，运用了多线程技术，爬虫效率高，自动翻页，获取到数据量大，可用于进行数据分析，具有商业价值。

学车网

功能：学员在线练习，观看视频，报名驾校。管理端，学员管理，驾校管理，教练管理，退款管理等。职责：根据需求，负责整个系统的设计和数据库设计，编码的开发

在线教育培训

主要功能：用户管理，角色权限，自己管理，试题管理，资讯管理。负责功能， 1、学员登录，资讯查看，学习等学员端所有功能的设计和实现。 2、封装了视频播放组件。 3、制定了出题规则和答题实现逻辑。

低代码报表工具

通过简单配置实现可以直接对接中台的报表接⼝, 可以转换数据, 对数据加⼯和翻译. 包含了数据源模块, 参数解析模块, 数据翻译模块, 接⼝配置模块. 拥有接⼝配置UI界⾯, 可以配置数据源和报表接⼝. 实现了在线添加数据源, 添加接⼝, 切换数据源, 修改接⼝的配置. ⼤⼤降低了组内开发报表的时间成本.

B2B供应链

包含功能：企业查看商品，添加购物车，订单结算，订单查看，支付，统计等管理端：企业管理，工厂管理，用户管理，角色权限，订单、商品管理，售后管理，结算管理等工厂端：发货，资质等个人负责 1、系统整体优化，模块划分和表结构改造，提升系统接口查询效率。 2、搭建maven私服，提高部署速度。 3、引入swagger和knife工具，提高前后端接口调试速度 4、对订单数据进行清洗。保证数据的正确性。 5、开发促销功能。 6、引入RocketMq，无缝插入订单发货后的一些操作。 7、封装第三方系统（wms）统一调用接口。