基于scrapy的爬取当当网青年爱情前100页所有图书信息

我要开发同款

proginn22043710622024年02月22日

25阅读

开发技术http、sql server、爬虫、python

所属分类xpath、scrapy

作品详情

项目总共分为撰写爬虫方法，编写管道信息，和执行爬虫三大部分，其中爬虫方法中主要使用xpath解析网页获取主要的数据

查看全文

声明：本文仅代表作者观点，不代表本站立场。如果侵犯到您的合法权益，请联系我们删除侵权资源！如果遇到资源链接失效，请您通过评论或工单的方式通知管理员。未经允许，不得转载，本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP

实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

前往安装

proginn2204371062

1月前来过

职业方向：嵌入式实习生

项目报价：全职 · 300/日 · 6525/月

联系方式：立即查看

服务企业：0家

累计提交：0工时

查看主页

分类

下载工具性能测试和优化数据取证软件工作流引擎语法解析工具手机Web开发框架邮件列表管理 IDEA插件 jQuery多媒体插件 jQuery语法着色缓存系统开源XML数据库 PaaS系统/容器手机操作系统 Vue 组件

推荐作品

电影App

1.负责该项目的app端研发 2.使用flutter编写电影、电视剧播放器 3.接入广告sdk，支持深链接导流、支持多语言、支持内购

某企业定制化项目

开发某基金产品的全部功能和对接第三方，日常运营和线上问题的排查和解决。接某国企旗下公司的业务流转系统和供应链系统，跟原系统打通，并培训相关甲方同事。某银行的外包项目，还有toc端的社交软件，智能ai应用，使用大模型生成主流的智能应用，目前市面主流的ai产品已开发完成。有低代码初级中级高级认证，可快速搭建普通的应用。

LLM-RAG-系统

1.私有化离线部署LLM模型 2.可将LLM模型返回json格式化接口 3.LLM可解析语义访问数据库(例如mysql)或文档等文本资料返回数据

黄孝河水务可视化大屏

1.黄孝河水务可视化大屏项目是一个由unity嵌入H5后完成的一个U3D项目，我主要负责的是H5模块的开发 2.H5模块主要用的技术是vue3+echarts+axios, 通过与unity的方法通信，实现该项目的动态运行 3.该项目难点是与unity开发的方法通信，会频繁遇到unity和H5的参数、方法互调，通过查阅资料，很好的解决了这个问题

神州租车项目

本人负责司机运营相关业务，包括司机运营状态图大屏展示，实时同步司机信息和状态，以及部门业务的报表生成。还有检索周边空闲司机，动态订单行驶轨迹获取和计算。负责司机端的核心业务，拥有着高并发大数据量经验，曾独立开发内部使用的后端管理系统和h5页面。此项目为一线互联网项目，从0开始开发，已开发多年，对主流互联网和it问题有着实际的开发和解决经验，可独立开发前后端的功能，并按时保质保量交付。