某二手车网站数据采集

我要开发同款

proginn19292571662022年10月24日

156阅读

作品详情

1.采用scrapy框架进行数据采集，采集数据存放在MongoDB2.该网站主要的反爬技术为字体反爬，通过获取字体文件，解析字体，并替换返回的数据，得到真实的数据

查看全文

声明：本文仅代表作者观点，不代表本站立场。如果侵犯到您的合法权益，请联系我们删除侵权资源！如果遇到资源链接失效，请您通过评论或工单的方式通知管理员。未经允许，不得转载，本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP

实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

前往安装

proginn1929257166

1月前来过

职业方向：测试工程师

项目报价：全职 · 500/日 · 10875/月

联系方式：立即查看

服务企业：8家

累计提交：0工时

查看主页

分类

数据取证软件教程与指南电子电路设计软件 jQuery 文件上传网络游戏存储系统短信彩信开发包投票系统/问卷调查报表/图表制作 ASP 模板引擎 Basic 文字视图(Text)其他(Others)WP7开发工具

推荐作品

商品专区会场活动-h5 端

安装 node_modules 包管理⼯具辅助开发使⽤ JS-SDK ⾃定义分享内容给微信⽤户、实现⼩程序的跳转与交互头部 banner 使⽤ swiper 做⻚⾯滑屏效果，图⽚⾼度动态获取创建与原⽣ APP 端交互实现登录的公共流程⽅法 (公司所有 h5业务都适⽤) 利⽤ async/await、promise 和 setTimeout 的执⾏优化界⾯请求速度添加阿⾥云图⽚压缩代码优化图⽚内存⼤⼩某些复杂接⼝进⾏跨域请求处理，减少后端开发⼯作量利⽤ Jenkins ⼯具持续集成，版本发布/测试项⽬，将打包时间提升约 20%。

电⼦产品报价回收系统-微信⼩程序

JavaScript 包管理⼯具采⽤ yarn 使⽤ vue-cli 脚⼿架，创建 uni-app 项⽬利⽤ Underscore 提供的函数式编程及 JavaScript Array 对象⽅法处理系统交互相关数据及展示效果使⽤ swiper 做回收案例⼴播效果利⽤ web-view 完成⼩程序与h5 的交互，并编写资源位跳转公共⽅法 (跳转交互包括与h5、第三⽅⼩程序、微信公众号⽂章等) 独⽴封装 vue 组件，通过⽗⼦组件间通信，进⾏功能式开发，提⾼业务代码的可复⽤性使⽤ websocket 对⽤户进⾏消息中⼼推送

某网站数据爬取

1.采用feapder框架，使用多线程采集数据，且利用Redis数据库进行数据去重处理，数据存放在MongoDB 2.利用字体反爬，webpack处理、cookie反爬，验证码处理等技术进行js逆向

薪班班小程序

薪班班小程序是一款专为灵活用工、人力资源服务的小程序包含职位申请、开工打卡、面试签到、入职管理、合同签署、薪资发放等多种功能采用的基础技术栈包括spring、spring MVC、RPC、Redis、MySQL、MQ、ES、MongoDB、Zookeeper、分布式锁等对接*支付、第三方合同、第三方短信、*认证、*授权、招商银行银企直联登录等第三方服务本人在本项目中负责模块职位申请、开工打卡、合同签署、薪资发放、资金对账等核心流程的开发

C宇宙

C宇宙将产品与艺术融合，与元宇宙密切结合在一起！项目职责： 1.UI界面的布局。 2.与后台人员沟通以及接口的对接。 3.集成微信、支付宝支付等第三方SDK。 4.上架APP，并迭代开发。