技术性的问题,这个实训课程刚开始的时候,我的前几次爬取都是失败的,我无法从网站中获取信息,由于我的爬取速度过快,时间过短,导致被网站识别出来,并被封掉了IP。最开始的时候,我在解决这个问题的时候我的第一想法是如果被封掉IP了,那就解封,那就写一个部分让他去验证,解除掉封管之后,我就可以继续爬取信息。所以这个问题大概有两天时间,也没有得到解决。最后我发现,其实当我们在爬取信息的时候只要我们不暴露我们的真实IP不就可以了。我们只要把我们隐藏起来不就不会被封了。然后我就去学习了最简单的一种挂代理IP的方式,解决了这个问题。在这个问题中,我认为是思维方式的一种转变,这个问题为我提供了一种不同的思路,却可以更加简单快捷的解决我的问题,少走了很多弯路,却使我们顺利的解决了问题,并且达到了想要的目的。3. 但在整个实训课里,我认为我最大的体会不是python有多难学,爬虫有多麻烦,而是简洁的代码有多大的魅力以及代码的奇妙。最开始的写的很复杂,但是在转变思路以后,我发现我的代码变得简洁且高效。令我感到惊讶的是,只有那么短短的几行代码,却可以获取到这么多信息。这难道不是代码的高效性吗?简洁的代码就更加具有魅力,简单的书写逻辑和方式,却可以实现着这么便捷的功能。我感受得到这应该就是人工智能的魅力吧。虽然我不知道这是不是属于人工智能范畴,但是我觉得,能让生活变得简单且高效就是一件十分有意义且节约资源的事情。也让我知道了,并不是所有的事情都要做到越繁琐越好,简洁美的魅力会比繁琐的事物更加吸引人。声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态
评论