打开该网址,点击评论
如图中红色圈中的评论,分析发现,在网页源码中查找不到。
找啊找,找啊找,圈中的评论就是不在网页源码中。那只有一种可能,在我们看不到的方式传送。
用火狐浏览器,打开开发者工具,点击网络
真的找到了啊
那么接下来我们要知道这个包传递信息的网址
点击消息头,红方框中的请求网址就是这个评论数据包传递的网址
网址如下
看起来网址太长,太复杂(稍安勿躁),那么先复制网址,在浏览器上打开看看是什么东西
复杂的网址中,有些乱七八糟的可以删除,有意义的部分保留。切记删除一小部分后先尝试能不能打开网页,如果成功再删减,直到不能删减。最后保留下来的网址,如下
currentPage=1意思是当前页码是第一页。如果改动为currentPage=3表示是第三页。
好了,下面是代码
上面只是抓了一个评论。下面是抓取近100页的网页所有评论,代码如下
(1)Python所有方向的学习路线(新版)
这是我花了几天的时间去把Python所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。
最近我才对这些路线做了一下新的更新,知识体系更全面了。
(2)Python学习视频
包含了Python入门、爬虫、数据分析和web开发的学习视频,总共100多个,虽然没有那么全面,但是对于入门来说是没问题的,学完这些之后,你可以按照我上面的学习路线去网上找其他的知识资源进行进阶。
(3)100多个练手项目
我们在看视频学习的时候,不能光动眼动脑不动手,比较科学的学习方法是在理解之后运用它们,这时候练手项目就很适合了,只是里面的项目比较多,水平也是参差不齐,大家可以挑自己能做的项目去练练。