小志Codings

目前，许多网站采取各种各样的措施来反爬虫，其中一个措施便是使用验证码。随着技术的发展，验证码的花样越来越多。验证码由最初的几个数字组合的简单的图形验证码，后来加入了英文字母和混淆曲线。有的网站还可以看到中文字符的验证码，这使得识别愈发困难。 现在交互式验证码越来越多，如滑动验证…

在上一篇文章中教会了大家如何创建了列表，还学习了如何操作列表元素。 本次文章主要为大家分享如何遍历整个列表，这只需要几行代码就可以，无论列表有多长，循环能够让你对列表中的每一个元素采取一个或者是一系列相同的措施，从而高效的使用列表。 当我们需要遍历整个列表，并对列表元素执行相同…

在上一篇文章中，为大家分享了selenium的使用方法，因此今天这篇文章为大家带了的就是关于selenium的实战项目。 本次项目的内容是爬取51job的招聘信息，希望接下来的内容对你找工作有所帮助。 安装方式应该不需要我再概述了吧。 当所有必要内容都准备好了之后，就要开始分析…

在上一次文章中，为大家分享了什么是列表，以及列表的增删改查的四种用法。跟着代码进行学习，相信大家应该可以学到不少的东西。 今天的这篇文章为大家分享的是如何组织列表。很多时候，我们需要控制列表内元素的顺序，有时候你可能希望，保留列表元素最初的排列顺序，而有时候又需要调整排列顺序。…

本次分享的知识是列表的知识，我会用三篇文章来告诉你什么是列表，以及如何使用列表。 列表能够让你在一个地方存储组成的信息，其中可以包含几个元素，也可以包含数百万的元素。列表是新手可以直接使用的强大Python功能之一。 列表是按照特定顺序排列的元素组成。你可以创建包含字符串、整型…

在上篇文章中，我为大家介绍了Ajax的分析和抓取方式，这其实也是javascript动态渲染页面的一种方式，通过直接分析Ajax，仍然可以通过requests来实现数据的获取。 不过javascript动态渲染页面不止Ajax这种。有些网站的分页部分可能是通过javascrip…

相信大家在很多的时候，在公众号上经常会看到很多关于购买股票或者是基金的课程，让大家学会理财。就是所谓钱生钱。买股票与基金靠的不是运气，而是长期以来的经验，特别是对数据的敏感程度，做出正确的决策，因此今天我就特定的将股票网站的数据爬取下来，让各位买股票的小伙伴做一个参考。 按着上…

写了很多的教程，不知道大家发现没有，很多时候写爬虫，并保存数据的时候，一直都是将数据保存至txt文件或者是Excel文件中。不知道你是否想过，在企业的开发过程 ，数据是保存在哪里的吗？数据是保存在数据库当中，常见的数据库有MySQL、Oracle、mongodb等等。我们今天要…

pyquery是类似于jquery的网页解析工具，让你使用jquery的风格来遍历xml文档，它使用lxml操作html的xml文档，它的语法与jquery很像，和我们之前所讲的解析库xpath与Beautiful Soup比起来更加灵活与简便，并且增加了添加类和移除节点的操作…