为了屏蔽这些垃圾流量，或者为了降低自己服务器压力，避免被爬虫程序影响到正常人类的使用，开发者会研究各种各样的手段，去反爬虫。

很多朋友使用Python中的Pandas这个库进行Excel的数据处理，数据处理从宏观上分为这么3个阶段：数据读取、数据处理、数据输出。

在做爬虫的时候，我们往往可能这些情况： 网站比较复杂，会碰到很多重复请求。 有时候爬虫意外中断了，但我们没有保存爬取状态，再次运行就需要重新爬取。 还有诸如此类的问题。 那怎么解决这些重复爬取的问题呢

![](https://p3-juejin.byteimg.com/tos-cn-i-k3u1fbpfcp/83fa1373bead4034915ea98a86f1360c~tplv-k3u1fbp

我们在前面学习完了，数据类型、流程控制语句，这时候我们要把这些分散的代码把她门封装起来，需要的时候随时可以使用它们。 这时候就有了“函数”这个概念，话不多说，我们今天就来学习函数吧～ 1.函数简介 1

我用 Python 爬取了京东上面的 “粽子数据” 进行分析，看看有啥发现吧！ 本文就从数据爬取、数据清洗、数据可视化，这三个方面入手，但你简单完成一个小型的数据分析项目，让你对知识能够有一个综合的

前几天 ~女票~ -> 女同学甩给我上面那张图，说她也想每天都能收到甜甜的彩虹屁。好家伙，我一寻思这不就是个彩虹屁bot嘛，自欺欺人地说？但既然她开口了，那咱必须得给她整到位，走起🚀 考虑到她最近在准备考研，需要有人每天鼓励她，所以我打算给她每天来点毒鸡汤，然后做个考研倒计时…

好几天没给大家写文章了，原因是这几天比较忙，再又马上开学了，所以有些事情有些力不从心，不过之后，我会调整好时间，尽量每周给大家带来3-4篇的文章，接下来的一段时间，文章内容会有一些跟Python基础相关，毕竟目的是跟大家一起学习，所以之后会介绍一些Python的常用数据结构以及…

该系列文章是讲解PythonOpenCV图像处理知识，前期主要讲解图像入门、OpenCV基础用法，中期讲解图像处理的各种算法，包括图像锐化算子、图像增强技术、图像分割等，后期结合深度学习研究图像识别、