Jerryraul

现在的网站越来越多采用了 Ajax 技术，这样程序便不能确定何时某个元素完全加载出了。如果实际⻚⾯等待时间过⻓导致某个dom元素还没出来，但是你的代码直接使⽤了这个WebElement，那么就会抛出NullPointer的异常。还有些情况是你打开一个网站，比如你的网速比较慢，网…

想要从零基础成为一名资深的互联网Python开发工程师。有几个阶段是必须要进行的。第一个就是入门阶段俗称Python基础，目前在学习Python的众多人群当中，这一类的人是最多的。甚至有的朋友在这个阶段待了很久也没有实质性的突破。就像我们看的玄幻小说一样，感觉就要突破了，但是总…

最近分享了一部分爬虫知识点。那么我们今天可以通过目前掌握的爬虫技术以及Python技术来爬取一个某平台的音频数据。 我们都知道一般数据都是url地址所对应的网页源码中。如下图 但是如果要爬取的数据不在当前url地址所对应的网页源码中那真是比较痛苦了。这种情况下，数据要么是通过后…

今天突然想到之前被要求做同性质银行的数据分析。妈耶！十几个银行，每个银行近5年的财务数据，而且财务报告一般都是 pdf 的，我们将 pdf 中表的数据一个个的拷贝到 excel 中，再借助 excel 去进行求和求平均等聚合函数操作，完事了还得把求出来的结果再统一 CV 到另一…

学习完爬虫网络请求模块之后，同学们基本上对爬虫已经有了一个浅显的认知了。爬虫、爬虫，肯定是要爬取数据。不管是网页端的数据又或者是移动端的数据。数据的类型有很多，诸如文字、图片、音频、视频...等等。我们爬取数据还是有特定的目标以及主题的。这个时候就要对数据进行筛选和解析。后面的…

故事是这样的，我的一个朋友他有十多个 excel 文件需要合并~当时给他提供了实现的思路。但转身一想，万一我的朋友中还有需要如此重复操作耽误了与小姐姐约会咋办？不行，你们不能跟我一样。所以为了美好的明天，今儿还是好好学习吧~ 那还是使用到我们的老朋友pandas，我们可以使用 …

自动化办公又来了。☺ 如果现在我们有需求要下载分析近5年的所有财报，就需要点点点点点点...进行下载。但是，如果大家学会了今天的技术，我们除了不用点点点之外，可能会哭，也可能会秃。 首先，我们应该确认财报.pdf的链接是否就在当前我们看到的https://www.moutaic…

做过爬虫的同学基本都明白，爬虫其实就是那三板斧。第一，明确我们要爬取的网站。第二，向网站发起请求，分析网站数据结构，第三，爬取数据，保存数据。三板斧整完了，基本我们的爬虫需求就搞定了。在第二步的时候，我们需要向目标网站发起请求，这个就是Python无与伦比的优势了，因为它不仅有…

我们想要通过 Python 来实现相应的功能，首先要想着能不能借助前辈封装好的库来实现。此处恰好是对接 excel 的表格数据处理、保存。所以我们就需要导入 numpy 、pandas 如果 到期日/返售日 为时间序列索引的话，那么实际上，想要通过月份去取此月所有的值，就可以直…