apify是一个基于NodeJS的爬虫框架，它集成了puppeteer，cheerio等常应用于爬虫服务的NodeJS库，致力于填补复杂场景下的web页面爬虫服务上的功能空白，如通用的爬虫任务入口、爬虫任务的错误捕获和重试、爬虫任务队列/列表、爬虫内部状态监控以及代理池等。 提…

前文传送门：小白学Python爬虫（1）：开篇小白学Python爬虫（2）：前置准备（一）基本类库的安装小白学Python爬虫（3）：前置准备（二）Linux基础入门小白学Python爬虫（4）：前置

声明 下文只是自己对比一些行业现状和过去半年经历的反思，并不影射任何公司任何部门，我在新团队工作的很开心，和优秀的人做有挑战的事是非常有趣的经历，文中的观点和认知也仅是当前这个时间节点上的一些感悟，未

Gogs 是一款极易搭建的自助 Git 服务。 Gogs 是用 Go 语言开发的，最简单、最快速和最轻松的方式搭建自助 Git 服务。 除了可以根据操作系统平台通过 二进制运行[1]，还可以通过 Docker[2] 或 Vagrant[3]，以及 包管理[4] 安装。 任何 G…

Android 7.0 源码进行系统的分析，这是一个从实践角度去分析源码的项目，目前项目一期已经完成。 第一次阅览本系列文章，请参见导读，更多文章请参见文章目录。 Android是一个庞大的系统，Android Framework只是对系统的一个封装，里面还牵扯到JNI、C++…

己在分工体系的位置，处理不好自身与技术、业务的关系所致。 具、技术组件研究的相关事情。我有个朋友经常吐槽我说：”你们天天加班加点写了 那么多代码，然后呢？有改变什么吗？还不是写出了一堆垃圾。”仔细想想很多时候 户痛点的体会，对业务发展的思考。这些都是与价值紧密相关的部分。我们很…

DDNS，即动态DNS，简单来说就是服务器的 IP 地址经常变动，这个时候需要一个主动上报的服务来更新 DNS 的解析记录，保证域名指向正确的 IP 地址。 比如在自己家中的树莓派上部署了某些服务，且路由器有公网 IP，由于每次重新拨号，公网 IP 都会变，所以想要根据域名去访…

一般情况下，如果没有特别说明，代理技术默认说的是正向代理技术。关于正向代理的概念如下： 正向代理(forward)是一个位于客户端【用户A】和原始服务器(origin server)【服务器B】之间的服务器【代理服务器Z】，为了从原始服务器取得内容，用户 A 向代理服务器 Z …