KIM晓峰

这是 Java 爬虫系列博文的第四篇，在上一篇 Java 爬虫遇上数据异步加载，试试这两种办法！ 中，我们从内置浏览器内核和反向解析法两个角度简单的聊了聊关于处理数据异步加载问题。在这篇文章中，我们简单的来聊一聊爬虫时，资源网站根据用户访问行为屏蔽掉爬虫程序及其对应的解决办法。…

说起网络爬虫，大家想起的估计都是 Python ，诚然爬虫已经是 Python 的代名词之一，相比 Java 来说就要逊色不少。有不少人都不知道 Java 可以做网络爬虫，其实 Java 也能做网络爬虫而且还能做的非常好，在开源社区中有不少优秀的 Java 网络爬虫框架，例如 …

在计算机发展初期，每台计算机是串行地执行任务的，如果碰上需要IO的地方，还需要等待长时间的用户IO，后来经过一段时间有了批处理计算机，其可以批量串行地处理用户指令，但本质还是串行，还是不能并发执行。如何解决并发执行的问题呢？于是引入了进程的概念，每个进程独占一份内存空间，进程是…

你可能有所感悟。零散的资料读了很多，但是很难有提升。到处是干货，但是并没什么用，简单来说就是缺乏系统化。另外，噪音太多，雷同的框架一大把，我不至于全都要去学了吧。 这里，我大体根据基础、Java基础、Java进阶给分了下类，挑的也都是最常用最重要的工具。 这篇文章耗费了我大量的…

有不少朋友在开发爬虫的过程中喜欢使用Selenium + Chromedriver，以为这样就能做到不被网站的反爬虫机制发现。 先不说淘宝这种基于用户行为的反爬虫策略，仅仅是一个普通的小网站，使用一行Javascript代码，就能轻轻松松识别你是否使用了Selenium + C…

今天是我来杭州找工作后参加的第一次现场面试，也算是工作以来第一次正式的技术面试，超级超级紧张！两个面试官貌似都是做中间件和数据库编程方向的，问的很多我都不太擅长，两轮下来四个字总结那就是生无可恋。今天凭记忆总结一下，调整心态继续征程吧！ 代码实现二叉树的数据结构。 写SQL语句…

HashMap 在日常开发中非常常用，它基于哈希表实现，以 key-value 形式存储。本文通过 JDK1.8 的源码，分析一下 HashMap 的内部结构和实现原理。 在 JDK1.7 之前，HashMap 底层由数组 + 链表实现，也就是链表散列。当向 HashMap 中…

一个优秀且经验丰富的Java开发人员的特点之一是对API的广泛了解，包括JDK和第三方库。我花了很多时间学习API，特别是在阅读Effective Java 3rd Edition之后，Joshua Bloch建议如何使用现有的API进行开发，而不是为常用的东西写新的代码。 在…

在上一篇 Java基础之线程那些事 我们介绍了关于线程和进程的相关概念，还留下了个题目：即三个窗口同时卖100张票的问题，那么今天就来说说多线程编程的实现。 在单核的时代，多线程会带来线程切换的损耗，但是即使是这样多线程对图形化界面更有意义，它可增强用户体验。(例如你在单核机器…