都说年末了，该给自己写写总结了。今天我想谈一谈的是我在公司这一年多里的负责的部分工作 --- 爬虫。做了这么久的爬虫，是该写点什么，留下点什么。在我所负责的这一段时间了。我总结了一下大概有以下几类爬虫设计思想。 简单服务器定时爬虫， 客户端爬虫， lua 解析， javascript 解析， 服务器离线爬虫， 下面在来细聊以下。