一面是上海的小哥打来的，3.12 号中午确认的内推，下午就打来约时间了，也是唯一一个约时间的面试官。约的晚上八点。紧张的一比，人生第一次面试就献给了阿里。 幸运的是一面的小哥特温柔。好像是个海归？口语中夹杂着英文。废话不多说，上干货： 我： 巴拉巴拉...。 面试官： 我看你简…

数据倾斜是大数据领域绕不开的拦路虎，当你所需处理的数据量到达了上亿甚至是千亿条的时候，数据倾斜将是横在你面前一道巨大的坎。 迈的过去，将会海阔天空！迈不过去，就要做好准备：很可能有几周甚至几月都要头疼于数据倾斜导致的各类诡异的问题。 话题比较大，技术要求也比较高，笔者尽最大的能…

读取LZO文件时，需要先创建索引，才可以进行切片。 Apache：运维麻烦，需要自己调研兼容性。 CDH：国内使用最多，不开源，已开始收费。老版本不再进行组件后续兼容性的更新。 HDP：开源，不稳定，已被CDH收购，合并为CDP。 128G内存，20核物理CPU，40线程，8T…

假设有一个展示用户详情的需求，分两步，先调用一个HTTP接口拿到详情数据，然后使用适合的视图展示详情数据。 如果网速很慢，代码发起一个HTTP请求后，就卡住不动了，直到十几秒后才拿到HTTP响应，然后继续往下执行。 这个时候你问别人，刚刚代码发起的这个请求是不是一个同步请求，对…

显而易见，使用索引可以加快我们检索数据的速度，生活中书籍的目录、图书馆里的各种书架编号、号码簿上的检索页等，都少不了索引的身影。 回到计算机的世界，任何一种数据结构都不是凭空产生的，一定会有它的诞生背景和解决的问题。我们先举个最简单的例子，下图是一个有序递增的数组，里面包含十个…

本文漏的图片已经补上，请放心阅读。 前面的文章有时候会留一些思考题，主要是想让大家多想想文章的内容，所以没留答案，评论区回复也是五花八门。写这篇文章是想再帮大家巩固一下之前的内容，子曾经说过：“温故而知新，可以上王者”。Java中一共有四类八种基本数据类型，看下表： 除掉这四类…

上一篇文章《爬取11088个知乎专栏，打破发现壁垒》里提到，知乎官方没有搜素专栏的功能，于是我通过爬取几十万用户个人主页所关注的专栏从而获取到11088个知乎专栏。 本回筛选出其中涉及：编程、python、爬虫、数据分析、挖掘、ML、NLP、DL等关键词的专栏，按照排名、关注人…

Spring框架自诞生以来一直备受开发者青睐，有人亲切的称之为：Spring 全家桶。它包括SpringMVC、SpringBoot、Spring Cloud、Spring Cloud Dataflow等解决方案。 很多研发人员把spring看作心目中最好的java项目，没有之…

从大一开始就有写日记的习惯，在日记里记录生活琐事或者一些感想，没有固定的排版或者格式，想到什么就写什么，格式散漫内容较为生活化也导致我很少整理日记中的内容放到博客里，因为都是些生活琐事或者一些牢骚话，实在没必要公之于众，但是今天在写这篇日记的时候，发现上一篇日记竟然是挺久之前写…