- 这是我参与「第四届青训营 」笔记创作活动的的第1天*
前言
我是一个大二双非的大数据科班,目前只上过大数据导论的内容和学会用一些hadoop和spark组件。 可是我看到作业1到5。
怎么说捏,要我们去实现一些组件的底层的东西。发现这对我这种小菜鸡来说,有种降维打击的痛感。5个字节团队的前辈在深入浅出得给我们描述这些大作业的时候,我仿佛会回到项目实训的时候,但是项目实训也没有这种不知所措的感觉,至少看到项目知道该怎么下手。这些是萌新小白的吐槽吹水。
一.分布式计算系统
不会,下一个。
二.简单流计算系统设计
不会,下一个。
三.简易分布式存储系统的实现
不会,下一个。
四.简易分布式爬虫系统的实现
用过爬虫,但是不知道怎么给它们搞通信。
五.简易BI系统实现
用时一顿猛如虎(tableau),自己设计时大眼瞪小眼。
结束语
在青训营第一天虽然作业要求看不太懂,但是认识来个各个学校的各路大神,他们在大数据领域都有自己独到的见解,我刚开始以为青训营的课程是0基础的课程,我觉得我这几天要去看看以前常用的大数据组件的源码,去深挖实现原理,毕竟调用的时候用的很爽,自己造轮子的时候就萎了,希望在青训营这一个月,能跟大家学到更多青训营的知识。