摸鱼专家

xdm，大家好，我是摸鱼专家呀，我又带来最新的排行榜啦。 初衷：通过排行榜激励每位创作者，创作出许许多多的优质文章，让大家卷起来

给掘金做了一个数据统计分析工具，统计大部分作者，每天/每周/每月增长多少赞/浏览，生成top榜单，以及每日表格展示出来

给掘金做了一个数据统计分析工具，可以统计到大部分作者，每天天增长多少赞，每个小时增长多少浏览，生成top榜单，展示出来

先观察 模糊的地方就是有些小黑色点 只需去掉小黑点，就清楚了  先看下效果 原图 修复后  是不是看着还不错 想思路 如何去掉小黑点，拿到每个像素点 将小黑点变成白色的就OK了 去操作 观察每个像素值

简单介绍一下 Flink   Flink 是一个框架和分布式处理引擎，用于对无界和有界数据流进行有状态计算。并且 Flink 提供了数据分布、容错机制以及资源管理等核心功能。Flink提供了诸多高抽

Kryo序列化 Kryo序列化比Java序列化更快更紧凑，但Spark默认的序列化是Java序列化并不是Spark序列化，因为Spark并不支持所有序列化类型，而且每次使用都必须进行注册。注册只针对于

Spark解决什么问题 二 Spark为什么会有自己的资源调度器 三 Spark运行模式 四 Spark常用端口号 五 Spark提交作业参数 六 Spark的transformation算子

这是我参与更文挑战的第27天，活动详情查看：更文挑战 1 Shuffle优化 Map阶段 增大环形缓冲区大小。由100m扩大到200m 增大环形缓冲区溢写的比例。由80%扩大到90% 减少对溢写文件的

Hadoop常用端口号 hadoop2.x Hadoop3.x 访问HDFS端口 50070 9870 访问MR执行情况端口 8088 8088 ，Hadoop配置文件以及简单的Hadoop集群搭建