用户859513370614

、算子调优一：mapPartitions   普通的map算子对RDD中的每一个元素进行操作，而mapPartitions算子对RDD中每一个分区进行操作。如果是普通的ma...

本文讲解了如何合理使用rebase命令使我们的提交历史干净、简洁！...

刚毕业的时候用过极短时间的SVN，后面就一直在用Git来做代码的版本控制了，前前后后差不多4年的时间，期间做了一些在使用Git过程中的记录和心得，在这里分享给大家，大家或许...

前言 最近在网上有个真实发生的案例比较火，说的是一个新入职的员工，不会用 git 拉代码，第二天被开除。由此，可见 git 对我们工作的重要性，无论是前端后端，都是离不开 ...

本文主要讲解 Kafka 是什么、Kafka 的架构包括工作流程和存储机制，以及生产者和消费者，最终大家会掌握 Kafka 中最重要的概念，分别是 broker、produ...

一、我与快递小哥的故事 一个很正常的一个工作日，老周正在忙着啪啪啪的敲代码，办公司好像安静的只剩敲代码的声音。突然，我的电话铃声响起了，顿时打破了这种安静。 还好有菜鸟驿站...

编程是一种创造性的工作，是一门艺术。精通任何一门艺术，都需要很多的练习和领悟，所以这里提出的“智慧”，并不是号称一天瘦十斤的减肥药，它并不能代替你自己的勤奋。然而由于软件行...

面试总会遇到一些关系高并发、分布式的问题，可是自己工作中不接触，自学又不深入，这可怎么办？？？？？？...

本篇文章由介绍MapReduce调度原理开始，引出Hadoop1.x版本中MapReduce运行架构的弊端，最后介绍Hadoop2.x以后MapReduce on Yarn...

本人虽然不是计算机专业的学生，但是有一点编程基础，目前正在学习计算机知识，对大数据和人工智能还是比较感兴趣。 马云在卸任时讲到：“很多人还没搞清楚什么是PC互联网，移动互联...

你将 get 到分布式计算引擎的核心思路，MapReduce 并行度解析，碍于篇幅不宜太长所以先这么多，之后会继续更新相关内容。...

Spark 是 UC Berkeley AMP lab 所开源的类 Hadoop MapReduce 的通用并行框架，是专为大规模数据处理而设计的快速通用的大数据处理引擎及...

本文的标题是如何写出让别人看不懂的选择器，但是本意不是希望大家去写如此复杂的选择，一些复杂（怪异）的选择器在一些特定场景下也许有着妙用，又或者写出这种选择器是基于当时的特殊...

一、JSON的2个重要方法：JSON.stringify(),JSON.parse() 二、简写1.key 和vuale一样时可以简写 2.方法简写...

![ConcurrentHashMap1.7的原理总结.png](https://p1-juejin.byteimg.com/tos-cn-i-k3u1fbpfcp/46b...

3.异常 3.1 异常（记忆） 异常的概述 异常就是程序出现了不正常的情况 异常的体系结构 3.2 编译时异常和运行时异常的区别（记忆） 编译时异常 都是Exception...