哪些年一起搬过砖的工

业界商用的JVM收集算法都是采用分代收集，按不同代的特点采用不同的收集算法。 通常情况，年轻代采用复制算法，年老代采用标记-整理或标记-清除算法。 ParNew收集器就是Serial收集器的多线程版本，收集算法和回收策略和Serial完全一样，也会Stop The World。…

这里碰到一个小插曲，根据MongoDB官网说明，在4.2版本规划了对分布式事务的支持。并且从4.0开始，支持事务的java驱动版本是3.8.0。 但是在mongoDB升级到4.2，驱动从3.10降为3.8之后，仍然出现了驱动版本不支持分片事务的错误，最后将3.8版本的驱动拷贝到…

Spark可以不依赖Hadoop运行。如果运行的结果（包括中间结果）不需要存储到HDFS，并且集群管理器不采用YARN的情况下是可以不依赖hadoop的。

1. 集群环境规划 2. 新建用户及用户组 3. 修改master(172...6)主机名 4. 配置ip与主机名映射 4. 配置免密登录 3. 解压并配置环境变量 4. hadoop配置 5. 运行hadoop

集群管理器：启动执行器节点，有Mesos、YARN（Hadoop）、独立集群管理器（spark自带的集群管理器），在standalone模式中即为Master主节点。 --master spark:// 表示会使用独立模式，也就是使用spark自带的独立集群管理器。提交时使用的…