XinXing

本篇文章仅适用于YARN群集，并描述了如何为您的群集调整和优化YARN。 正常情况下，需为系统预留20%左右的内存。视情况分配系统占用内存，如果你192GB的内存也给系统192GB*20%吗，这显然是不合理的。 生产上部署一般遵循存储计算一体化，计算时发现本节点有数据不需要去其…

我们需要某个类中的一个方法，但是这个类没有提供这样的一个方法，所以我们需要隐式转换，转换为提供了该方法的类后，该类则变为了原来的类的增强类。某个类+该类不具备的方法->增强类。 举个例子：一个普通人people拥有吃饭、睡觉等基本方法，当people这种普通人有一天想要变成一位…

注解工具。从此不用写getter setter这些 运行JAVA程序时启动visualvm,查看jvm的情况。 在JVM中分析内存对象布局方案的微型工具箱。 它使您可以估计对象占用的内存量。这允许最简单但最有效的性能改进。

源码下载地址Apache官网：https://archive.apache.org/dist/zeppelin/zeppelin-0.9.0-preview2/Github：https://githu

Hive-2.X、3.X新增的元表（待续。。。） SD_ID：TBLS表数据与该字段关联，则可知道，该表存储的基本信息。

安装Plugin前置1、插件下载地址：https://github.com/azkaban/azkaban-plugins/tree/3.0.02、解压缩修改通用插件配置1、配置commonpriva

本篇博文，我将带你通过借助源码以及官方文档来完成自定义UDTF的编写与打包。当你阅读完本篇文章，你已经拥有了编写(UDF、UDAF)的能力，相信即使官方在新的版本上做出较大改动，你一样可以在短时间内驾驭它。 2）重写initialize方法。此方法返回UDTF的字段名信息（定义…

源码下载地址Apache官网：https://archive.apache.org/dist/spark/spark-2.4.6/Github：https://github.com/apache/sp

**/jmx** 服务端的Metrics，以JSON格式输出。