Leefs

一、查询系统内置函数 1.1 查看系统自带的函数 1.2 显示自带的函数的用法 语法 1.3 详细显示自带的函数的用法 语法 二、常用内置函数 字符函数 函数名称 返回值类...

一、基本操作 1. 进入HBase客户端命令行 2. 查看所有表 3. 其他 二、表的操作 1. 创建表 2. 插入数据到表 3. 扫描查看表数据 查看整表信息 根据row...

1、上传文件命令 语法 示例 上传成功后，返回一串带有组和路径标识的字符串，这是文件的id（下方都以文件ID表示）。 通过group1分组对应fastdfs数据存储路径下查...

一、NameNode元数据 1.1 概述 NameNode 的所有操作及整个集群的状态都存储在metadata（元数据）中，metadata通过 Fsimage 和 Eid...

前言 在通过hdfs命令行操作时，我们通常会用到hadoop fs、hadoop dfs、或者是hdfs dfs,但是很少在意三者的区别。 hadoop fs：该命令可以用...

前言 本篇将讲述Docker的一些简单命令 一、Docker简单命令 systemctl命令是系统服务管理器指令 启动Docker 停止docker 重启Docker 查看...

前言 本篇内容包括 SpringBoot整合Quartz Quartz持久化 分布式任务调度 一、介绍 1.1 Quartz集群 ​ Quartz集群中每个节点都是一个单独...

1、Map 作用 将数据流中的数据进行转换, 形成新的数据流，消费一个元素并产出一个元素。 示例 代码 2、flatMap 作用 消费一个元素并产生零个或多个元素 示例 代...

前言 UDF、UDAF、UDTF都是用户自定义函数，用户可以通过 spark.udf 功能添加自定义函数，实现自定义功能。 UDF：用户自定义函数(User Defined...

一、概述 1.1 简介 ​ 分区提供了一个隔离数据和优化查询的可行方案，但是并非所有的数据集都可以形成合理的分区，分区的数量也不是越多越好，过多的分区条件可能会导致很多分区...

一、概述 1.1 介绍 flink的 standalone（standalone deploy mode）部署模式，指的是flink直接在操作系统上启动flink相关服务如...

前言 一般在使用ELK对日志进行收集时，为了避免单个索引文件过大，通常按日期来对日志做切割，根据日期对产生的日志生成相应的索引。 索引名称通常如下方所示： 上方是从ngin...

前言 在ELK架构中，使用Elasticsearch来存储系统日志时，有如下典型的特点： 数据量非常大 经常访问新增的数据，随着时间的推移，数据的价值也在逐渐降低 随着数据...

一、简介 KQL：（Kibana Query Language ）查询语法是Kibana为了简化ES查询设计的一套简单查询语法，Kibana支持索引字段和语法补全，可以非常...

一、行转列 1.1 相关函数 concat concat(string A, string B…)：用于拼接字符串,返回输入字符串连接后的结果，支持任意个输入字符串 con...

前言 本篇使用的环境是： spark版本：3.0.0 scala版本：2.12 一、导入依赖 注意：如果使用scala 2.11版本需要使用如下依赖,不然会出现依赖版本不匹...

一、概念 简介 Hive 中的表对应为HDFS上的指定目录，在查询数据时候，默认会对全表进行扫描，这样时间和性能的消耗都非常大。 分区表实际上就是对应一个HDFS文件系统上...

前言 本文先从一个例子来进行引入。 当我们对其中名称为age的字段进行检索时，得到如下结果 可以检索到我们想要的结果，但是我们用name字段进行检索我们得到如下结果。 此时...

前言 ​ 现在不管是在工作中还是在平时练习测试，启动一个Tomcat已经不能在满足我们需求，本篇小编将带着大家详细解如何在本地部署多个Tomcat并同时运行，进行开发测试环...