Jed

使用自定义拦截器 + Multiplexing Channel Selector 实现不同数据按需发往下游 Flume Agent 的案例...

Flume Agent 1 和 Flume Agent 2 将日志发送给 Flume Agent 3，由 Flume Agent 3 统一进行下一步处理...

Flume Agent 1 写数据到下游 Flume Agent 2 和 Flume Agent 3，优先写入 Flume 2，当 Flume 2 故障后，写到 Flume...

负载均衡，Flume Agent 1 以轮询或者随机的方式写数据到下游的两个 Flume Agent...

复制和多路复用，上游 agent 把同一条数据发送给下游多个 agent，核心组件是 Replicating Selector...

监控目录下的多个追加文件写入 HDFS，Taildir Source -> Memory Channel -> HDFS Sink...

监控目录下的多个新增文件写入 HDFS，数据流：Spooling Directory Source -> Memory Channel -> HDFS Sink...

收集服务器本地日志文件中的数据写到 HDFS，Exec Source -> Memory Channel -> HDFS Sink...

NetCat TCP Source -> Memory Channel -> Logger Sink...

基于 Centos-9 arm 架构服务器、Hadoop-3.3.1 完成 HBase-2.4 完全分布式集群安装部署...

介绍Hive内置的运算符，运算符与函数在写法上区别是：函数：SELECT function(col1, col2)；运算符：SELECT col1 OPERATOR col...

介绍Hive的两个类型转换函数CAST和BINARY的用法并提供测试案例，CAST是最常用的转换列或者计算结果类型的函数。...

介绍Hive自定义函数UDF、UDTF、UDAF的创建过程和使用方法，记录Hive函数相关的DDL。...

SQL中的窗口函数综合练习，常用的窗口函数包括：NTILE、ROW_NUMBER、RANK、DENSE_RANK、LAG、LEAD...

介绍Hive窗口函数的基本使用，涉及到14个窗口函数，包括：ROW_NUMBER、RANK、DENSE_RANK、LAG、LEAD等常用窗口函数...

介绍Hive内置的表扩展函数，对每个函数进行描述说明、给出其返回值类型，出现的hive版本以及SQL案例...

使用 CASE WHEN 之后的聚合逻辑实现行转列，使用 UNION 实现列转行，使用CONCAT_WS + COLLECT_SET函数实现聚合之后的数组中元素拼接。...

介绍Hive内置的聚合函数，对每个函数进行描述说明、给出其返回值类型，出现的hive版本以及SQL案例...

使用 GROUPING SETS 多维分析函数实现一个小案例，统计每个部门各有多少人、男女各多少人、每个部门男女各多少人，引出GROUPING__ID、CUBE、ROLLU...

介绍Hive内置的条件判断和NULL值处理函数，对每个函数进行描述说明、给出其返回值类型，出现的hive版本以及SQL案例...