lshua

大数据开发

赞

5

|

搜索文章

大数据开发

·

害，大数据不配在这个圈子，啥平台大数据多哇

lshua于2024-04-03 17:04发布的图片

赞过

4

2

大数据开发

·

1年前

SeaTunnel & SeaTunnel Web部署

SeaTunnel & SeaTunnel Web部署我这边已经配置成功就没有那些不成功的截图了，可以参考一下几点逐步确认： 1. 确认下`$SEATUNNEL_HOME...

1

8

大数据开发

·

难受

lshua于2023-12-26 17:00发布的图片

赞过

7

3

大数据开发

·

开启新一周的摸鱼，交出你们的追番列表

来点老旧冷门优质的番，近几年热门番就免了，我先来！！！
1. 薄樱鬼
2. 鬼平
3. 江户盗贼团五叶
4. 虫师
5. 只有我不存在的城市

展开

赞过

21

3

大数据开发

·

3年前

kudu数据目录切换(新增、删除或调整)

将数据目录配置修改成新的数据目录路径，如果加就添加，减就删除即可，多个目录用英文逗号分隔。切记不要在管理页面执行一次性修改所有节点，不管是cm还是ambri或者公有云的大数...

0

评论

大数据开发

·

4年前

spark shuffle

shuffle即对数据进行重组，并不是spark特有的知识点，之前也写过mapreduce中shuffle的处理流程可以查看：mapreduce之shuffle。不过spa...

0

2

大数据开发

·

4年前

JVM之运行时数据区

JVM是Java Virtual Machine（java虚拟机）的简写，是个概念。java每个版本发布的时候都会发布对应版本的java虚拟机规范The Java® Vir...

0

2

关注了

大数据开发

大数据开发

·

4年前

tez-ui部署

在HDP平台3.0版本之后移除了TEZ view组件。但是hive默认跑的引擎就是tez，yarn自带的resourcemanager ui看到的任务日志是applicai...

1

评论

大数据开发

·

在标签下加个搜索功能可好，搜个东西真是捉急

反馈 & 建议

1

点赞

关注了标签

大数据开发

关注了标签

大数据开发

大数据开发

·

5年前

clickhouse优化（持续更新...）

clickhouse中有非常多的表引擎，用得最多的当属*MergeTree表引擎，*MergeTree是clickhouse中最为强大的表引擎（the most robus...

11

2

关注了

大数据开发

赞了这篇文章

大数据开发

·

5年前

数仓利器-Hive高频函数合集

前言数据准备数据集建表语句窗口函数row_number：使用频率★★★★★rank：使用频率★★★★dense_rank：使用频率★★★★rank/dense_rank/r...

9

1

大数据开发

·

5年前

hive优化

第一次写优化相关的文章，先简单谈谈关于优化看法。首先一点是很多优化设计不管是缓存、索引还是排序等等，其核心的思想就是减少IO。然后在分布式场景下效率还遵循木桶效应，任务是并...

8

评论

大数据开发

·

5年前

mapreduce之shuffle

shuffle是mapreduce任务中耗时比较大的一个过程，面试中也经常问。简单来说shuffle就是map之后，reduce之前的所有操作的过程，包含map task端...

6

评论

个人成就

文章被点赞 42

文章被阅读 53,799

加入于

2020-05-06