技术随笔

从那刻起，我诞生了一个想法——撸一个和Flink SQL Helper差不多的插件，但是for Hive and Spark SQL。我趁着国庆休假的时候完成了大部分逻辑，并陆陆续续自测、在公司里..

前阵子向大家分享了我写的插件Flink SQL Helper。最近梳理了我之前的学习相关知识时的笔记，希望能够帮到对这一块实现感兴趣的同学。

分享一个能够有效提升FlinkSQL开发效率的插件。目前市面上都没有类似的插件，希望这个开源项目能给广大开发者带来福利。

版本 日期 备注 1.0 2023.5.15 文章首发 本文首发于泊浮目的掘金:https://juejin.cn/user/1468603264665335 0. 概要 最近因为业务需要在学Go语言

前阵子遇上了一个Starrocks上的SQL性能问题。之前没暴露原因有2: 1. 没对单个SQL的内存消耗做限制。 1. 不到黑五，量没有上来。

前阵子在B站刷到了周志明博士的视频，主题是云原生时代下java 主要讲的是云原生时代下的挑战与Java社区的对策。这个视频我在两年前看到过，当时也是印象深刻。现在笔者也是想和大家一起看看相关项目...

最近负责了产品中一部分的监控事宜。我想到时序数据库的对于RT和IOPS的要求应该很高，因此想看看它内部是怎么实现的——会不会和我认识的Kafka、HBase很像。

最近Iceberg有点小火，在这里也是根据自己看到的资料做个笔记输出一下。数据湖的定义就不说了，不了解的小伙伴可以看我之前做的笔记大数据学习笔记1：数仓、数据湖、数据中台。

商业智能（Business Intelligence）诞生在上个世纪 90 年代，它是将企业已有的数据转化为知识，帮助企业做出经营分析决策。

大数据从数据源开始，经过分析、挖掘到最终获得价值一般需要经过6个主要环节，包括数据收集、数据存储、资源管理与服务协调、计算引擎、数据分析和数据可视化，技术体系如图所示。每个环节都面临不同程度的技术挑战