八月他大

简介：Hadoop是Apache开源组织的一个并行计算开源框架，借助hadoop框架，开发人员可以很容易实现大规模并行分布式计算。 1. 目的 本文主要对完全分布式hadoop集群环境的安装与配置步骤

今天安装了一个GP集群测试环境，反复折腾了好几次，安装过程中还是有一些关键点需要详细记录和说明一下，以备后续使用时参考，如果该笔记能够在你需要的时候有所帮助，本人不胜荣幸，不完美的地方也请谅解。 1、

openLooKeng是华为技术团队基于Trino(最初称作PrestoSQL)开发的数据虚拟化技术。与Trino开源项目相比，openLooKeng提供了额外的优化和增强功能，而且其吸引我的地方就是：跨源数据分析能力。接下来我们简单记录其安装和测试过程。 从异常信息中很容易发…

近期项目中需要对数据进行转存，简单学习了一下Flink相关的知识点，通过一个简单的集成，对近期的学习成果做一个记录和梳理，帮助初学的同学窥探Flink流式数据处理的完整过程。Demo的设计思路是：应用系统定期向Kafka中发送数据，Flink获取Kafka中的流式数据后存储到M…