暴走大数据

时间飞逝，到今天为止，2019年就过半了。 《大数据技术与架构》创立4个月，都是业余时间原创或者筛选优质文章。回想起来，无数次的深夜整理文稿，周末大部分时间也用在了整理和输...

有人问我学习一个新库的最佳途径是什么？我的回答是，就是在实际项目中那样去使用它。在一个真实的项目中会有各种各样的需求，这会促使开发人员去探索和研究这个新库。简言之，只有任务...

因为工作上的原因，做过几次面试官，面试的同学有应届生，也有工作3-5年的老技术人。最近也频繁作为面试官帮助筛选候选人，中间有很多值得深思的东西，我记录了下来分享给大家。 以...

从Java8出现以来lambda是最重要的特性之一，它可以让我们用简洁流畅的代码完成一个功能。 很长一段时间java被吐槽是冗余和缺乏函数式编程能力的语言，随着函数式编程的...

控诉互联网公司侵权行为。 原来，是有人注册了一个叫做996.icu的域名，并且在这个网站上大举控诉部分互联网公司实行996工作制的行为。 并且，还点名批评了近期因为员工关系...

在这篇教程里，我们将要去了解下JAVA8中的Lambda表达式——特别是怎样使用它来编写Comparator和对集合（Collection）进行排序。 根据Lambda表达...

流式计算中，我们经常有一些场景是消费Kafka数据，进行处理，然后存储到其他的数据库或者缓存或者重新发送回其他的消息队列中。 本文讲述一个简单的Redis作为Sink的案例...

... 本文介绍消费Kafka的消息实时写入Mysql。...

戳更多文章：1-Flink入门2-本地环境搭建&构建第一个Flink应用3-DataSetAPI4-DataSteamAPI5-集群部署6-分布式缓存7-重启策略8-Fli...

本系列文章来自云栖社区，对Flink的解析兼具广度和深度，适合对Flink有一定研究的同学学习。 实际问题 在流计算场景中，数据会源源不断的流入Apache Flink系统...

2018和2019年是大数据领域蓬勃发展的两年，自2019年伊始，实时流计算技术开始步入普通开发者视线，各大公司都在不遗余力地试用新的流计算框架，实时流计算引擎Spark ...

为了良好的阅读下面的文档，最好是结合实际的练习。首先需要下载spark,然后安装hdfs，可以下载任意版本的hdfs。 Spark Shell提供给用户一个简单的学习API...

SQL是Structured Query Language的缩写，最初是由美国计算机科学家Donald D. Chamberlin和Raymond F. Boyce在20世...

在《Apache Flink 漫谈系列 - SQL概览》中我对JOIN算子有过简单的介绍，这里我们以具体实例的方式让大家对JOIN算子加深印象。JOIN的本质是分别从N(N...

Redis在互联网技术存储方面使用如此广泛，几乎所有的后端技术面试官都要在Redis的使用和原理方面对小伙伴们进行各种刁难。作为一名在互联网技术行业打击过成百上千名【请允许...

Apache Flink 针对不同的用户场景提供了三层用户API,最下层ProcessFunction API可以对State，Timer等复杂机制进行有效的控制，但用户使...

      那么我的问题是，她要张真人照片做什么？...

.... 提到kafka，不太熟悉或者稍有接触的开发人员，第一想法可能会觉得它是一个消息系统。其实Kafka的定位并不止于此。 发布订阅记录流，和消息队列或者企业新消息系统...

.... 本章通过实际例子，讲解了如何使用java进行kafka开发。 首先定义了zookeeper相关连接信息。然后在createTopic中，先初始化ZkUtils，和...