用户2615220038255
获得徽章 1
- 8月13号，今天学习了《带你入坑大数据（一） --- HDFS基础概念篇》：本文介绍了HDFS的架构、三大组件和机制评论1
- 8月2号打卡，我今天学习了《你需要的不是实时数仓 | 你需要的是一款强大的OLAP数据库(下)》，本文选取了几个最常用的OLAP开源数据引擎进行分析，希望能给正在做技术选型和未来架构升级的开发者提供一些帮助。评论2
- 8月3号打卡，今天我学习了《Flink实时引擎项目实战》，本文讲解了austin项目代码多出的austin-stream模块，这个模块主要是接入流式处理平台（flink），用于实时计算清洗数据给到业务以及系统维护者更方便去使用消息推送平台austin。评论1
- 8月4号，今天学习了《基于Flink和规则引擎的实时风控解决方案》，对一个互联网产品来说，典型的风控场景包括：注册风控、登陆风控、交易风控、活动风控等，而风控的最佳效果是防患于未然，所以事前事中和事后三种实现方案中，又以事前预警和事中控制最好。
这要求风控系统一定要有实时性，本文就介绍一种实时风控解决方案。评论1 - 8月5号打卡，今天学习了《大数据Hadoop之——实时计算流计算引擎Flink（Flink环境部署）》，本文主要内容：Flink核心是一个流式的数据流执行引擎，并且能够基于同一个Flink运行时，提供支持流处理和批处理两种类型应用。其针对数据流的分布式计算提供了数据分布，数据通信及容错机制等功能。主要从API，工作原理，核心概念，环境部署等方面介绍的评论1
- 8月11号打卡，今天学习了《Presto在字节跳动的内部实践与优化》：本文介绍了字节跳动OLAP数据引擎平台Presto部署使用情况，以及在不同场景的优化与实践评论1
- 8月12号打卡，今天学习了《字节跳动10万节点HDFS集群多机房架构演进之路》：字节跳动采用的是横跨多个机房的联邦大集群部署模式，即 HDFS 只有一个集群，这个集群有多个 nameservice，但是底层的 DN 是横跨 A/B/C 3 个机房的 ，由于社区版 HDFS 没有机房感知相关的支持，因此字节跳动 HDFS 团队在这个功能上做了专门的设计和实现，本文会介绍这部分的工作。展开评论1
![[嘿哈]](http://lf-web-assets.juejin.cn/obj/juejin-web/xitu_juejin_web/img/jj_emoji_67.9ceed33.png)