大数据1

wffeige
205 阅读1分钟

image.png

image.png

image.png

image.png

image.png

image.png

image.png

常见的计算引擎 image.png

  • yarn 调度服务
  • pig 15年以后 基本下掉了pipline常用的引擎 类似hive

数据库的发展历史

image.png

image.png

image.png

image.png

image.png

image.png

image.png

image.png

hive用的已经不多了 基本都迁移到了spark

  • 找到hive设计的亮点

image.png

image.png

image.png

image.png

image.png

本质上就是矩阵和多位数租

  • 边 点 计算

image.png

HDFS

image.png

image.png

image.png

image.png

image.png

image.png

  • namenode 文件在哪台机器上
  • 接口

image.png

复习 image.png

image.png

image.png

image.png

image.png

avatar
文章
阅读
粉丝