Hive中如何处理JSON格式数据 Hive 处理json数据总体来说有三个办法： 使用内建的函数get_json_object、json_tuple 使用自定义的UDF(一进一出)，自定义UDTF(

上篇文章给家讲解了Hadoop的面试题，Hive是踩在巨人的肩膀上的一个数据仓库组件，看看企业问那些问题吧。 很多时候面试以上来就问什么是Hive，有了MapReduc为什么还要有hive呀。很多小伙伴回答的都不是很好，好，那大数据老哥来个大家讲解下。 意义：降低程序员使用ha…

如果hive面试，基本都会问一下ORDER BY, SORT BY, DISTRIBUTE BY, CLUSTER BY的区别，那这里就简单给大家做个介绍；

Hive SQL基本上适用大数据领域离线数据处理的大部分场景。Hive SQL的优化也是我们必须掌握的技能，而且，面试一定会问。那么，我希望面试者能答出其中的80%优化点，在这个问题上才算过关。 JVM重利用可以使得JOB长时间保留slot,直到作业结束，这在对于有较多任务和较…

上一篇文章介绍了3道常见的SQL笔试题，反响还算是不错。于是乎，接下来的几天，菌哥将每天为大家分享一些关于大数据面试的杀招，祝小伙伴们都能早日找到合适的工作~ 面试官往往一上来就一个“灵魂三连问”，很多没有提前准备好的小伙伴基本回答得都磕磕绊绊，效果不是很好。下面贴出菌哥的回答…

1.你处理过的最大的数据量?你是如何处理他们的?处理的结果。1000万条数据（10G）;为了加快解析速度,使用redis作为缓存,MR运行只与redis交互,解析完成后统一在hbase中持久化存储.2

1.Hive的架构 2 Hive和数据库比较 Hive 和数据库除了拥有类似的查询语言，再无类似之处。 1）数据存储位置 Hive 存储在 HDFS 。数据库将数据保存在块设备或者本地文件系统中。 2

第一题 需求 实现 数据准备 查询SQL 第二题 需求 实现 数据准备 查询SQL实现 第三题 需求 实现 数据准备 查询SQL 第四题 需求 实现 数据准备 查询SQL 第五题 需求 实现 数据准备

1. hive 内部表和外部表的区别？ 未被external修饰的是内部表（managed table），被external修饰的为外部表（external table）； 内部表数据由Hive自身管