小柯_

Hive 表有多种存储格式，TextFile、ORC、RCFile等等。 如何对Hive表的存储格式进行修改？

init(m,parameters) | 各个模式下，都会调用该方法进行初始化。校验上一阶段的参数，并且决定该阶段的输出

DB_LOCATION_URI | 数据库Location | viewfs://...... LOCATION | 表Location | viewfs://...... RESOURCE_URI | 资源URI | hdfs://...

由于缺少统一的规范落地和平台工具支持，大部分的业务人员、技术人员在建表时并没有考虑到 Hive表 格式的重要性。随着数据量的上升，TextFile格式的存储浪费情况越来越严重 TextFile格式的 Hive表，数据加载速度快。数仓的 ODS层 一般使用 TextFile 格式…

特此整理一番，供自己日后工作参考之用。同时也分享给大家，可以指导初学者开发自定义UDF，也可以作为随用随查的参考手册： 临时函数：只在当前客户端会话中生效的函数，不会影响到其他的会话。客户端退出后，临时函数就失效了 永久函数：注册永久函数后，其他的客户端会话也可以使用这个函数。…

其中 process()、close() 为 GenericUDTF 中的抽象方法，必须实现。initialize() 虽然不是抽象方法，但必须手动覆盖实现该方法，因为 GenericUDTF 的 initialize() 最终会抛出一个异常： UDTF函数可以对于一行输入，可…

initialize() 需要 return 一个 ObjectInspector 实例，用于表示自定义UDF返回值类型。initialize() 的返回值决定了 evaluate() 的返回值类型