Spark3兼容CDH1.1.0:
ln -s hive-site.xml $SPARK_HOME/conf
spark-defaults.conf:
# hive metastore版本设置
spark.sql.hive.metastore.Version=1.1.0
# 引用 HIVE在 cloudera/parcels相关的jar包
spark.sql.hive.metastore.jars=/home/ha/app/hive/lib/*
# 设置 spark提交任务默认的 yarn 队列
spark.yarn.queue=root.analysis
若报错org/apache/hadoop/mapred/MRVersion找不到:
cp hadoop-core-2.6.0-mr1-cdh5.16.2.jar $HIVE_HOME/lib