Spark SQL on Hive配置_springboot 远程 spark on hive

作者：小桥流水78 | 2024-08-16 11:11:39

踩

springboot 远程 spark on hive

1、

在Spark的conf目录中 vi hive-site.xml

<configuration>
<property>
<name>hive.metastore.uris</name>
<value>thrift://tgmaster:9083</value>
<description>Thrift URI for the remote metastore.Used by metastore client to connect to metastore.</description>
</property>
</configuration>

2、
在Spark的lib目录中，添加mysql-connector-java***.jar

3、
启动hive的metastore服务：

hive --service metastore >metastore.log 2>& 1&

4、启动Spark-shell: spark-shell --master

spark://tgmaster:7077

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/小桥流水78/article/detail/987942