spark整合hive

1.将hive所在的节点的hive-site.xml复制到 S P A R K H O M E / c o n f 目 录 下 2. 将 复 制 到 SPARK_HOME/conf 目录下 2.将复制到 SPARKHOME/conf2.SPARK_HOME/conf 目录下hive-site.xml进行修改,如下

hive.metastore.uris
thrift://hadoop01:9083

我的hive所在节点为hadoop01
3. 启动命令(在hive所在的节点)
nohup hive --service metastore 1>/home/hadoop/logs/hive_thriftserver.log 2>&1 &
4. 启动spark-sql 命令
在/home/hadoop/spark/spark-2.3.1-bin-hadoop2.7/bin目录下启动
Spark-sql
5. 输入hive命令进行验证
在这里插入图片描述

你可能感兴趣的:(大数据集群组件安装)