HiveServer2负载均衡

有多个HiveServer2服务时,可以借助Zookeeper服务实现访问HiveServer2的负载均衡,将HiveServer2的压力分担到多个节点上去。本文详细介绍HiveServer2负载均衡的配置及使用方法,请根据EMR集群(普通集群和Kerberos集群)的实际情况进行选择。
HiveServer2负载均衡_第1张图片

hive.server2.support.dynamic.service.discovery
设置为ture

在zooperker要创建相应的zooKeeperNamespace并赋权

create /hiveserver2 world:anyone:cdrwa

还有一些其他的配置参数:


编辑hive-site.xml


    spark.deploy.recoveryMode
    ZOOKEEPER
 



	hive.server2.support.dynamic.service.discovery
	true





hive.server2.zookeeper.namespace
hiveserver2_zk




hive.zookeeper.quorum
node5:2181,node4:2181,node3:2181




hive.zookeeper.client.port
2181




hive.server2.thrift.bind.host
0.0.0.0


hive.server2.thrift.port
10000 //两个HiveServer2实例的端口号要一致


重启hive服务

就可以去进行连接连接的测试
beeline -u ‘jdbc:hive2://master-1-1:2181,master-1-2:2181,master-1-3:2181/;serviceDiscoveryMode=zooKeeper;zooKeeperNamespace=hiveserver2’

你可能感兴趣的:(负载均衡,运维,hadoop,hiveserver2)