E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HiveServer2
如何使用Zookeeper实现
HiveServer2
的HA
之前Fayson介绍了《如何使用HAProxy实现
HiveServer2
负载均衡》,这种方案也有一些弊端,如HAProxy本身就是单点,虽然可以通过Keepalived来实现HAProxy的高可用,但这样配置会比较麻烦并且需要多部署两个组件
hongtaq156136
·
2019-02-01 15:35
hive
Hive-ThiftServer-
hiveserver2
#
hiveserver2
对应的hdfs://hdfscluster/path其中hdfscluster不能写成hdfs-cluster,中间不能有-号;#否则可能导致java.net.UnKnownHostException
liuzx32
·
2019-01-18 15:04
python查询hive结果保存到mysql的python代码优化历程
当然了,肯定还有一些其它的hive~mysql互导工具,通常我们用python驱动
hiveserver2
,hivecli官方并不建议,也利用python将结果保存到mysql。
ikeguang
·
2019-01-16 22:25
bigdata
hive
python
mysql
十二、Hive之JavaAPI操作(Test Record)
javaapi来使用hive前的实验记录Hive-Hadoop-MySQL的安装,请阅读这里hive-site.xml新添加(以下都是默认配置):hive.server2.thrift.port10000//
HiveServer2
玻璃水珠
·
2019-01-16 17:50
Java
Hadoop
hive
Hive --beeline客户端 --常用操作命令 --一些小知识点
原文:https://blog.csdn.net/qq_41028958/article/details/80861531HIVEBeenLine客户端-常用命令支持多链接启动
hiveserver2
服务
quincylk
·
2019-01-10 17:27
大数据
Hive 基础教程
RDBMS对比Hive架构图解Hive结构基本组成Hive的数据存储Hive特性Hive中的表分为内部表、外部表、分区表和Bucket表(分桶表)Hive环境搭建Hive安装Hive三种连接方式CLI
HiveServer2
夜古诚
·
2019-01-08 18:12
Hive
简述Hive的三种启动方式及内置服务
一Thrift服务通过hiveServer/
hiveServer2
启动Thrift服务,客户端连接Thrift服务访问Hive数据库(JDBC,JAVA等连接Thrift服务访问Hive)。
英菲nidi50070
·
2018-12-26 20:59
Hive的相关知识
HUE与HIVE整合
修改Hive配置文件hive-site.xmlHUE与hive集成需要hive开启
HiveServer2
服务,相关配置如下:属性:hive.server2.thrift.port属性值:10000属性:
huoliangwu
·
2018-12-26 09:10
hue
hive
Python操作hive与mysql
当然了,肯定还有一些其它的hive~mysql互导工具,通常我们用python驱动
hiveserver2
,hivecli官方并不建议,也利用python将结果保存到mysql。那么python操作hi
ikeguang
·
2018-12-21 23:33
hive
python
Hive运行方式和授权
Hive运行方式命令行方式cli:控制台模式脚本运行方式(实际生产环境中用最多,不可人为控制,只能根据时间定时操作)JDBC方式:
hiveserver2
webGUI接口(hwi、hue等)❌很lowHive
geekAppke
·
2018-12-17 23:40
Hive开发使用-
适用场景1.海量数据的存储处理2.数据挖掘3.海量数据的离线分析3.1目前的Hive的Thrift服务端通常使用
HiveServer2
,它是
HiveServer2
改进版本,它提供了新的ThriftAPI
老子跑的动
·
2018-12-16 21:34
大数据
Hive
Sql
CDH5.12.0-
HiveServer2
-java.net.SocketTimeoutException: Read timed out
一.问题背景基于CDH构建离线数仓,在通过JDBC向
HiveServer2
提交作业时出现java.net.SocketTimeoutException:Readtimedout错误,导致大批量的作业失败
HamaWhite
·
2018-12-14 21:45
hadoop
hive
hadoop
cdh
大数据
如何使用Beeline连接Impala
Beeline是
HiveServer2
提供的一个新的命令行工具,基于SQLLineCLI的JDBC客户端。Beeline有两种模式:嵌入和远程模式。
Chuck_basic
·
2018-12-13 16:52
知识积累
如何使用Beeline连接Impala
Beeline是
HiveServer2
提供的一个新的命令行工具,基于SQLLineCLI的JDBC客户端。Beeline有两种模式:嵌入和远程模式。
Chuck_basic
·
2018-12-13 16:52
知识积累
心得体会之Hive细节总结
在hive中与数据库的两种连接方式(1)jdbc连接命令:bin/
hiveserver2
bin/beeline!
惹无尽尘埃
·
2018-12-12 09:39
Thrift方式连接
hiveServer2
+Kerberos
最近在做一个大数据查询平台,后端引擎有部分用了hive,通过thrift的方式连接
hiveServer2
,由于集群加了kerberos,所以实现thrift连接
hiveServer2
的时候需要加上kerberos
冰上浮云
·
2018-12-09 15:26
kerberos
bigdata
hive
HIVE HA方案
HA方案
HiveServer2
集群依赖ZK实现了高可用,客户端先连接到ZK获取
HiveServer2
的地址,然后再与该地址建立连接,流程如下:优点:高可用(解决单点问题);负载均衡(ZK集群随机选择
HiveServer2
库昊天
·
2018-12-03 11:25
大数据
Hive/Impala--HAProxy实现Impala/
HiveServer2
负载均衡
HAProxy安装1、在集群中选择一个节点,使用yum方式安装HAProxy服务yum-yinstallhaproxy2.启动与停止HAProxy服务,并将服务添加到自启动列表servicehaproxystartservicehaproxystopchkconfighaproxyonImpala配置将/etc/haproxy目录下的haproxy.cfg文件备份,新建haproxy.cfg文件,
撸码小丑
·
2018-12-03 11:09
【Hive】Hive Metrics体系
Hive常用的长服务主要有
HiveServer2
和MetaStore,这两者都可以配置一些监控数据。
dabokele
·
2018-11-24 17:17
Hive
Hive 之 Java API 操作
转自:https://blog.csdn.net/hg_harvey/article/details/77688703Java想要访问Hive,需要通过beeline的方式连接Hive,
hiveserver2
hemeinvyiqiluoben
·
2018-11-21 15:36
hive
beeline源码分析
/org/apache/hive/beeline/BeeLine.javahive驱动beeline有2个hivedriver:org.apache.hive.jdbc.HiveDriver,用于连接
hiveserver2
org.apache.hadoop.hive.jdbc.HiveD
david9
·
2018-11-07 09:31
(四)Hive的连接3种连接方式
(四)Hive的连接3种连接方式目录一、CLI连接二、
HiveServer2
/beeline1、修改hadoop集群的hdfs-site.xml配置文件2、修改hadoop集群的core-site.xml
夏至&未至
·
2018-10-28 23:37
Hive
beeline使用
文章目录0.参数介绍1.beeline原始使用1.1不配置用户名密码1.2.用户名密码登录2.hive集成LDAP2.1beeline连接
hiveserver2
使用用户名密码0.参数介绍选项描述-u用于
九师兄-梁川川
·
2018-10-25 17:22
大数据-hive
hive界面
Hive从2.0版本开始,为
HiveServer2
提供了一个简单的WEBUI界面,界面中可以直观的看到当前链接的会话、历史日志、配置参数以及度量信息。
九师兄-梁川川
·
2018-10-25 16:55
大数据-hive
hiveserver2
的配置和启动
概览1.配置hive-site.xml2.配置hadoop中的core-site.xml文件3.测试首先将hive安装然后更改部分配置文件1.配置hive-site.xml利用Xshell工具连接虚拟机进入hive安装目录下的conf文件夹,更改hive-site.xml配置文件其中配置参考hive安装中的配置hive-site.xml你会发现/usr/hive/apache-hive-2.3.3
leanaoo
·
2018-10-24 21:16
大数据
Hive JDBC连接
HiveServer2
简介转载:https://www.cnblogs.com/xiaozhang123/p/7310980.html
HiveServer2
配置和启动在Hiv-site.xml文件中配置属性
NIUNIU_SUISUI
·
2018-10-09 11:23
如何有效调整
HiveServer2
进程的JVM堆内存大小?
我的运行环境:JDK1.8,HIVE1.2,HADOOP2.7
HiveServer2
在以下简称HS2[hadoop@tony_hdp_01bin]$pwd${HIVE_HOME}/bin[hadoop@
Tony_仔
·
2018-09-27 15:31
大数据
Hive-beeline、jdbc、regex
服务端启动配置文件是Hive的配置文件服务端启动
hiveserver2
客户端启动进入后连接$beelinebeeline>!
MR_ChanHwang
·
2018-09-14 17:10
Hiveserver2
性能优化与GC优化
一、问题描述开发者利用jdbc连接
hiveserver2
(或者利用jdbc连接sparkHiveThriftServer2,由于两者都是提供jdbc连接到hive,因此,后面都统一称为利用jdbc连接
hiveserver2
mnasd
·
2018-09-13 16:08
gc故障
hiveserver2
的高可用HA
1.架构原理介绍2.配置3.检验是否在zookeeper上注册4.测试连接JDBC5.beeline连接6.测试1.架构原理介绍这里最主要的是利用了zk的命名空间,首先我们把两个hiserver2先后启动,注册到zk集群的,然后通过zk轮询做高可用,就是这么简单,下边详细讲解一下,安装配置第一步在两台节点上安装hive,除了配置的ip不同,其他的都相同,并在hive-site.xml中添加如下配置
九师兄-梁川川
·
2018-09-12 16:12
大数据-hive
在Kubernetes上部署Hive
Kubernetes上部署Hive思路:以上一篇文章部署的Hadoop为基础,共享Hadoop集群的配置文件,安装Hadoop但不启动任何Hadoop进程启动容器时进行Metadata数据库初始化,启动
hiveserver2
迷途的攻城狮(798570156)
·
2018-09-07 10:56
学习整理
分布式
2018-09-05期 Hive客户端操作(JDBC和Thrift方式)
然而Hive也提供客户端的实现,通过HiveServer或者
HiveServer2
,客户端可以在不启动CLI的情况下对Hive中的数据进行操作,两者都允许远程客户端使用多种编程语言如Java、Python
JackmaSong
·
2018-09-05 12:42
大数据
Hive
客户端操作
hive --service
hiveserver2
报错thrift.ThriftCLIService (ThriftBinaryCLIService.java:run(113)) - Error:
报错一直如下2018-08-2809:31:55,881INFO[main]:service.AbstractService(AbstractService.java:start(104))-Service:
HiveServer2
isstarted
济宁小图
·
2018-08-28 13:22
es与hive整合
在hiveclasspath中添加elasticsearch-hadoop.jar,以下方法任一种均可:1、启动
hiveserver2
前,在hive-site.xml文件中更改hive.aux.jars.path
koushr
·
2018-08-20 14:00
大数据系列hive——jdbc
目录一、简介二、
HiveServer2
配置启动三、Beeline四、错误处理五、代码一、简介hive可以通过命令行执行hql,它也提供了相应的jdbc驱动,从而可以使用jdbcapi进行代码的编写。
guduyishuai
·
2018-08-15 09:07
大数据
hive
Hive加强之Hive thrift服务
cd$HIVE_HOMEcd/bin:beeline
hiveserver2
一.开启服务,远程连接①启动为前台(一般来说,前台服务用的很少):特点:第一如果你把窗口关闭,这个服务就死了,第二会在这个窗口把运行的日志打印出来
LY_1029931307
·
2018-08-14 20:19
菜鸟学习
Hive学习笔记:Hive JDBC+Java API
hive-site.xml,添加以下内容 hive.server2.thrift.port 10000 hive.server2.thrift.bind.host 0.0.0.0设置
Hiveserver2
T
SetsunaMeow
·
2018-08-01 00:32
Hive
Hive高级
启动方式:nohup
hiveserver2
&
正经黑天鹅
·
2018-07-29 17:37
Hive
使用hive中beeline引擎来访问hive数据库
数据库我们知道:hive中的引擎有两个:hive>beeline>现在使用第二个beeline引擎1.启动元数据库(用来确保hive和mysql的通信连接)hive--servicemetastore2.启动
hiveserver2
俞驰的博客
·
2018-07-28 14:15
Hive
python操作具有kerberos认证的hive(impala)
▌前言python中用于连接
HiveServer2
的客户端有3个:pyhs2,pyhive,impyla。
温室的花朵
·
2018-07-25 15:32
python实践
Hive数据仓库实战(详细)
中建立表后只有两种方式可以加载数据:(1)从本地文件系统加载数据(2)从Hadoop文件系统加载数据在node63节点启动hive服务:分别输入:hive--servicemetastore&;hive--service
hiveserver2
大鱼-瓶邪
·
2018-07-16 16:22
Hadoop
HIve
Hadoop基础教程-第12章 Hive:进阶(12.3
HiveServer2
)(草稿)
第12章Hive:进阶12.3
HiveServer2
12.3.1HiveServer1HiveServer是一种可选服务,允许远程客户端可以使用各种编程语言向Hive提交请求并检索结果。
autumnLemon
·
2018-07-16 15:06
大数据-Hadoop
Hive学习笔记 (三)
三、Hive高级进阶1.
HiveServer2
、Beeline、JDBC的使用hive是CLI,
HiveServer2
(HS2)是一种能使客户端执行Hive查询的服务。
无籽西瓜吃吗
·
2018-07-12 16:44
Hive基本shell操作
https://cwiki.apache.org/confluence/display/Hive/Home#Home-UserDocumentation1>java客户端操作hive需要启动hive远程服务:
hiveserver2
https
aryoyo
·
2018-07-08 15:53
LINUX
hive DDL 笔记
为了查看表结构和数据方便使用客户端服务端模式访问hive开启hive服务端(监听端口为10000)[root@masterapps]#hive-1.2.1/bin/
hiveserver2
开启服务端口后光标一直闪烁
nuc2015
·
2018-07-07 19:22
大数据学习笔记
hive1.2.2删除table报错
1.启动Hadoop的2.8.32.启动
hiveserver2
!
Andeve
·
2018-07-04 16:01
hadoop
hive
【Hive】Beeline CLI介绍
Beeline,它其实是
HiveServer2
的JDBC客户端,基于SQLLine命令行接口。
Alen_Liu_SZ
·
2018-06-29 15:32
Hadoop系列
----【Hive】
Hive高级进阶与优化
原文地址:https://blog.csdn.net/jiangsanfeng1111/article/details/52847044
HiveServer2
参考地址:http://blog.csdn.net
huochai1989
·
2018-06-28 15:18
hive
【Hive】Hive中的
HiveServer2
、Beeline及数据的压缩和存储
1、使用
HiveServer2
及Beeline
HiveServer2
的作用:将hive变成一种server服务对外开放,多个客户端可以连接。
魏晓蕾
·
2018-06-27 22:01
BigData
云计算大数据学习分享与沉淀
Hive知识点总结(一)
1、Hive使用方式方式1:学习时使用的最基本的简单查询:bin/hive//启动hivehive>select*fromt_test;//进行简单使用方式2:作为服务启动并使用:bin/
hiveserver2
且听_风吟
·
2018-06-23 03:44
HIVE
上一页
8
9
10
11
12
13
14
15
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他