E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hiveserver
Hive cli源码阅读和梳理
对Cli的重新认识*). hive cli有两种模式, 本地模式: 采用持有的driver对象来处理, 远程模式: 通过连接
HiveServer
来实现, 由此可见之前的架构图中的描述还是模糊且带有误导性
·
2015-11-13 11:12
hive
A Python example for
HiveServer
2
最后,找到了权威的说明(PS: 还是应该先看官方材料): https://cwiki.apache.org/confluence/display/Hive/Setting+up+
HiveServer
2
·
2015-11-13 03:13
example
Hive基础之Hive体系架构&运行模式&Hive与关系型数据的区别
命令行工具;启动方式:hive 或者 hive --service cli ThriftServer:通过Thrift对外提供服务,默认端口是10000;启动方式:hive --service
hiveserver
·
2015-11-13 02:04
hive
Hive参数层面常用优化
1、hive数据仓库权限问题: set hive.warehouse.subdir.inherit.perms=true; 2、
HiveServer
2的内存 连接的个数越多压力越大
·
2015-11-12 23:48
hive
SparkSQL使用之Thrift JDBC server
Thrift JDBC Server描述 Thrift JDBC Server使用的是HIVE0.12的
HiveServer
2实现。
·
2015-11-12 23:17
server
Hive基础之
HiveServer
2 JDBC的使用
启动
HiveServer
2: cd $HIVE_HOME/bin 以后台方式默认端口启动
HiveServer
2(默认端口是10000):
hiveserver
2 & 以后台方式指定端口的方式启动
·
2015-11-12 23:11
server
Hive On Spark
hiveserver
2方式使用
启动
hiveserver
2:
hiveserver
2 --hiveconf hive.execution.engine=spark spark.master=yarn 使用beeline
·
2015-11-12 17:32
server
Hive和Jdbc示例
使用下面命令进行开启:hive -service
hiveserver
& 1).
·
2015-11-12 14:29
jdbc
常用HQL语句(不断积累中)
service cli 2、hive web界面的启动方式,hive - -service hwi 3、hive 远程服务 (端口号10000) 启动方式,nohup hive - -service
hiveserver
·
2015-10-31 18:07
HQL
hive Java API
Java连接hive进行操作的方式有多种,接触到了两种: 首先,hive要起动远程服务接口,命令: hive --service
hiveserver
-p 50000 &  
·
2015-10-31 10:12
java
HiveServer
2 的jdbc方式创建udf的修改(add jar 最好不要使用),否则会造成一场 java.sql.SQLException: Error while processing statement
自从Hive0.13.0开始,使用
HiveServer
2的jdbc方式创建udf的临时函数的方法由: ADDJAR${HiveUDFJarPath} createTEMPORARYfunctionmd5
四喜
·
2015-10-23 20:00
实战1——Hive与JDBC示例
使用下面命令进行开启: hive -service
hiveserver
& 1).
·
2015-10-23 08:58
jdbc
HIVE jdbc访问程序--Eclipse环境(hive-0.12.0 + hadoop-2.4.0集群)
, 另外还需分别导入以下hive和连接mysql的jar包: hive/lib/*.jar mysql-connector-java-5.1.24-bin.jar 二、启运
HiveServer
·
2015-10-23 08:19
eclipse
java通过JDBC驱动连接操作hive实例
在Hive0.11.0版本前,只有
HiveServer
服务可用,但是
HiveServer
本身存在很多问题(比如:安全性、并发性等);针对这些问题,Hive-0.11.0版本后提供了一个全新的服务:
HiveServer
2
aturbofly
·
2015-10-16 15:12
hadoop
java通过JDBC驱动连接操作hive实例
在Hive0.11.0版本前,只有
HiveServer
服务可用,但是
HiveServer
本身存在很多问题(比如:安全性、并发性等);针对这些问题,Hive-0.11.0版本后提供了一个全新的服务:
HiveServer
2
Allenalex
·
2015-10-16 15:00
java
jdbc
hive
Hive 安装及测试三
HiveServer
本身存在很多问题(比如:安全性、并发性等);针对这些问题,Hive0.11.0版本提供了一个全新的服务:
HiveServer
2,这个很好的解决
HiveServer
存在的安全性、并发性等问题
tianwei7518
·
2015-10-16 09:00
hadoop
hive
集群
Hive1.2.1 启动报错 ClassNotFoundException: org.apache.hadoop.hive.service.
HiveServer
SLF4J:Actualbindingisoftype[org.slf4j.impl.Log4jLoggerFactory]Exceptioninthread"main"java.lang.ClassNotFoundException:org.apache.hadoop.hive.service.HiveServeratjava.net.URLClassLoader$1.run(URLClassL
五柳-先生
·
2015-10-15 20:11
大数据-查询引擎-Hive
spark使用Hive表操作
sparkHive表操作之前很长一段时间是通过
hiveServer
操作Hive表的,一旦
hiveServer
宕掉就无法进行操作。
lsshlsw
·
2015-09-28 10:00
spark
hive
彻底弄清Hive安装过程中的几个疑问点
10.当在Hadoop的HA环境中
HiveServer
安装在哪里比较合适?11.每个DataNode上都已经安装了Hbase,是否都要安装Hive?第8问
javastart
·
2015-09-16 11:00
Hive体系结构
Client是Hive的客户端,用户连接至
HiveServer
。在启动Client模式的时候,需要指出
HiveServer
所在节点,并且在该节点
huangjin0507
·
2015-09-15 15:00
hive
hive如何提交hql语句到hive上执行
一共有以下几种方式:第一、
hiveserver
通过搭建
hiveserver
来提供thrift接口,接收来自远程提交的hql语句执行。
luckuan1985
·
2015-09-15 12:00
HiveServer
与
HiveServer
2
今天在使用hive--servicehiveserver命令启动
hiveserver
时出错了,hive版本1.2.0,错误信息如下:-bash-4.1$hive--servicehiveserver-p10002&
张超
·
2015-08-25 14:00
Python
HiveServer
2
1.安装pyhs2pyhs2依赖项如下:gcc-c++python-devel.x86_64cyrus-sasl-devel.x86_64因此pyhs2的安装命令如下:yuminstallgcc-c++python-devel.x86_64cyrus-sasl-devel.x86_64pipinstallpyhs2此外,可能还需要安装cyrus-sasl-plain:yuminstallcyrus
demigelemiao
·
2015-08-24 14:00
Python
HiveServer
2
1.安装pyhs2 pyhs2依赖项如下: gcc-c++ python-devel.x86_64 cyrus-sasl-devel.x86_64 因此pyhs2的安装命令如下: yum install gcc-c++ python-devel.x86_64 cyrus-sasl-devel.x86_64 pip install pyhs2 此外,可能还需要安装cyrus-sasl-plain:
yurun
·
2015-08-24 14:00
hive引入jar包--HIVE.AUX.JARS.PATH和hive.aux.jars.path
一、hive-site.xml中的hive.aux.jars.path此配置项对于
hiveserver
有效,但是是不会作用到hiveshell.也就是说即使你在hive节点上配置了这一项,但是对于hiveshell
cjun1990
·
2015-08-19 17:00
Spark SQL JSON数据处理
也就是说,我们的用户即可以通过
HiveServer
2使用HiveSQL执行MapReduce分析数据,也可以使用SparkServer使用SparkSQL(HiveSQL)执行SparkAppli
yurun
·
2015-08-14 13:00
Spark SQL JSON数据处理
也就是说,我们的用户即可以通过
HiveServer
2使用HiveSQL执行MapReduce分析数据,也可以使用SparkServer使用SparkSQL(HiveSQL)执行SparkApplicat
demigelemiao
·
2015-08-14 13:00
由“Beeline连接
HiveServer
2后如何使用指定的队列(Yarn)运行Hive SQL语句”引发的一系列思考
背景我们使用的
HiveServer
2的版本为0.13.1-cdh5.3.2,目前的任务使用HiveSQL构建,分为两种类型:手动任务(临时分析需求)、调度任务(常规分析需求),两者均通过我们的Web系统进行提交
demigelemiao
·
2015-08-12 16:00
由“Beeline连接
HiveServer
2后如何使用指定的队列(Yarn)运行Hive SQL语句”引发的一系列思考
背景 我们使用的
HiveServer
2的版本为0.13.1-cdh5.3.2,目前的任务使用HiveSQL构建,分为两种类型:手动任务(临时分析需求)、调度任务(常规分析需求),两者均通过我们的Web系统进行提交
yurun
·
2015-08-12 16:00
Hive常用
主要整理于2011、2012年1、启动server及元数据nohuphive--servicehiveserver210000>/dw/log/
hiveserver
.log2>&1&nohuphive-
dazheng
·
2015-08-03 15:40
hadoop
Federated HDFS+beeline+
hiveserver
2 遇到的坑
遇到的坑:1、 Hive的任务会从临时目录移动数据到数据仓库目录,默认hive使用/tmp作为临时目录,用户通常使用/user/hive/warehouse/作为数据仓库目录。在FederatedHDFS情况下,/tmp 和 /user视为两个不同的ViewFSmounttable,所以hive任务在这两个目录之间移动数据。FederatedHDFS不支持这样做,所以任务会失败。报错信息:ERRO
r7raul
·
2015-07-30 09:38
hive
大数据
数据仓库
Federated
beeline
Federated HDFS+beeline+
hiveserver
2 遇到的坑
遇到的坑:1、Hive的任务会从临时目录移动数据到数据仓库目录,默认hive使用/tmp作为临时目录,用户通常使用/user/hive/warehouse/作为数据仓库目录。在FederatedHDFS情况下,/tmp和/user视为两个不同的ViewFSmounttable,所以hive任务在这两个目录之间移动数据。FederatedHDFS不支持这样做,所以任务会失败。报错信息:ERROR:F
r7raul
·
2015-07-30 09:38
beeline
hive
Federated HDFS+beeline+
hiveserver
2 遇到的坑
遇到的坑:1、 Hive的任务会从临时目录移动数据到数据仓库目录,默认hive使用/tmp作为临时目录,用户通常使用/user/hive/warehouse/作为数据仓库目录。在FederatedHDFS情况下,/tmp 和 /user视为两个不同的ViewFSmounttable,所以hive任务在这两个目录之间移动数据。FederatedHDFS不支持这样做,所以任务会失败。报错信息:ERRO
r7raul
·
2015-07-30 09:38
hive
大数据
数据仓库
Federated
beeline
使用python客户端访问hive
linux和windows环境下均可1.python与
hiveserver
交互#!
faith默默
·
2015-07-22 10:00
python
Hive
hive 使用JDBC访问 和启动远程端口
linux shell下执行 hive --service
hiveserver
-p 11000 >/dev/null 2>&1
chengjianxiaoxue
·
2015-06-30 09:00
jdbc
Using
HiveServer
2 - Authentication
To configure Hive for use with
HiveServer
2, include the following configuration properties in the ...
·
2015-06-17 22:00
Authentication
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布式集群HA部署
我这也是整合了大家的东西整理出来的,如果有不足或者错误的地方,希望大家指正因为准备生产环境用的,所以都做了HAHDFS的NameNodeHAYARN的ResourceManagerHAHbase的HmasterHAHive的
Hiveserver
2HAPS
狼蛛鬼王
·
2015-06-12 10:53
hadoop
hive
zookeeper
hbase
HA
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布式集群HA部署
我这也是整合了大家的东西整理出来的,如果有不足或者错误的地方,希望大家指正因为准备生产环境用的,所以都做了HAHDFS的NameNodeHAYARN的ResourceManagerHAHbase的HmasterHAHive的
Hiveserver
2HAPS
狼蛛鬼王
·
2015-06-12 10:53
hadoop
hive
zookeeper
hbase
HA
Hive一点一滴系列之Eclipse调用hive执行操作
hive --service
hiveserver
-p 10002 2、调用代码 package com.hrj.jdbc; import java.sql.Connection
hrj0130
·
2015-06-04 09:00
eclipse
安装配置hive的n个坑
使用的cdh版本:hive-0.13.1-cdh5.3.3.tar.gz 1
hiveserver
2启动后,beeline不能连接的涉及的问题: 原因:权限问题 解决: /user/hive/warehouse
576017120
·
2015-06-01 17:00
hive
HIVE体系架构
*注:本文基于hive-0.8.1写的架构图:一、 service1、 hive有三种service,分别是cli,
hiveserver
和hwi。
hiqj
·
2015-05-26 16:00
HiveServer
2 入门使用
Beeline–一个新的命令行ShellHiveServer2supportsanewcommandshellBeelinethatworkswithHiveServer2.It'saJDBCclientthatisbasedontheSQLLineCLI(http://sqlline.sourceforge.net/).There’sdetaileddocumentationofSQLLinew
iteye_6622
·
2015-05-20 14:56
hive
HiveServer
2 入门使用
Beeline–一个新的命令行ShellHiveServer2supportsanewcommandshellBeelinethatworkswithHiveServer2.It'saJDBCclientthatisbasedontheSQLLineCLI(http://sqlline.sourceforge.net/).There’sdetailed documentation ofSQLLin
Stark_Summer
·
2015-05-20 14:00
hive
HiveServer
2 入门使用
Beeline–一个新的命令行ShellHiveServer2supportsanewcommandshellBeelinethatworkswithHiveServer2.It'saJDBCclientthatisbasedontheSQLLineCLI(http://sqlline.sourceforge.net/).There’sdetailed documentation ofSQLLin
Stark_Summer
·
2015-05-20 14:00
hive
Hive总结(九)Hive体系结构
Client是Hive的客户端,用户连接至
HiveServer
。在启动Client模式的时候,需要指出
HiveServer
所在节点,并且在该节点启动Hi
baolibin528
·
2015-05-19 20:00
Hive总结九Hive体系结构
HiveServer
2 入门使用
Beeline–一个新的命令行ShellHiveServer2supportsanewcommandshellBeelinethatworkswithHiveServer2.It'saJDBCclientthatisbasedontheSQLLineCLI(http://sqlline.sourceforge.net/).There’sdetailed documentation ofSQLLin
stark_summer
·
2015-05-19 15:00
hiveserver2
beeline
hiveserver
2 with kerberos authentication
Kerberos协议: Kerberos协议主要用于计算机网络的身份鉴别(Authentication), 其特点是用户只需输入一次身份验证信息就可以凭借此验证获得的票据(ticket-granting ticket)访问多个服务,即SSO(Single Sign On)。由于在每个Client和Service之间建立了共享密钥,使得该协议具有相当的安全性。 Kerberos协
·
2015-05-13 08:00
Authentication
基于0.14.0版本配置
HiveServer
2
项目中需要访问hive作为mondrian的异种数据源执行MDX查询,而我一般使用hive的时候都是直接通过hive命令行的方式直接执行SQL,或者通过hive的jar包在程序中访问,在这种方式的使用过程中,访问的hadoop集群都是公司的集群,之前测试hive的过程中记得自己对hive的jdbc源码进行了修改,主要是修改了一些hive在实现jdbc中没有实现但是抛出异常的接口,而mondr
yu616568
·
2015-05-01 18:00
java
数据库
hadoop
hive
配置
Hue安装配置实践
需要说明的是,我们通过Hue来执行Hive查询,需要启动
HiveServer
2服务:
alentain
·
2015-04-27 17:35
mysql
用户
local
新建
软件工具
Hue安装配置实践
需要说明的是,我们通过Hue来执行Hive查询,需要启动
HiveServer
2服务:
alentain
·
2015-04-27 17:35
mysql
用户
新建
上一页
12
13
14
15
16
17
18
19
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他