E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hive0.11
hive0.11
升级问题小结
为了兼容spark,并使用hive的kerberos和hiveserver2功能和一些窗口函数,线上的hive由0.10升级至0.11,遇到几个问题,简单记录下:1.分区schemal的问题具体见:http://caiguangguang.blog.51cto.com/1652935/13552162.部分函数运行unix_timestamp在参数为null时会报错:hive>selectunix
菜菜光
·
2014-04-10 22:20
hive0.11
升级问题
hive0.11
升级问题小结
为了兼容spark,并使用hive的kerberos和hiveserver2功能和一些窗口函数,线上的hive由0.10升级至0.11,遇到几个问题,简单记录下:1.分区schemal的问题具体见:http://caiguangguang.blog.51cto.com/1652935/13552162.部分函数运行unix_timestamp在参数为null时会报错:hive>selectunix
菜菜光
·
2014-04-10 22:20
hive0.11
升级问题
hive
hive集成kerberos问题2
上次说到hivecli和kerberos集成的问题,而访问hive的另一种方法就是使用hiveserver,
hive0.11
之后为hiveserver2。
菜菜光
·
2014-03-24 22:24
kerberos
hiveserver
hive
hive集成kerberos问题2
上次说到hivecli和kerberos集成的问题,而访问hive的另一种方法就是使用hiveserver,
hive0.11
之后为hiveserver2。
菜菜光
·
2014-03-24 22:24
kerberos
hiveserver
hive集成kerberos问题1
hive0.11
之后开始支持kerberos的验证,hive主要有两种访问方式,一种方法是shell运行,即直接运行hive命令,另一种方法时启动hiveserver,然后通过jdbc或odbc进行验证
菜菜光
·
2014-03-21 23:32
hivecli
kerberos问题
hive集成kerberos问题1
hive0.11
之后开始支持kerberos的验证,hive主要有两种访问方式,一种方法是shell运行,即直接运行hive命令,另一种方法时启动hiveserver,然后通过jdbc或odbc进行验证
菜菜光
·
2014-03-21 23:32
hivecli
kerberos问题
hive
Hive报错之java.lang.NoClassDefFoundError: org/codehaus/jackson/JsonFactory
一、问题: 在使用
Hive0.11
进行select查询的时候报: hive> create table zhifu2 as select distinct uid,substr(time,1,12
·
2014-03-21 17:00
hive join
hive0.11
之前,默认的join方式是reduce端join,即shufflejoin(hive.auto.convert.join默认为false),其原理是map的输出数据通过hash进行partition
菜菜光
·
2014-03-13 22:46
hive
join
hive
hive join
hive0.11
之前,默认的join方式是reduce端join,即shufflejoin(hive.auto.convert.join默认为false),其原理是map的输出数据通过hash进行partition
菜菜光
·
2014-03-13 22:46
JOIN
hive
hive升级至0.11 partition schemal问题
线上由hive0.10升级到
hive0.11
之后,部分etljob运行出现问题,具体表现为:在分区表中,当改变table的表的字段类型之后,旧的partition数据可能会出现NULL的情况。
菜菜光
·
2014-01-28 16:47
partition
hive0.11
schemal
hive升级至0.11 partition schemal问题
线上由hive0.10升级到
hive0.11
之后,部分etljob运行出现问题,具体表现为:在分区表中,当改变table的表的字段类型之后,旧的partition数据可能会出现NULL的情况。
菜菜光
·
2014-01-28 16:47
hive0.11
partition
hive
hive0.11
升级碰到的坑
上周我们的production环境正式上线了
hive0.11
/spark0.8/shark0.8,在前期的测试和回归过程中碰到了很多坑,这边记录一下,有其他公司要上的话,可以少走些弯路。
lalaguozhe
·
2013-12-23 16:59
Hive
hadoop
spark
shark
hive0.11
升级碰到的坑
上周我们的production环境正式上线了
hive0.11
/spark0.8/shark0.8,在前期的测试和回归过程中碰到了很多坑,这边记录一下,有其他公司要上的话,可以少走些弯路。
lalaguozhe
·
2013-12-23 16:00
hadoop
hive
hive0.11
元数据表汇总说明
1.Hive0.11元数据表汇总1.1概览线上Hive0.11metastore包括39个表,可以分为以下几类:类别表名主键描述Database相关DBSDB_ID所有Hive数据库信息,包括HDFS数据目录、库名、备注等DBS_PARAMSDB_ID,PARAM_KEYDatabase的属性信息TABLE相关TBLSTBL_ID所有Hive基本表信息,包括所属DB_ID,创建者,表名,创建方式等
扫大街的程序员
·
2013-12-03 23:36
hive0.11
元数据表汇总说明
1.Hive0.11元数据表汇总1.1概览线上Hive0.11metastore包括39个表,可以分为以下几类:类别表名主键描述Database相关DBSDB_ID所有Hive数据库信息,包括HDFS数据目录、库名、备注等 DBS_PARAMSDB_ID,PARAM_KEYDatabase的属性信息TABLE相关TBLSTBL_ID所有Hive基本表信息,包括所属DB_ID,创建者,表名,创建方式
u012914981
·
2013-12-03 23:00
hive0.11
的hive server实现kerberos认证和impersonation中碰到的问题
背景最近在做hive0.9升级到0.11的工作,其中一个步骤就是将之前apply到0.9的patchre-apply到0.11中,有一个patch(https://github.com/lalaguozhe/hive/commit/f2892f9e4706f3ea04117cbc7e7f54ff6af1e415)参考了hivemetastoreservice的实现,对hiveserver增加了sa
lalaguozhe
·
2013-10-23 22:00
hive0
hive
server
hive0.11
的hive server实现kerberos认证和impersonation中碰到的问题
背景最近在做hive0.9升级到0.11的工作,其中一个步骤就是将之前apply到0.9的patchre-apply到0.11中,有一个patch(https://github.com/lalaguozhe/hive/commit/f2892f9e4706f3ea04117cbc7e7f54ff6af1e415)参考了hivemetastoreservice的实现,对hiveserver增加了sa
lalaguozhe
·
2013-10-23 14:00
hive
server
hive0.11
[置顶]
hive0.11
的hive server实现kerberos认证和impersonation中碰到的问题
背景最近在做hive0.9升级到0.11的工作,其中一个步骤就是将之前apply到0.9的patchre-apply到0.11中,有一个patch(https://github.com/lalaguozhe/hive/commit/f2892f9e4706f3ea04117cbc7e7f54ff6af1e415)参考了hivemetastoreservice的实现,对hiveserver增加了sa
lalaguozhe
·
2013-10-23 14:00
mapreduce
hadoop
hive
hive0.11
安装与配置
将原来的hive0.10的配置文件拷贝到0.11的conf下,然后将mysql中的hive库清掉运行hive,结果Unabletoinstantiateorg.apache.hadoop.hive.metastore.HiveMetaStoreClient仔细看看异常创建不了到mysql的连接。用用户直接登录mysql,没问题,那就是缺少连接器了仔细对比一下,原来是少了mysql-connecto
xqj198404
·
2013-09-29 16:00
hive
Hive Server 2 安装部署测试
Hive0.11
包含了HiveServer1和HiveServer2,还包含1的原因是为了做到向下兼容性。从长远来看都会以HiveServer2作为首选1.
lalaguozhe
·
2013-09-17 16:00
server
hive
测试
hive0.11
多表join countI(distinct )bug
阅读更多
hive0.11
测试过程中,发现如下bugselectcount(distinctt2.user_id),t1.app_id,t2.from_idfromt1joint2ont1.app_id=
秦时明月黑
·
2013-09-16 20:00
hive0.11
多表join countI(distinct )bug
hive0.11
测试过程中,发现如下bug select count(distinct t2.user_id),t1.app_id,t2.from_id
秦时明月黑
·
2013-09-16 20:00
distinct
Apache Hive 0.11 版本分析
阅读更多目前
Hive0.11
版本已经发本,本文旨在分析0.11的新特性。
jackchan
·
2013-09-03 11:00
hcatalog简介和使用
所以只能降级使用hcatalog0.4,由于hcatalog中所有的底层数据信息都是保存在hivemetastore里,所以hive版本升级后schema变动或者api变动会对hacatalog产生影响,因此在
hive0.11
lalaguozhe
·
2013-06-13 14:00
hadoop
hive
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他