E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
SerDe
[Hive - LanguageManual] Alter Table/Partition/Column
Table Rename Table Alter Table Properties Alter Table Comment Add
SerDe
·
2015-11-11 16:32
partition
hive源代码解析之一hive主函数入口
hive源代码本身就可以分为ql/metasotre/service/
serde
这几块;其中 对于Hive来说,ql是整个Hive最最核心的一个模块,Hive主要的功能都集中在这样一个模块中
·
2015-11-11 03:46
hive
HIVE:
SerDe
应用实例
创建表, 用正则表达式的形式指定格式 create table test1(id int, name string) row format
serde
'org.apache.hadoop.hive.ser
·
2015-10-27 11:11
hive
Hive UDAF开发
org.hrj.hive.udf; import org.apache.hadoop.hive.ql.exec.UDAFEvaluator;import org.apache.hadoop.hive.
serde
2
·
2015-10-23 08:03
hive
org.apache.hadoop.hive.contrib.
serde
2.RegexSerDe not found
异常信息如下: atorg.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:569) atorg.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:166) at
yangws2004
·
2015-05-19 10:16
spark
org.apache.hadoop.hive.contrib.
serde
2.RegexSerDe not found
异常信息如下: atorg.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:569) atorg.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:166) at
yangws2004
·
2015-05-19 10:16
spark
org.apache.hadoop.hive.contrib.
serde
2.RegexSerDe not found
异常信息如下:atorg.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:569)atorg.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:166)atorg.apache.s
yangws2004
·
2015-05-19 10:16
spark
org.apache.hadoop.hive.contrib.
serde
2.RegexSerDe not found
异常信息如下: atorg.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:569) atorg.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:166) at
yangws2004
·
2015-05-19 10:09
spark
org.apache.hadoop.hive.contrib.
serde
2.RegexSerDe not found
异常信息如下: atorg.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:569) atorg.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:166) at
yangws2004
·
2015-05-19 10:09
spark
org.apache.hadoop.hive.contrib.
serde
2.RegexSerDe not found
异常信息如下:atorg.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:569)atorg.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:166)atorg.apache.s
yangws2004
·
2015-05-19 10:09
spark
Hive 的 CSV
Serde
介绍和使用
Hive的CSVSerde介绍和使用CSV格式的文件也称为逗号分隔值(Comma-SeparatedValues,CSV,有时也称为字符分隔值,因为分隔字符也可以不是逗号。在本文中的CSV格式的数据就不是简单的逗号分割的),其文件以纯文本形式存储表格数据(数字和文本)。CSV文件由任意数目的记录组成,记录间以某种换行符分隔;每条记录由字段组成,字段间的分隔符是其它字符或字符串,最常见的是逗号或制表
鲍礼彬
·
2015-05-18 00:35
Bigdatda-Hive
Hive 的 CSV
Serde
介绍和使用
Hive的CSVSerde介绍和使用CSV格式的文件也称为逗号分隔值(Comma-SeparatedValues,CSV,有时也称为字符分隔值,因为分隔字符也可以不是逗号。在本文中的CSV格式的数据就不是简单的逗号分割的),其文件以纯文本形式存储表格数据(数字和文本)。CSV文件由任意数目的记录组成,记录间以某种换行符分隔;每条记录由字段组成,字段间的分隔符是其它字符或字符串,最常见的是逗号或制表
baolibin528
·
2015-05-18 00:00
hive
csv
的
Serde介绍和使
Hive配置文件中配置项的含义详解
5.当用户自定义了UDF或者
SerDe
yangxiangpao
·
2015-03-31 16:30
Hive
hive中自定义JsonSerde处理复杂结构的json数据
幸好hive本身提供了数据序列化反序列化的接口
Serde
,开发者只需要自定义实现
Serde
接口实现自己的逻辑即可。
ahjzgyxy
·
2015-03-18 21:00
json
hive
SerDe
Hive修改表
ALTERTABLE语句用于改变一个已经存在的表的结构,如:增加列和分区,改变
SerDe
,添加表和
SerDe
的属性或成命名表。
caiandyong
·
2015-03-11 22:32
Hbase-Hive-pig
Hive修改表
ALTERTABLE语句用于改变一个已经存在的表的结构,如:增加列和分区,改变
SerDe
,添加表和
SerDe
的属性或成命名表。
caiandyong
·
2015-03-11 22:00
hive
Hive修改表
hive
serde
序列化与反序列化 - 一行数据写入hive表
Hive-0.5中
SerDe
概述一、背景1、当进程在进行远程通信时,彼此可以发送各种类型的数据,无论是什么类型的数据都会以二进制序列的形式在网络上传送。
火箭筒
·
2015-01-18 22:13
表
一行数据写入hive
hive
serde
序列化与反序列化 - 一行数据写入hive表
Hive-0.5中
SerDe
概述一、背景1、当进程在进行远程通信时,彼此可以发送各种类型的数据,无论是什么类型的数据都会以二进制序列的形式在网络上传送。
火箭筒
·
2015-01-18 22:13
表
一行数据写入hive
Hive 处理CSV格式文件数据
本文采用CSVSerDe:一、添加第三方
SerDe
首先在Hiveclasspath中添加第三方SerDeJAR包,命令如下:hive>addjar/home/hadoopUser/cloud/hive/
niityzu
·
2014-12-28 15:18
Hive学习
Hive 处理CSV格式文件数据
本文采用CSVSerDe:一、添加第三方
SerDe
首先在Hiveclasspath中添加第三方SerDeJAR包,命令如下:hive>addjar/home/hadoopUser/cloud/hive/
NIITYZU
·
2014-12-28 15:00
linux
hive
jar
Hive 使用RegexSerDe来处理标准格式Apache Web日志
我的Hive版本是apache-hive-0.13.1-bin一、在Hive中创建表
serde
_regexCREATETABLEserde_regex(hostSTRING,identitySTRING
niityzu
·
2014-12-23 15:47
Hive学习
Hive 使用RegexSerDe来处理标准格式Apache Web日志
我的Hive版本是apache-hive-0.13.1-bin一、在Hive中创建表
serde
_regexCREATETABLEserde_regex( hostSTRING, identitySTRING
NIITYZU
·
2014-12-23 15:00
Hive连接超长Hbase宽表异常
FAILED:Errorinmetadata:MetaException(message:javax.jdo.JDODataStoreException:Putrequestfailed:INSERTINTO`
SERDE
_PARAMS
吐槽的达达仔
·
2014-12-05 22:00
hive
hbase
元数据
Hive中配置Parquet(CDH4.3)
Parquet安装包,所以如果在Hive或Impala中需要使用Parquet格式,需要手动进行安装,当创建Parquet格式的表时,需要定义Parquet相关的InputFormat,OutputFormat,
Serde
wangxucumt
·
2014-08-27 09:00
hive
parquet
hive
Hive中配置Parquet(CDH4.3)
Parquet安装包,所以如果在Hive或Impala中需要使用Parquet格式,需要手动进行安装,当创建Parquet格式的表时,需要定义Parquet相关的InputFormat,OutputFormat,
Serde
wangxucumt
·
2014-08-27 09:00
hive
Parquet
HIVE User Guide 总结之二
用户在建表的时候可以自定义
SerDe
或者使用自带的SerD
Big-Data
·
2014-08-26 20:00
Hive中的InputFormat、OutputFormat与
SerDe
在有些时候,我们往往面对多行,结构化的文档,并需要将其导入Hive处理,此时,就需要自定义InputFormat、OutputFormat,以及
SerDe
了。首先来理清这三者之
forever_ai
·
2014-08-22 15:58
hive
Hive中的InputFormat、OutputFormat与
SerDe
在有些时候,我们往往面对多行,结构化的文档,并需要将其导入Hive处理,此时,就需要自定义InputFormat、OutputFormat,以及
SerDe
了。首先来理清这三者之
·
2014-08-22 15:00
Hive Outline - Part II (Architecture,
SerDe
)
HiveArchitecture1.Metastoreservice,提供元数据服务,存储可以选择Derby,Mysql,等其他数据库。2.HiveServer,Thrift服务, HiveServer1deprecated.HiveServer2提供了如下更新:HiveServer2ThriftAPIspecJDBC/ODBCHiveServer2driversConcurrentThri
woodo
·
2014-08-20 15:00
HQL
hadoop
hive
SerDe
HIVE RegexSerDe使用详解
在hive0.11中,自带了两个RegexSerDe类:org.apache.hadoop.hive.contrib.
serde
2.RegexSerDe;org.apache.hadoop
仲渊
·
2014-08-08 11:21
数据平台
hive
hadoop
Hive中ObjectInspector的作用
Serde
是什么:
Serde
实现数据序列化和反序列化以及提供一个辅助类ObjectInspector帮助使用者访问需要序列化或者反序列化的对象。
czw698
·
2014-08-06 22:00
Hive null 值的处理
要导入NULL字段的数据,需要查阅使用的
SerDe
的文档。
wangqiaowqo
·
2014-08-05 17:00
hive
Hive学习之修改表、分区、列
修改表的语句允许改变现有表的结构,通过该语句可以增加列/分区,修改
SerDe
,增加表和
SerDe
的属性或者重命名表。与之类似,修改分区的语句可以改变指定分区的属性。
skyWalker_ONLY
·
2014-06-12 11:38
Hive
勤奋的Hive
Hive学习之修改表、分区、列
修改表的语句允许改变现有表的结构,通过该语句可以增加列/分区,修改
SerDe
,增加表和
SerDe
的属性或者重命名表。与之类似,修改分区的语句可以改变指定分区的属性。
sky_walker85
·
2014-06-12 11:00
hive
hive表
hive分区
Hive列
hive指定行分割符和列分隔符
(当然还有其他的方式,比如书上说
serDe
来做) packagecom.hcr.hadoop.hive; importjava.io.IOException; importjava.i
ruishenh
·
2013-12-26 10:00
hive
hive学习
hive指定行分割符
hive指定行分割符和列分隔符
(当然还有其他的方式,比如书上说
serDe
来做) package com.hcr.hadoop.hive; import java.io.IOException; im
ruishen
·
2013-12-26 10:00
hive
hive0.11升级碰到的坑
1.Hive0.11对于每一个分区维护了各自的Schema信息,而0.9中的分区是复用TableSchema来做字段的
Serde
,如果一张表新增字段,再创建分区,新建的分区会继承TableSchema,
lalaguozhe
·
2013-12-23 16:59
Hive
hadoop
spark
shark
hive0.11升级碰到的坑
1.Hive0.11对于每一个分区维护了各自的Schema信息,而0.9中的分区是复用TableSchema来做字段的
Serde
,如果一张表新增字段,再创建分区,新建的分区会继承TableSchema,
lalaguozhe
·
2013-12-23 16:00
hadoop
hive
Hive代码组织及架构简单介绍
hive三个主要组件Serialzers/Deserialzers(trunk/
serde
) 此组件允许用户自己开发自定义序列化、反序列化文件解析器,hive自身也内置了一些序列化解析类。
扫大街的程序员
·
2013-11-03 13:00
源码
hive
Hive代码组织及架构简单介绍
说明hive三个主要组件Serialzers/Deserialzers(trunk/
serde
) 此组件允许用户自己开发自定义序列化、反序列化文件解析器,hive自身也内置了一些序列化解析类。
秦时明月黑
·
2013-09-29 14:00
hive
Hive代码组织及架构简单介绍
阅读更多说明hive三个主要组件Serialzers/Deserialzers(trunk/
serde
)此组件允许用户自己开发自定义序列化、反序列化文件解析器,hive自身也内置了一些序列化解析类。
秦时明月黑
·
2013-09-29 14:00
(hive union)FAILED: SemanticException 1:14 Top level UNION is not supported currently
showcreatetablemhfs_role;OKCREATE TABLEmhfs_role( ptstring, cntint)ROWFORMATSERDE 'org.apache.hadoop.hive.
serde
2
lxpbs8851
·
2013-09-06 16:00
HIVE体系结构
数据库(2)内部表(3)外部表(4)分区(5)桶(6)Hive的视图Hive的执行原理Hive和数据库的异同Hive元数据库Hive基本操作使用HIVE注意点Hive的扩展特性(1)数据文件格式(2)
SerDe
iteye_4836
·
2013-08-27 12:10
hadoop学习
HIVE体系结构
数据库(2)内部表 (3)外部表(4)分区(5)桶(6)Hive的视图Hive的执行原理Hive和数据库的异同Hive元数据库 Hive基本操作使用HIVE注意点Hive的扩展特性(1)数据文件格式(2)
SerDe
liuwwww
·
2013-08-27 12:00
hive
Hive连接超长Hbase宽表异常
FAILED:Errorinmetadata:MetaException(message:javax.jdo.JDODataStoreException:Putrequestfailed:INSERTINTO`
SERDE
_PARAMS
dacoolbaby
·
2013-07-17 09:00
Hive
Hbase
元数据
Hive连接超长Hbase宽表异常
FAILED:Errorinmetadata:MetaException(message:javax.jdo.JDODataStoreException:Putrequestfailed:INSERTINTO`
SERDE
_PARAMS
dacoolbaby
·
2013-07-17 09:00
Hive
Hbase
元数据
Hive连接超长Hbase宽表异常
metadata: MetaException(message:javax.jdo.JDODataStoreException: Put request failed : INSERT INTO `
SERDE
_PARAMS
dacoolbaby
·
2013-07-17 09:00
hive
hbase
元数据
HIVE之
Serde
和Inspector介绍
Serde
是什么:
Serde
实现数据序列化和反序列化以及提供一个辅助类ObjectInspector帮助使用者访问需要序列化或者反序列化的对象。
sxf_824
·
2013-07-12 15:00
hive
Hive建表实例——定义serdeproperties属性
serdeproperties属性,createtablewzhg( c0string, c1string, c2string )rowformatserde'org.apache.hadoop.hive.contrib.
serde
2
wzhg0508
·
2013-06-09 23:00
hive
正则表达式
serdeproperties
Hive建表实例——定义serdeproperties属性
serdeproperties属性,createtablewzhg(c0string,c1string,c2string)rowformatserde'org.apache.hadoop.hive.contrib.
serde
2
iteye_14832
·
2013-06-09 23:00
上一页
1
2
3
4
5
6
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他