E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
SequenceFile
hdfs上的append测试
阅读更多hbase在写入数据之前会先写hlog,hlog目前是
sequencefile
格式,采用append的方式往里追加数据。之前团队的同学测试关闭hlog会一定程序上提升写hbase的稳定性。
lc_koven
·
2011-05-04 23:00
HBase
ITeye
Hive 的扩展特性
Hive的扩展特性文章分类:Java编程Hive是一个很开放的系统,很多内容都支持用户定制,包括:文件格式:TextFile,
SequenceFile
内存中的数据格式:JavaInteger/String
xiaobian
·
2011-03-30 15:00
java
apache
hadoop
unix
脚本
Hive 的扩展特性
Hive的扩展特性文章分类:Java编程Hive是一个很开放的系统,很多内容都支持用户定制,包括:文件格式:TextFile,
SequenceFile
内存中的数据格式:JavaInteger/String
xiaobian
·
2011-03-30 15:00
java
apache
hadoop
unix
脚本
Hive 的扩展特性
阅读更多Hive的扩展特性文章分类:Java编程Hive是一个很开放的系统,很多内容都支持用户定制,包括:文件格式:TextFile,
SequenceFile
内存中的数据格式:JavaInteger/String
xiaobian
·
2011-03-30 15:00
Hadoop
Java
Apache
Unix
脚本
Hive 的扩展特性
Hive是一个很开放的系统,很多内容都支持用户定制,包括:文件格式:TextFile,
SequenceFile
内存中的数据格式:JavaInteger/String,HadoopIntWritable/
baiyunl
·
2011-03-16 15:57
hive
Hive 的扩展特性
Hive是一个很开放的系统,很多内容都支持用户定制,包括:文件格式:TextFile,
SequenceFile
内存中的数据格式:JavaInteger/String,HadoopIntWritable/
085567
·
2011-03-16 15:00
apache
hadoop
unix
脚本
Facebook
mahout下处理的文件必须是
SequenceFile
格式的,所以需要把txtfile转换成
sequenceFile
mahout下处理的文件必须是
SequenceFile
格式的,所以需要把txtfile转换成
sequenceFile
。
chakey
·
2011-03-06 23:00
apache
hadoop
PHP
Lucene
bbs
hadoop io Sequence, Map, Set, Array, BloomMap Files(译文)
http://www.cloudera.com/blog/2011/01/hadoop-io-sequence-map-set-array-bloommap-files/ hadoop的
sequenceFile
lance_123
·
2011-01-18 19:00
数据结构
maven
hadoop
IO
Build
download
SequenceFile
的压缩和分片
Compressed Data Storage Keeping data compressed in Hive tables has, in some cases, known to give better performance that uncompressed storage; both, in terms of disk usage and query performan
samuschen
·
2010-12-06 19:00
hadoop
Access
performance
hive的存储格式
hive有textFile,
SequenceFile
,RCFile三种文件格式。 其中textfile为默认格式,建表时不指定默认为这个格式,导入数据时会直接把数据文件拷贝到hdfs上不进行处理。
samuschen
·
2010-12-06 13:00
hive
SequenceFile
前天项目组里遇到由于
sequenceFile
的压缩参数设置为record而造成存储空间的紧张,后来设置为block压缩方式的压缩方式,存储空间占用率为record方式的1/5。
royesir
·
2010-08-13 15:00
工作
存储
byte
TFile,
SequenceFile
与gz,lzo压缩的测试
阅读更多先记一记,以后解释:)$hadoopjartfile-0.00.1-dev.jarorg.apache.hadoop.io.file.tfile.TestTFileSeqFileComparison-cgz-fseqfile-r/home/zhoumin/tmp-xrw-b65536-s1024===SeqFile:Creation(KLEN:50-100...VLEN:100-200..
coderplay
·
2010-01-07 22:00
Hadoop
performance
Apache
C
C++
TFile,
SequenceFile
与gz,lzo压缩的测试
先记一记,以后解释 :) $hadoop jar tfile-0.00.1-dev.jar org.apache.hadoop.io.file.tfile.TestTFileSeqFileComparison -c gz -f seqfile -r /home/zhoumin/tmp -x rw -b 65536 -s 1024 === SeqFile: Creation (K
coderplay
·
2010-01-07 22:00
apache
C++
c
hadoop
performance
如何读取nutch抓取数据
2.用一个
SequenceFile
.Reader来读取排序的输入。
p_x1984
·
2009-12-16 17:00
Nutch
如何读取nutch抓取数据
2.用一个
SequenceFile
.Reader来读取排序的输入。
p_x1984
·
2009-12-16 17:00
Nutch
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他