Compaction 第7页

Cassandra1.1.0中Compaction部分源代码解析——准备篇

wsql·2012-06-04 17:00

Cassandra1.1.0中SizeTieredCompactionStrategy和LeveledCompactionStrategy的理解

最近一段时间因为项目的需要对cassandra的两种compaction机制进行了比较深入的了解，后续的博客中会有会相应源代码的解析。

wsql·2012-06-02 19:00

HBase写入性能分析及改造—multi-thread flush and compaction(约能提高两到三倍吞吐量，带压缩测试)

转自：http://blog.csdn.net/kalaamong/article/details/7275242首先描述一下现象最近对HDFS底层做了许多优化，包括硬件压缩卡，内存盘及SSD。在出测试报告时发现老问题，HBase写入速度不稳定，这个大家都习以为常了吧，就是压测时，只要rowsize稍小一点，不管你怎么压，HBase的RegionServer总是不愠不火特淡定。有些人就怀疑是磁盘到

hua840812·2012-04-28 16:16

leveldb研究6- Level和Compaction

这样设计的好处主要是可以减少compaction的次数和每次的文件个数。Compaction为什么要compaction?

小明思考·2012-03-15 17:00

[置顶] HBase写入性能及改造——multi-thread flush and compaction(续：详细测试数据)

接上文啊：测试机性能CPU16* Intel(R)Xeon(R)CPU E5620 @2.40GHzMEMORY48GBDISK12*SATA2TBNET 4*1Gb Ethernet测试数据:类型国内某视频网站近半年用户访问日志结构一行九列，包括用户访问页，关键词及其它用户信息。对应HBase一个family下9个column，一行120到180字节数据量每次测试写入10亿条数据，原始数

kalaamong·2012-02-24 12:00

[置顶] HBase写入性能分析及改造—multi-thread flush and compaction(约能提高两到三倍吞吐量，带压缩测试)

首先描述一下现象最近对HDFS底层做了许多优化，包括硬件压缩卡，内存盘及SSD。在出测试报告时发现老问题，HBase写入速度不稳定，这个大家都习以为常了吧，就是压测时，只要rowsize稍小一点，不管你怎么压，HBase的RegionServer总是不愠不火特淡定。有些人就怀疑是磁盘到瓶颈了？还有些人怀疑是不是GC拖累了？总之网上大部分测试都是黑盒测试嘛，大家也就乱猜呗。下面我仔细来分析下原因，并

kalaamong·2012-02-20 11:00

HBase Region操作实战分析之Store Compaction

,我从代码和日志层面介绍了region的memstoreflush逻辑在文章最后提到不断的flush会导致store目录下的storefile越来越多,则会触发region的(minor/major)compaction

zjumath·2011-11-10 11:00

leveldb源代码分析3 memtable

上面一篇博文主要说了leveldb的理论原理，接下来将说明leveldb中如何去实现这些组件，主要是按照下面的思路进行的：首先分别分析LSM的各个组件，例如memtable，commitlog，compaction

xuqianghit·2011-11-08 15:00

Cassandra 1.0 参考(2) ColumnFamily的定义

构造属性Column_typestringStandard所保存的Column的类型，所设置数据为Standard或Super，Super就是SuperColumnCommentstringn/a备注Compaction_strategystringSizeTieredSizeTiere

jialine·2011-10-24 14:19

hbase中compaction流程

当 client 向 hregion 端 put() 数据时， HRegion 会判断当前的 memstore 的大小是否大于参数hbase.hregion.memstore.flush.size 值，如果大于，则执行 flushcache() 操作，将 hregion 上的 memstore 刷新到 storefiles 文件里。而在 flushcache 时，会先判断当前的 region 是否

A221133·2011-10-19 12:00

Hbase选择Store file做compaction的算法

Thealgorithmisbasicallyasfollows:Runoverthesetofallstorefiles,fromoldesttoyoungestIftherearemorethan3(hbase.hstore.compactionThreshold)storefilesleftandthecurrentstorefileis20%largerthenthesumofallyou

macyang·2011-05-15 21:00

在Hbase中选择多少个column family才合适呢？

下面主要说的是在设计Hbaseschema的时候，要尽量只有一个columnfamily，至于为什么主要从flush和compaction说起，它们触发的基本单位都是Region级别，所以当一个columnfamily

macyang·2011-05-14 20:00

hbase海量数据的全量导入方法

最近有个需求要对mysql的全量数据迁移到hbase,虽然hbase的设计非常利于高效的读取，但是它的compaction实现对海量数据写入造成非常大的影响，数据到一定量之后，就开始抽风。

lingqi1818·2011-02-17 10:00

IBM Java Jvm GC实现内幕 (几年前的老文)

IBM JVM的GC分为三个步骤，Mark phase(标记),Sweep phase(清扫),Compaction phase(内存紧缩). 在了解这些过程之前，我们先看一

cooldatabase·2010-04-05 14:00

回顾2013：HBase的提升与挑战

这里为大家回顾2013年HBase中最值得关注的几个方面，其中包括Compaction、MTTR、Bucket Cache 、企业级应用等。

coolsunchen·2008-04-12 15:00

推荐频道

Compaction