E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
GLUSTERFS
glusterfs
3.3源码目录结构解析
获得源码: > git clone git://github.com/gluster/
glusterfs
.git .|-- argp-standalone 命令行参数解析器(Argument
lancelotwjq
·
2012-07-11 17:00
storage
GlusterFS
基于
glusterfs
和gearman的离线任务运算分布式化方案介绍
web站点服务中,我们除了存在面向用户的服务功能外,往往也存在大量的后台离线的相关计算任务,如对前端的异步操作数据队列进行定期处理,对数据库中的数据进行汇总挖掘,监控,转储,对中间数据的进一步运算处理等等……一个web服务站点的背后,往往存在大量对应的后端处理任务的功能模块,用于支撑正常的业务功能系统。在一个web站点的初始阶段,我们可能只需要有一台服务器,容纳部署所有的业务功能,包括了面向用户的
editor
·
2012-07-09 15:00
架构
glusterfs
gearman
分布式
基于
glusterfs
和gearman的离线任务运算分布式化方案介绍
web站点服务中,我们除了存在面向用户的服务功能外,往往也存在大量的后台离线的相关计算任务,如对前端的异步操作数据队列进行定期处理,对数据库中的数据进行汇总挖掘,监控,转储,对中间数据的进一步运算处理等等……一个web服务站点的背后,往往存在大量对应的后端处理任务的功能模块,用于支撑正常的业务功能系统。 在一个web站点的初始阶段,我们可能只需要有一台服务器,容纳部署所有的业务功能,包括了面向用户
editor
·
2012-07-09 07:00
架构
分布式
gearman
GlusterFS
分布式文件系统比较
GlusterFS
感觉广告宣传做的比产品本身好。OpenAFS/Coda是很有特色的东西。Lustre复杂,高效,适合大型集群。PVFS2搭配定制应用会很好,据说曙光的并行文件系统就是基于PVFS。
zhyuxuan_lan
·
2012-06-21 15:26
分布式
文件系统
hdfs
gfs
mf
linux集群高可用
分布式文件系统比较
GlusterFS
感觉广告宣传做的比产品本身好。OpenAFS/Coda是很有特色的东西。Lustre复杂,高效,适合大型集群。PVFS2搭配定制应用会很好,据说曙光的并行文件系统就是基于PVFS。
zhyuxuan_lan
·
2012-06-21 15:26
分布式
GFS
hdfs
文件系统
MFS
fuse-2.9.0编译 安装到 板子上
一些文件系统如ZFS,
glusterfs
和lustre使用FUSE实现。Linux用于支持用户空间文件系统的内核模块名叫FUSE,FUSE一词有时特指Linux下的用户空间文件系统。
ypist
·
2012-06-08 09:00
linux
虚拟机
File
download
makefile
开源分布式文件系统
GlusterFS
3.3 发布
Gluster团队在2012年5月31日发布了
GlusterFS
3.3。
·
2012-06-06 07:00
开源
文件系统
GlusterFS
开源分布式文件系统
GlusterFS
3.3 发布
Gluster团队在2012年5月31日发布了
GlusterFS
3.3。
李雨来
·
2012-06-06 00:00
Glusterfs
之rpc模块源码分析(下)之RDMA over TCP的协议栈工作过程浅析
声明:本文转至IT168:因为
GlusterFS
实现了IB网络(RDMA协议,专用硬件网卡支持),当时就在想普通的网卡能不能实现,就找到一篇这样的文章介绍,基于TCP协议来实现。!
wanweiaiaqiang
·
2012-05-14 22:00
Glusterfs
之rpc模块源码分析(中)之
Glusterfs
的rpc模块实现(3)
我的新浪微博:http://weibo.com/freshairbrucewoo。欢迎大家相互交流,共同提高技术。第三节、rpc通信过程分析前面两个小节分别对rpc服务端和客户端的建立流程做了详细的分析,也就是说rpc客户端和服务器端已经能够进行正常的通信了(rpc客户端已经通过connect链接上rpc服务器了),那么这一小节主要根据一个实际的例子来分析一个完整的rpc通信过程。下面以客户端创建
wanweiaiaqiang
·
2012-05-14 22:00
Glusterfs
之rpc模块源码分析(中)之
Glusterfs
的rpc模块实现(2)
我的新浪微博:http://weibo.com/freshairbrucewoo。欢迎大家相互交流,共同提高技术。第二节、rpc客户端实现原理及代码分析rpc客户端主要发起一个rpc请求,执行完rpc请求以后就退出rpc,下面分析客户端rpc请求建立的整个过程。Rpc客户端请求建立的第一步是执行cli_rpc_init函数,主要实现代码如下: this = THIS;//取得本线程的
wanweiaiaqiang
·
2012-05-14 22:00
数据结构
timer
socket
服务器
null
代码分析
Glusterfs
之rpc模块源码分析(中)之
Glusterfs
的rpc模块实现(1)
二、
Glusterfs
的rpc模块实现第一节、rpc服务器端实现原理及代码分析1.rpc服务初始化Rpc服务的初始化工作在函数rpcsvc_init中实现的,实现代码如下:rpcsvc_t*rpcsvc_init
thecloud
·
2012-05-13 10:00
gluster
Glusterfs
之rpc模块源码分析(中)之
Glusterfs
的rpc模块实现(1)
二、
Glusterfs
的rpc模块实现第一节、rpc服务器端实现原理及代码分析1.rpc服务初始化Rpc服务的初始化工作在函数rpcsvc_init中实现的,实现代码如下:rpcsvc_t * rpcsvc_init
wanweiaiaqiang
·
2012-05-13 10:00
工作
tcp
socket
unix
list
wrapper
Glusterfs
之rpc模块源码分析(上)之RPC概述
我的新浪微博:http://weibo.com/freshairbrucewoo。欢迎大家相互交流,共同提高技术。一、RPC概述第一节、RPC结构网络RPC(Remote Procedure Call Protocol)——远程过程调用协议,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在
wanweiaiaqiang
·
2012-05-13 10:00
新浪微博
网络
中间件
服务器
分布式计算
internet
Glusterfs
之rpc模块源码分析(上)之RPC概述
我的新浪微博:http://weibo.com/freshairbrucewoo。 欢迎大家相互交流,共同提高技术。 一、RPC概述 第一节、RPC结构网络 RPC(RemoteProcedureCallProtocol)——远程过程调用协议,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带
thecloud
·
2012-05-13 10:00
gluster
Glusterfs
之nfs模块源码分析(下)之NFS协议之RPC的实现和NFS协议内容
我的新浪微博:http://weibo.com/freshairbrucewoo。欢迎大家相互交流,共同提高技术。六、NFS协议之RPC的实现因为nfs服务器启动时的端口是不确定的,所以nfs服务器将自己的端口注册到rpc服务,客户端通过rpc请求知道nfs服务器的监听端口。下面就分析整个rpc的处理过程。现在假设客户端有一个rpc请求达到服务器端了,通过上面nfs协议初始化的分析知道:所有的数据
wanweiaiaqiang
·
2012-05-09 22:00
String
socket
新浪微博
服务器
System
actor
Glusterfs
之nfs模块源码分析
一、网络文件系统概述 Sun Microsystems公司于1984年推出了一个在整个计算机工业中被广泛接受的远程文件存取机制,它被称为Sun的网络文件系统(Network File System),或者简称为NFS。该机制允许在一台计算机上运行一个服务器,使对其上的某些或所有文件都可以进行远程存取,还允许其他计算机上的应用程序对这些文件进行存取。它使我们能够达到文件的共享。当使用者想用远端档案时
·
2012-05-08 14:00
nfs
GlusterFS
Glusterfs
之nfs模块源码分析(中)之
Glusterfs
实现NFS服务器
五、
Glusterfs
实现NFS服务器第一节、启动过程分析
Glusterfs
的nfs服务器启动命令如下: /usr/local/sbin/
glusterfs
-f /etc/glusterd/nfs/nfs-server.vol
wanweiaiaqiang
·
2012-05-07 22:00
list
unix
table
null
Graph
symlink
Glusterfs
之nfs模块源码分析(上)之nfs原理和协议
我的新浪微博:http://weibo.com/freshairbrucewoo。欢迎大家相互交流,共同提高技术。一、网络文件系统概述Sun Microsystems公司于1984年推出了一个在整个计算机工业中被广泛接受的远程文件存取机制,它被称为Sun的网络文件系统(Network File System),或者简称为NFS。该机制允许在一台计算机上运行一个服务器,使对其上的某些或所有文件都可以
wanweiaiaqiang
·
2012-05-07 22:00
多线程
linux
网络
tcp
服务器
网络协议
GlusterFS
集群文件系统研究
GlusterFS
集群文件系统研究 刘爱贵 1.
xiaoyu
·
2012-04-29 06:06
分布式文件系统
GlusterFS
集群文件系统
iozone对
GlusterFS
压力测试
./iozone-t2-i0-s10M-r512k-+w-nFtest1test2./iozone-t1000-i0-s10M-r128k-+w-n以下内容摘自: http://blog.csdn.net/lin_fs/article/details/7096808测试一个多月对iozone、fio有了解,也明白了一个道理:问题是一点一点解决的,关键要持之以恒。 iozone:一些大家都知道或者能
peter_cloud
·
2012-04-28 13:00
GlusterFS
之内存池(mem-pool)使用实例分析
上一篇博客详细分析了
GlusterFS
之内存池的实现技术,今天我们看看
GlusterFS
是怎么使用这个技术的。
wanweiaiaqiang
·
2012-04-26 19:00
新浪微博
struct
list
null
pair
linux内核
GlusterFS
之内存池(mem-pool)实现原理及代码详解
最近一直在研究
glusterfs
的源代码,自己也在上面做了一些小的改动。我最开始研究的是3.2.5这个版本,因为据同行和网上资料显示这个版本目前是最稳定的版本。
wanweiaiaqiang
·
2012-04-25 20:00
list
struct
新浪微博
null
Allocation
structure
Thrift之代码生成器Compiler原理及源码详细解析1
又很久没有写博客了,最近忙着研究
GlusterFS
,本来周末打算写几篇博客的,但是由于调试
GlusterFS
的一些新增功能就用了整整的一天,还有一天就陪老婆大人逛街去了!
wanweiaiaqiang
·
2012-04-23 23:00
String
语言
Path
include
generator
compiler
gluster3.2.x的安装配置
阅读更多一、
GlusterFS
软件介绍
GlusterFS
是一款开源的分布式存储系统,它基于fuse设计,具有强大的横向扩展能力,通过扩展能够支持数PB存储容量和处理数千客户端。
wenson
·
2012-04-19 19:00
CentOS
glusterfs
gluster3.2.x的安装配置
一、
GlusterFS
软件介绍
GlusterFS
是一款开源的分布式存储系统,它基于 fuse 设计,具有强大的横向扩展能力,通过扩展能够支持数 PB 存储容量和处理数千客户端
wenson
·
2012-04-19 19:00
centos
GlusterFS
gluster3.2.x的安装配置
一、
GlusterFS
软件介绍
GlusterFS
是一款开源的分布式存储系统,它基于 fuse 设计,具有强大的横向扩展能力,通过扩展能够支持数 PB 存储容量和处理数千客户端
wenson
·
2012-04-19 19:00
centos
GlusterFS
[置顶] Hbase+
GlusterFS
可行性
通过测试时证明:在分布式模式下
GlusterFs
可以代替hadoop的HDFS,作为Hbase的底层数据存储。
lin_FS
·
2012-04-18 15:00
java
服务器
测试
hbase
jmx
variables
分布式文件系统MFS、Ceph、
GlusterFS
、Lustre的比较
p=510MooseFS(MFS)Ceph
GlusterFS
LustreMetadataserver单个MDS。存在单点故障和瓶颈。多个MDS,不存在单点故障和瓶颈。MDS可以扩展,不存在瓶颈。
wsl3511
·
2012-02-22 11:16
MFS
Ceph
GlusterFS
L
分布式文件系统MFS、Ceph、
GlusterFS
、Lustre的比较
p=510MooseFS(MFS)Ceph
GlusterFS
LustreMetadataserver单个MDS。存在单点故障和瓶颈。多个MDS,不存在单点故障和瓶颈。MDS可以扩展,不存在瓶颈。
wsl3511
·
2012-02-22 11:16
GlusterFS
ceph
MFS
Lustre
Glusterfs
全局统一命名空间
全局统一命名空间
Glusterfs
采用了全局统一命名空间设计,将磁盘和内存资源聚集成一个单一的虚拟存储池进行管理,并在此命名空间中使用NFS/CIFS等标准协议来访问应用数据。
peter_cloud
·
2012-02-21 17:00
Glusterfs
Rebalance简析
Glusterfs
Rebalance
GlusterFS
的哈希分布是以目录为基本单位的,文件的父目录利用扩展属性记录了子卷映射信息,子文件在父目录所属存储服务器中进行分布。
peter_cloud
·
2012-02-21 12:00
负载均衡
服务器
layout
存储
扩展
工具
GlusterFS
集群文件系统研究
GlusterFS
概述
GlusterFS
是Scale-Out存储解决方案Gluster的核心,它是一个开源的分布式文件系统,具有强大的横向扩展能力,通过扩展能够支持数PB存储容量和处理数千客户端。
peter_cloud
·
2012-02-15 14:00
算法
集群
服务器
存储
扩展
存储系统
GlusterFS
文档翻译 -
GlusterFS
Translators v1.3 中文化
说明本人能力有限,如果翻译过来的内容使你产生疑惑,请见原始文档:http://www.gluster.org/docs/index.php/
GlusterFS
_Translators_v1.3性能相关的
peter_cloud
·
2012-02-02 12:00
server
负载均衡
文档
磁盘
Sockets
locking
GlusterFS
Translators v1.3
http://www.gluster.org/community/documentation/index.php/
GlusterFS
_Translators_v1.3
peter_cloud
·
2012-02-02 12:00
GlusterFS
常用translators(中继)
[Copytoclipboard]ViewCodeTEXT1 2 3 4 5 6 7 typestorage/posix storage/posix的作用是指定一个本地目录给
GlusterFS
内的一个卷使用
peter_cloud
·
2012-02-02 12:00
tcp
IO
服务器
存储
web服务
locking
GlusterFs
安装部署文档
1.安装步骤把“fuse-2.8.4.tar.gz”和“
glusterfs
-3.2.5.tar.gz”上传到/home/xmail目录下,解压,编译,安装都在这个目录下进行。
lin_fs
·
2012-02-01 10:13
[置顶]
GlusterFs
安装部署文档
1.安装步骤 把“fuse-2.8.4.tar.gz”和“
glusterfs
-3.2.5.tar.gz”上传到/home/xmail目录下,解压,编译,安装都在这个目录下进行。
lin_FS
·
2012-02-01 10:00
集群
server
服务器
git
存储
文档
GlusterFS
命令解析过程
前些时间通过对
GlusterFS
的源码的阅读和调试,梳理了一下基本的命令流程,今后会陆续的将更深入的理解与大家共享!
fly542
·
2012-01-29 15:00
FUSE简介
一些文件系统如ZFS,
glusterfs
和luster使用FUSE实现。Linux用于支持用户空间文件系统的内核模块名叫FUSE,FUSE一词有时特指Linux下的用户空间文件系统。
peter_cloud
·
2012-01-09 15:00
linux
struct
list
File
makefile
symlink
GlusterFS
分析--来自互联网的资料
引言
GlusterFS
是一个高层次的分布式文件系统解决方案。通过增加一个逻辑层,对上层使用者掩盖了下面的实现,使用者不用了解也不需知道,文件的存储形式、分布。
peter_cloud
·
2012-01-09 15:00
互联网
struct
server
服务器
Graph
Signal
安装
GlusterFS
服务器
GlusterFS
是作为Ubuntu的10.10封装,因此我们就可以安装它,如下所示:sudosu aptitudeinstall
glusterfs
-server安装完毕,输入以下命令
glusterfs
peter_cloud
·
2012-01-09 12:00
GlusterFS
中的volume挂载
GlusterFS
提供了最大的灵活性:你可以自由地用各种现在存在的协议输出存储卷,它支持
GlusterFS
自己的客户端,CIFS,NFS和WebDAV协议参考资料:http://hi.baidu.com
peter_cloud
·
2012-01-09 11:00
GlusterFS
中的RAID
百度百科里有详细解释这里结合
glusterfs
的应用,说一下RAID0和RAID1RAID0和
peter_cloud
·
2012-01-09 11:00
算法
tcp
负载均衡
服务器
存储
磁盘
GlusterFS
将与Hadoop兼融
大数据需要大文件系统,这就是开放源码的
GlusterFS
文件系统在即将发布的
GlusterFS
3.3版本的设计目标。
peter_cloud
·
2012-01-09 10:00
GlusterFS
集群文件系统研究
GlusterFS
集群文件系统研究刘爱贵 1.
peter_cloud
·
2012-01-04 17:00
Lustre V.S. Hadoop V.S. Gluster
p=280差异总结表 LustreFSHadoopFS
GlusterFS
MetadataServer有。存在单点故障。 MDS使得用户可以访问到存储在一个或多个MDT上的元数据。
peter_cloud
·
2012-01-04 17:00
glusterfs
的不足与缺点
Gluster最近风头日盛啊,先是被Redhat以1.36亿收购,现又被评为2011年度十大开源软件,但是经过测试发现,虽然其宣称的架构不错,但是明显具有如下缺点:1)有副本的模式下,写的性能会下降为单副本的N倍(N=副本因子),因为它是完全的同步写N份数据的。2)在压力比较大的时候,ls会非常之慢,难以忍受。原因是它在客户端没有文件信息的缓存,每次都要去遍历brick,如果brick有几百个,其
peter_cloud
·
2012-01-04 16:00
Gluster ABC
前言
Glusterfs
是一个只需要软件的高效可扩展集中化管理的分布式存储系统。可以用于公有云,私有云环境。 这里就说企业私有云,公有云是收费的。
peter_cloud
·
2012-01-04 13:00
算法
数据备份
服务器
存储
分布式存储
磁盘
红帽的大数据:Gluster全方位解读
红帽公司宣布收购Gluster,后者作为
GlusterFS
开源文件系统及Gluster存储平台软件堆栈的开发者受到广泛关注。
peter_cloud
·
2012-01-04 09:00
工作
网络
集群
存储
扩展
rightscale
上一页
23
24
25
26
27
28
29
30
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他