E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ceph存储
ceph存储
centos上搭建Ceph分布式文件系统集群示例一
1. 环境部署我使用VirtualBox创建了六台虚拟机,其中监控节点一个,元数据节点两个,数据节点三个,并使用监控节点作为客户端。机器名和ip如下:mon1.ihep.ac.cn192.168.56.107mds1.ihep.ac.cn192.168.56.108mds2.ihep.ac.cn192.168.56.109osd1.ihep.ac.cn192.168.56.110osd2.ihep
skdkjxy
·
2014-11-26 20:00
ceph存储
ceph-Architecture的Cognize
Architecture【架构】 架构 Ceph企业提供独一无二的对象,块和文件存储在一个统一的系统。Ceph是高度可靠,易于管理,并且免费。Ceph的力量可以改变您公司的IT基础架构和管理大量数据的能力。Ceph为成千上万的客户提供访问PB级到EB的数据提供非凡的可扩展性。Ceph的节点可以充分利用硬件资源和智能守护进程,在一个Ceph的存储集群中,可容纳大量节点
skdkjxy
·
2014-11-26 14:00
ceph存储
ceph中对crush算法的认知
ceph的CRUSH数据分布算法介绍CRUSH是ceph的一个模块,主要解决可控、可扩展、去中心化的数据副本分布问题。1、摘要随着大规模分布式存储系统(PB级的数据和成百上千台存储设备)的出现。这些系统必须平衡的分布数据和负载(提高资源利用率),最大化系统的性能,并要处理系统的扩展和硬件失效。ceph设计了CRUSH(一个可扩展的伪随机数据分布算法),用在分布式对象存储系统上,可以有效映射数据对象
skdkjxy
·
2014-11-26 11:00
ceph存储
centos7+0.87源码安装ceph集群问题汇总
安装过程中整理的相关文档和rpms包下载连接:http://download.csdn.net/detail/skdkjxy/8192825centOS7修改hostnamelocalectlset-localeLANG=要修改的语言hostnamectlset-hostname你要修改到的hostname0.87源码安装配置问题汇总./configureceph0.87源码安装后,./confi
skdkjxy
·
2014-11-24 15:00
ceph存储
loop设备及losetup命令介绍
1.loop设备介绍 在类UNIX系统里,loop设备是一种伪设备(pseudo-device),或者也可以说是仿真设备。它能使我们像块设备一样访问一个文件。在使用之前,一个loop设备必须要和一个文件进行连接。这种结合方式给用户提供了一个替代块特殊文件的接口。因此,如果这个文件包含有一个完整的文件系统,那么这个文件就可以像一个磁盘设备一样被mount起来。 上面说的文件格式,我们经常见到
skdkjxy
·
2014-11-21 14:00
ceph存储
ldconfig和ldd用法
一、ldconfigldconfig是一个动态链接库管理命令,为了让动态链接库为系统所共享,还需运行动态链接库的管理命令--ldconfig。ldconfig 命令的用途,主要是在默认搜寻目录(/lib和/usr/lib)以及动态库配置文件/etc/ld.so.conf内所列的目录下,搜索出可共享的动态链接库(格式如前介绍,lib*.so*),进而创建出动态装入程序(ld.so)所需的连接和缓存文
skdkjxy
·
2014-11-21 13:00
Git 迁移之痛
然后是几个月的硬件准备和软件架构的准备,特别是在
Ceph存储
上的研究花了很长时间。很不幸的是,当我们开始迁移并迁移结束后的第一个高峰期到来时,因为存储的对各种大小文件处理性能奇差导致
红薯
·
2014-11-20 17:00
ceph存储
Ceph论文译文--Ceph:一个可扩展,高性能分布式文件系统
Ceph:一个可扩展,高性能分布式文件系统SageA.WeilScottA.BrandtEthanL.MillerDarrellD.E.LongCarlosMaltzahn 摘要我们开发Ceph,一个分布式文件系统,它提供了优秀的性能、可靠性和可伸缩性。Ceph通过用一个伪随机数据分布函数(CRUSH)替代分布表来最大化的分离数据与元数据管理,这个算法用于异构和动态不可靠的对象存储设备(OSD)
skdkjxy
·
2014-11-20 08:00
ceph存储
多网卡的7种bond模式原理
绑定示例demo下载:http://download.csdn.net/detail/skdkjxy/8176353注意:1、服务器上两个网卡的网线,最好不要接在同一个交换机上!!! 现在存储产品CSS使用了多网卡bond6模式,在这里把多网卡的7种bond模式原理和大家分享: Linux多网卡绑定网卡绑定mode共有七种(0~6)bond0、bond1、bond2、bond3、bond4、bon
skdkjxy
·
2014-11-19 16:00
ceph存储
dd中sKip 和 seek参数理解
假如我有一个文件abc.gz,大小为83456k,我想用dd命令实现如下备份 结果:首先将备份分成三个部分,第一部分为备份文件abc.gz的前10000k,第二部分为中间的70000k,最后备份后面的3456kdd命令中seek和skip用法,感兴趣的朋友可以参考下。 假如有一个文件abc.gz,大小为83456k,我想用dd命令实现如下备份结果:首先将备份分成三个部分,第一部分为备份文件abc.
skdkjxy
·
2014-11-19 16:00
ceph存储
Why Ceph and how to use Ceph?
为什么需要关注Ceph在目前开源世界里多样的存储项目中,不同的项目都有侧重点,而它们最终都是要为企业的IT基础设施服务。那么企业IT基础设施经理们到底需要怎么样的存储,它们的需求得到满足了吗?作者尝试根据对企业级存储产品的调研归纳出如下图。图一从上图我们可以了解到存储接口需求、扩展、运维和成本构成了企业级存储产品的四大中心。几乎所有的存储产品包括硬件(存储一体机,SAN)和软件都致力于在这个方面强
skdkjxy
·
2014-11-12 20:00
ceph存储
ceph整体学习记录(未整理较乱)
ceph源码下载:http://ceph.com/download/主要文档下载连接:http://download.csdn.net/detail/skdkjxy/8149989/*******************/Time:2014-11-6Author:skdkjzz/******************/1、unified中何为radosgw、rbd、ceph-dfs、rados?2、
skdkjxy
·
2014-11-12 17:00
ceph存储
ceph中PG的意义
ceph中引入了PG(placementgroup)的概念,PG是一个虚拟的概念而已,并不对应什么实体,具体的解释下面很清楚。下图中可以看出,ceph先将object映射成PG,然后从PG映射成OSD。object可以是数据文件的一部分,也可以是journalfile,也可以目录文件(包括内嵌的inode节点)如果有一个OSD,默认有192个PG。如果有两个OSD,默认有2*192=384个PGP
skdkjxy
·
2014-11-11 10:00
ceph存储
Linux写时拷贝技术(copy-on-write)
COW技术初窥: 在Linux程序中,fork()会产生一个和父进程完全相同的子进程,但子进程在此后多会exec系统调用,出于效率考虑,linux中引入了“写时复制“技术,也就是只有进程空间的各段的内容要发生变化时,才会将父进程的内容复制一份给子进程。 那么子进程的物理空间没有代码,怎么去取指令执行exec系统调用呢? 在fork之后exec之前两个进程用的是相同的物理空间
skdkjxy
·
2014-11-10 15:00
ceph存储
安装win7+CentOS7双系统的方法
希望初学者不要在这儿太浪费时间,这个教程简单又易懂,而且有效!!!如果看完教程有哪里不懂得可以交流。好了闲话不必多说,现在就开启我们的安装之旅吧:一. 首先用UltraISO把CentOS7镜像写入U盘。注意:在格式化U盘时要格成FAT32.二. 三. 然后把CentOS7镜像拷到U盘根目录。四. 现在该给Linux腾出一部分空闲分区了,因为Linux的文件系统和wi
skdkjxy
·
2014-11-10 15:00
ceph存储
ceph的CRUSH算法的源码分析
ceph的CRUSH算法的源码分析 1源文件分析分析的ceph版本是ceph-0.41。1.1rule与bucket的关系http://ceph.newdream.net/wiki/Custom_data_placement_with_CRUSH1.2crush目录下的文件builder.cbuilder.hcrush.ccrush.hCrushWrapper.ccCrushWrapper.hCr
skdkjxy
·
2014-11-06 10:00
ceph存储
ceph中的CRUSH数据分布算法介绍
CRUSH是ceph的一个模块,主要解决可控、可扩展、去中心化的数据副本分布问题。1摘要随着大规模分布式存储系统(PB级的数据和成百上千台存储设备)的出现。这些系统必须平衡的分布数据和负载(提高资源利用率),最大化系统的性能,并要处理系统的扩展和硬件失效。ceph设计了CRUSH(一个可扩展的伪随机数据分布算法),用在分布式对象存储系统上,可以有效映射数据对象到存储设备上(不需要中心设备)。因为大
skdkjxy
·
2014-11-06 10:00
解析
Ceph存储
引擎实现之一 filestore
Ceph作为一个高可用和强一致性的软件定义存储实现,去使用它非常重要的就是了解其内部的IO路径和存储实现。这篇文章主要介绍在IO路径中最底层的ObjectStore的实现之一FileStore。ObjectStoreObjectStore是CephOSD中最重要的概念之一,它封装了所有对底层存储的IO操作。从上图中可以看到所有IO请求在Clieng端发出,在Message层统一解析后会被OSD层分
Kernalzcy
·
2014-06-11 10:00
openstack
swift
ceph
openstack
解析
Ceph存储
引擎实现之一 filestore
Ceph作为一个高可用和强一致性的软件定义存储实现,去使用它非常重要的就是了解其内部的IO路径和存储实现。这篇文章主要介绍在IO路径中最底层的ObjectStore的实现之一FileStore。ObjectStoreObjectStore是CephOSD中最重要的概念之一,它封装了所有对底层存储的IO操作。从上图中可以看到所有IO请求在Clieng端发出,在Message层统一解析后会被OSD层分
Kernalzcy
·
2014-06-11 10:00
openstack
swift
ceph
ubuntu环境ceph配置入门(二)
在快速配置好
ceph存储
集群环境的基础上,可以做相关的对象操作:1.设置osdpoolmin_size首先通过rados命令查看pool如下:#radoslspoolsdatametadatarbd默认的
Yashin
·
2014-05-15 14:00
ubuntu
配置
ceph
ceph 架构
Ceph监控组件也可以被放置到一个集群,Ceph监控来监督Ceph的
Ceph存储
集群中的节点(监控集群,确保高可用性)。CEPH的
dapao123456789
·
2014-04-22 16:00
“CEPH浅析”系列之四——CEPH的结构
4.1 Ceph系统的层次结构
Ceph存储
系统的逻辑层次结构如下图所示[1]。
Yashin
·
2014-04-02 13:00
Ceph配置——6.心跳设置
当你执行一个命令,如cephhealth 或ceph-s , Ceph的监视器将报告
CEPH存储
集群的当前状态。
dapao123456789
·
2013-11-05 22:00
ceph配置——3.网络配置
简介建立一个高性能的
Ceph存储
集群网络配置是至关重要的。Ceph的存储集群不执行CEPH客户的路由请求或路由调度。相反,Ceph的Client直接提出请求CEPHOSD守护进程。
AK47Jack
·
2013-11-03 22:23
分布式文件系统Ceph
ceph配置——3.网络配置
简介建立一个高性能的
Ceph存储
集群网络配置是至关重要的。Ceph的存储集群不执行CEPH客户的路由请求或路由调度。相反,Ceph的Client直接提出请求CEPHOSD守护进程。
dapao123456789
·
2013-11-03 22:00
Ceph安装(快速安装)---0.60版---第一步
我们建议设立一个ceph部署管理节点和一个3节点
Ceph存储
集群探讨基本的Ceph。这将帮助你准备一份吗ceph部署管理节点和三个Ceph节点(或虚拟机),将主机你
Ceph存储
集群。
dapao123456789
·
2013-10-21 21:00
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他