ceontos 7.3 部署 ceph12.1.1
ceontos 7.3 部署 ceph12.1.1
#http://docs.ceph.com/docs/master/start/quick-ceph-deploy/#create-a-cluster
参考官方手册即可。
碰到几个问题和一些优化的地方，记录如下：
1、yum 源。 海外源特别慢，故使用163 yum。
[ceph]
name=ceph
baseurl=http://mirrors.163.com/ceph/rpm-luminous/el7/x86_64/
gpgcheck=0
[ceph-noarch]
name=cephnoarch
baseurl=http://mirrors.163.com/ceph/rpm-luminous/el7/noarch/
gpgcheck=0
2、新增了 mgr 节点。新特性介绍：
http://blog.csdn.net/xiaqunfeng123/article/details/73850342
3、ceph存储引擎默认使用bluestore。 故osd节点只能使用裸设备部署。 由于之前均是使用挂载点的目录进行的osd部署，此次部署的时候，使用目录和分好区的盘符来创建osd，最后发现始终单个osd 就提供10G空间，ceph-deploy 也没有任何报错。 需要重点关注。
4、手动安装ceph软件：
yum -y install ceph ceph-release ceph-common ceph-radosgw ceph-fuse
由于使用ceph-deploy install 不能正常安装。我们机器使用的是http代理。 故只能手动处理。
5、
报错处理：
#############################################
[ceph@cephnode0 cluster]$ ceph -w
2017-03-24 18:58:29.832395 7fb5d6222700 -1 auth: unable to find a keyring on /etc/ceph/ceph.client.admin.keyring,/etc/ceph/ceph.keyring,/etc/ceph/keyring,/etc/ceph/keyring.bin: (2) No such file or directory
2017-03-24 18:58:29.832414 7fb5d6222700 -1 monclient(hunting): ERROR: missing keyring, cannot use cephx for authentication
2017-03-24 18:58:29.832417 7fb5d6222700 0 librados: client.admin initialization error (2) No such file or directory
Error connecting to cluster: ObjectNotFound
[ceph@cephnode0 cluster]$
权限问题，修改为sudo chmod 755 /etc/ceph/ceph.client.admin.keyring
安装不过去的时候：
yum -y install epel-release
# ** ERROR: osd init failed: (36) File name too long
修改？/etc/ceph/ceph.conf文件，在文件中添加如下配置
osd max object name len = 256
osd max object namespace len = 64
#安装ceph时出错[ceph_deploy][ERROR ] RuntimeError: NoSectionError: No section: 'ceph'，是为什么呢
yum remove ceph-release 先执行这个，把这个东西卸了，应该是这个的版本不兼容 亲测有效
################3
clock skew detected on mon.cephnode3
在admin结点上，修改ceph.conf，添加：
mon_clock_drift_allowed = 5
mon_clock_drift_warn_backoff = 30
ceph-deploy --overwrite-conf admin ceph1 ceph2 ceph3
重启monitor
systemctl restart [email protected]
osd进程过多，需要修改ceph用户的最大文件打开数：
/etc/security/limits.d/20-nproc.conf