思路及实现:

         1.承接前两篇文章,镜像服务的存储 池为p_w_picpaths,云盘的存储池为volumes,目前要完成openstack新建云主机磁盘镜像文件直接存放到ceph中去(在ceph中新建存储池vms)。

            云主机在启动时需要有能访问镜像存储池p_w_picpaths和云盘存储池volumes的能力,所以你需要在ceph集群的monitor节点新建存储池vms,同时新建账号,该账号具有对vms,p_w_picpaths,

            以及volumes三个存储池的rwx权限

          2.这里请务必注意一个细节:回忆第一篇ceph与openstack整合仅作为云盘挂载,我们新建了一个账号client.cinder,该账号对volumes池有rwx权限,然后我们分发配置文件和client.cinder账号的秘钥文件给cinder-volume节点,分发client.cinder的秘钥文件给计算节点,同时利用该秘钥文件制作了uuid,然后将该uuid写入到了compute节点的配置文件中,二此uuid唯一(这也就意味着:计算节点秘钥uuid----->client.cinder用户------>(rwx)ceph的volumes池),所以我们必须在ceph集群原有账号client.cinder的基础上新增对vms,p_w_picpaths的rwx权限,然后cinder和compute节点公用client.cinder账号)

                ceph auth caps client.cinder mon 'allow r' osd 'allow class-read object_prefix rbd_children, allow rwx pool=libvirt-pool' -o /etc/ceph/ceph.client.cinder.keyring

                scp /etc/ceph/ceph.client.cinder.keyring 所有计算节点:/etc/ceph

                scp /etc/ceph/ceph.client.cinder.keyring 所有计算节点:/etc/ceph

          3.导出账号的秘钥文件分发给所有计算节点(如果已经做过ceph与openstack整合仅提供云盘功能,这一步可以跳过

                在所有计算节点执行下列操作:

                    cat > secret.xml <

                      

                     

                     client.cinder secret 

                      

                    

                      EOF 

  • virsh secret-define --file secret.xml

  • 找到刚刚定义的client.cinder用户的uuid

  1. virsh secret-list

 找到ceph提供的秘钥文件的秘钥
  1. cat /etc/ceph/ceph.client.cinder.keyring

 virsh secret-set-value $(virsh secret-list |grep client.cinder |awk '{print $1}') --base64  $(cat /etc/ceph/ceph.client.cinder.keyring |awk 'NR==2{print $3}') 

          

          4.修改配置文件

               vim /etc/nova/nova.conf  

                rbd_user=cinder

               rbd_secret_uuid=dda10a4e-c03c-b029-ef07-ce86e7a07bdd        ------------------>值为:virsh secret-list |grep client.cinder |awk '{print $1}

               p_w_picpaths_type = rbd #只有在 boot disk 放在 ceph 中才需要配置这个,否则,设置为 qcow2
               p_w_picpaths_rbd_pool = vms
               p_w_picpaths_rbd_ceph_conf = /etc/ceph/ceph.conf

               disk_cachemodes="network=writeback"
               inject_password = false
               inject_key = false
               inject_partition = -2
               live_migration_flag="VIR_MIGRATE_UNDEFINE_SOURCE,VIR_MIGRATE_PEER2PEER,VIR_MIGRATE_LIVE,VIR_MIGRATE_PERSIST_DEST,VIR_MIGRATE_TUNNELLED"

  •  /etc/init.d/openstack-nova-compute restart