Kubernetes+Ceph时cephfs和ceph-rbd的PV管理文章目录Kubernetes+Ceph时cephfs和ceph-rbd的PV管理1.目的2.相关原理2.1PV的状态切换与PVC的关系

2019独角兽企业重金招聘Python工程师标准>>>1.列出池下面的镜像#rbdls[-l]-l参数类似ls-l一样，列出更详细的信息，包括镜像的大小，快照等2.建立一个镜像#rbdcreate–image-format2-s#镜像大小的单位是MB,–image-format一般用2，否则这个镜像不能克隆3.删除一个镜像#rbdrm如果一个镜像有快照，删除时会出错，需要先删除快照4.修改镜像大小

本文总结基于ceph存储后端的iSCSItarget实现，针对几种可能的实现思路进行分析，并输出本文档，本文内容组织结构如下：描述本文的目的及内容；iSCSI使用ceph作为存储后端的基本实现思路；分别阐述几种可能的实现方式，分析其各自的特点和可能存在的一些技术障碍；最后简单总结全文。问题提出ceph作为一个真正意义上的统一存储系统，有着很好的应用前景，但到目前为止有多种原因限制了其在传统存储应用

1.前提条件1.1有了一个可用的ceph集群其中mon1节点的IP10.20.4.11.2有2台虚拟机可以用于验证测试，虚拟机能上网,DNS设置正常。关于如何创建ceph集群，请参考文章:https://blog.csdn.net/happyfreeangel/article/details/85171736测试虚拟机:IP10.20.4.21110.20.4.212内核版本:4.14.89cen

k8s集群每一台上面都要安装客户端：ceph-deployinstallk8s的ip地址创建一个k8s操作用户：cephauthaddclient.k8smon'allowrwx'osd'allowrwx'cephauthgetclient.k8s-o/etc/ceph/ceph.client.k8s.keyring#导出新建用户的钥匙将导出的钥匙放在k8s每台的/etc/ceph/下面cepha

1问题提出现在要求把机房的设备存储都利用起来，建立一个存储池，能满足用多少创建多少而且能够跨平台挂载创建的硬盘。目前，验室的机房目前已经建立起来了CEPH的集群，存储池达到了257TB，于是设想创建一个RBD（RADOSblockdevice）,然后通过ISCSI-target把创建的RBD导出来用于客户端的挂载。2可行性分析上述的问题的实现主要是两部分，一部分是创建RBD，另一部分是通过安装IS

RBD挂载环境配置系统：centos7内核：3.10.0-1062.4.3.e17.x86_64ceph版本：cephversion12.2.12(1436006594665279fe734b4c15d7e08c13ebd777)luminous(stable)centos-yumvim/etc/yum.repos.d/ceph-clinet.repo[ceph-noarch]name=Cephn

一-创建ceph-secret.yml文件RBD的KEY查看cephauthlist复制client.admin的key并使用base64加密创建ceph-secret.ymlkubectlapply-fceph-secret.yml查看kubectlgetsecretStarageClass创建monitors地址查看ceph-sadminSecretName:查看kubectlgetsecre

定位容器所使用的cephrbd卷名称访问kubernetesdashboard，进入“持久化存储卷索取”菜单，根据命名规则“volumeClaimTemplatesname-containername"搜索，如ceph-rbd

概要演示环境说明整个测试环境由以下2台本地虚拟机组成，相关信息说明如下：引言Librbd（RBD）是Ceph提供的块存储库，其利用Rados提供的API实现对卷的管理和操作。就目前而言，在Ceph支持的三种接口Posix(CephFS)、块存储(Librbd)和对象存储(RadosGW)接口中，块存储是目前最稳定且达到生产环境要求的接口。Ceph块设备是精简配置的、大小可调且将数据条带化存储到集群

Kubernetes+Ceph时cephfs和ceph-rbd的PV管理[TOC]1.目的环境：Kubernetes:v1.13.4Ceph:12.2.10luminous(stable)externalstorageprovisioner

openstack调用ceph-rbd块存储环境描述openstack版本QUEENSceph版本Luminous12.2.5openstack和ceph集群安装部署步骤，后续文章介绍；此环境建立在已有一套

cephOSDscephMonitorcephMDSceph基础命令整理ceph集群构建准备工作部署添加删除OSD节点删除osd节点的node4替换一个失效的磁盘驱动使用storageclass自动获取存储空间启动ceph-device启动ceph-rbd

环境描述ceph版本：luminous12.2.5OSD三节点，monitor三节点，同时运行在三台物理服务器；KVM宿主机运行多台虚拟机，其中一台挂载ceph-rbd块存储；KVM调用ceph-rbd1

Luminous12.2.5版本;执行操作1.划分存储池cloud，指定存储池rbd模式，创建映像bak-image;2.KVM宿主机，创建虚拟机centos7，修改配置文件通过ceph官网文档介绍libvirt访问ceph-RBD

1.KubernetesStorageClass介绍Kubernetes集群存储PV支持Static静态配置以及Dynamic动态配置，动态卷配置(Dynamicprovisioning)可以根据需要动态的创建存储卷。静态配置方式，集群管理员必须手动调用云/存储服务提供商的接口来配置新的固定大小的Image存储卷，然后创建PV对象以在Kubernetes中请求分配使用它们。通过动态卷配置，能自动化

概要演示环境说明整个测试环境由以下2台本地虚拟机组成，相关信息说明如下：引言Librbd（RBD）是Ceph提供的块存储库，其利用Rados提供的API实现对卷的管理和操作。就目前而言，在Ceph支持的三种接口Posix(CephFS)、块存储(Librbd)和对象存储(RadosGW)接口中，块存储是目前最稳定且达到生产环境要求的接口。Ceph块设备是精简配置的、大小可调且将数据条带化存储到集群

概要演示环境说明整个测试环境由以下2台本地虚拟机组成，相关信息说明如下：引言Librbd（RBD）是Ceph提供的块存储库，其利用Rados提供的API实现对卷的管理和操作。就目前而言，在Ceph支持的三种接口Posix(CephFS)、块存储(Librbd)和对象存储(RadosGW)接口中，块存储是目前最稳定且达到生产环境要求的接口。Ceph块设备是精简配置的、大小可调且将数据条带化存储到集群

1问题提出  现在要求把机房的设备存储都利用起来，建立一个存储池，能满足用多少创建多少而且能够跨平台挂载创建的硬盘。目前，验室的机房目前已经建立起来了CEPH的集群，存储池达到了257TB，于是设想创建一个RBD（RADOSblockdevice）,然后通过ISCSI-target把创建的RBD导出来用于客户端的挂载。2可行性分析  上述的问题的实现主要是两部分，一部分是创建RBD，另一部分是通过