Ceph 第30页

ImportError: No module named pkg_resources 解决办法

在执行ceph-deploy出现如下的错误：#ceph-deploynewTraceback(mostrecentcalllast):File"/usr/bin/ceph-deploy",line18,

wx_doitroot·2022-11-21 21:58

K8s & K3s 集群中构建云原生存储系统( rook + ceph )

前景提要容器的持久化存储是保存容器存储状态的重要手段，存储插件会在容器里挂载一个基于网络或者其他机制的远程数据卷，使得在容器里创建的文件，实际上是保存在远程存储服务器上，或者以分布式的方式保存在多个节点上，而与当前宿主机没有任何绑定关系。这样，无论你在其他哪个宿主机上启动新的容器，都可以请求挂载指定的持久化存储卷，从而访问到数据卷里保存的内容。由于Kubernetes本身的松耦合设计，绝大多数存储

流雨声·2022-11-21 16:52

ceph（二）

基础知识注意事项在Ceph系统的搭建过程中,会出现各种意想不到或者预想到问题，就算整个过程中每一步都没问题，还是会出现各种问题，这些问题不仅仅在网上找不到，甚至在官网中找不到，甚至玩ceph数年的人都解决不了

风清一片·2022-11-20 18:20

Ceph 使用

河码匠·2022-11-20 11:43

pvs Error reading device /dev/xxx at 0 length 512.

背景：cephosd服务器磁盘坏掉，将坏掉的osd从集群中踢出后，pvs报错.系统centos7，cephluminous1、查看错误信息[root@cmp15~]#pvsErrorreadingdevice

Man_In_The_Night·2022-11-20 03:27

Cep PG 和 OSD 状态分析

前言作为一个成熟、可靠的分布式存储框架，Ceph集群中的各个组件都具备很强的自运维能力，这样的能力都是依托于Ceph优秀的故障检测机制。这篇文章主要分析一下集群状态的变迁。

·2022-11-16 23:45

CephFS 如何恢复损毁的Metadata Pool

1)模拟数据损毁#删除所有metadata中的数据$foriin`rados-pcephfs.a.metals`;rados-pcephfs.a.metarm$i;done#查看集群状态$ceph-scluster

·2022-11-16 23:27

ceph翻译 Ceph: A Scalable, High-Performance Distributed File System

Ceph:AScalable,High-PerformanceDistributedFileSystemCeph：一个可扩展，高性能分布式文件系统SageA.WeilScottA.BrandtEthanL.MillerDarrellD.E.LongCarlosMaltzahn

Jason__Zhou·2022-11-10 10:51

K8s不同node如何共享存储&&nfs 搭建(markdown版本)

nfs是一种成熟的共享存储方案.例如我们生产环境中的nas.ceph是一种(分布式共享存储)什么是分布式共享存储呢？

MyySophia·2022-11-10 10:20

对象存储minio、OSS、S3、ceph等迁移方案--rclone

概述MinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务，是一个非常轻量级的服务，非常适合于存储大容量非结构化的数据，例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等，而一个对象文件可以是任意大小，从几kb到最大5T不等。运行在线上的minio由于业务需求的变更，可能面临迁移的问题：线上minio如何迁移至线下的minio或线下的minio如何迁移至线上minio？m

weixin_42073629·2022-11-07 10:05

线上 K8s 集群性能评估、基础服务部署调优

例如，对于Ceph对象存储来说，每个LISTbucket请求都需要去多个磁盘中捞出这个bucket的全部数据；不仅自身很慢，还影响了同一时间段内的其他普通读写请求，因为IO是共享的，导致响应延迟上升乃至

Firstlucky77·2022-11-03 10:45

大数据常用开源框架

目录系统平台（Hadoop、CDH、HDP）监控管理（CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle）文件系统（HDFS、GPFS、Ceph、G

lucasmaluping·2022-11-02 13:10

Ceph集群CephFS文件存储核心概念及部署使用详解

目录1.CephFS文件存储核心概念1.1.CephFS文件存储简介1.2.CephFS文件存储架构1.3.CephFS文件系统的应用场景与特性2.在Ceph集群中部署MDS组件3.在Ceph集群中创建一个

·2022-10-19 16:22

国庆弯道超车正当时，推荐一个免费的刷题网站。。。Python小伙伴可以看过来了

python爬虫入门进阶❤️3.Ceph实战，从原理到实战应有尽有。Ceph实战❤️4.Java高并发编程入门，打卡学习Java高并发。Java高并发编程入门5

码农飞哥·2022-10-14 10:18

s3 java 断点续传_ceph储存的S3接口实现（支持断点续传）

/***Title:S3Manager*Description:Ceph储存的s3接口实现，参考文档：*https://docs.aws.amazon.com/zh_cn/AmazonS3/latest

契卡敲门送温暖四·2022-10-13 13:43

处理ceph osd incomplete

cephhealthdetail，可以看到如下pg处于incomplete状态:pg7.cisincomplete,acting[2,3](reducingpoolceph-kvm-poolmin_sizefrom2mayhelp

rongyongfeikai2·2022-10-12 19:40

Hans Berger脑电图之父的人生摘要

【转载】HansBerger（1873-1941）(上图)是德国精神病学家，精神生理学家，他对神经科学的贡献是发明了和命名了脑电图-Electroencephalography，EEG，

Fortunate.F·2022-10-12 10:38

组件

系统平台（Hadoop、CDH、HDP）监控管理（CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle）文件系统（HDFS、GPFS、Ceph、GlusterFS

·2022-10-09 19:08

自建Ceph存储与 AWS、阿里云、腾讯云的成本对比

本文单从存储成本角度对比了自建Ceph存储和业界公有云存储的硬件成本，不包括IDC带宽成本。统计Ceph集群的用到的主要设备为：OSD、MON、RGW服务器、TOR交换机、机架。

NicolasLearner·2022-10-08 09:04

分布式存储系统之Ceph集群存储池、PG 与 CRUSH

Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统前文我们了解了ceph集群状态获取常用命令以及通过cephdaemon、cephtell动态配置ceph组件、ceph.c

u012804784·2022-10-06 07:25

学一点Ceph知识：初识Ceph

Ceph是什么？Ceph是一个开源的分布式存储系统，可大规模扩展、高性能、无单点故障，在普通的服务器上可以支持到PB级容量，商用机器上支持的容量可以达到EB级别。

·2022-09-30 11:32

k8s学习笔记——redis集群安装+cephfs存储

//参考Kubernetes部署Redis主从服务(StatefulSet)_BigQ2020的技术博客_51CTO博客大体和参考链接内容相同，只是个别需要修改，我的docker镜像是用的ubuntushell执行用的是bash，相应参数有调整//launch.sh#!/bin/bashPASSWORD=$(cat/etc/redis-passwd/passwd)if[${HOSTNAME}="r

潮落拾贝·2022-09-29 18:58

Rancher 2.6 全新 Logging 快速入门（2）

对ceph、Openstack、Kubernetes、prometheus技术和其他云原生相关技术有较深入的研究。

RancherLabs·2022-09-28 21:47

ceph删除pool

cephosdpoolrmvmsvms--yes-i-really-really-mean-itErrorEPERM:WARNING:thiswill*PERMANENTLYDESTROY*alldatastoredinpoolvms.Ifyouare

时空无限·2022-09-23 15:38

ceph搭建及使用详解

第1章ceph介绍1.1Ceph的主要特点统一存储无任何单点故障数据多份冗余存储容量可扩展自动容错及故障自愈1.2Ceph三大角色组件及其作用在Ceph存储集群中，包含了三大角色组件，他们在Ceph存储集群中表现为

时空无限·2022-09-23 15:37

【云原生 | Kubernetes 系列】--Ceph认证和RBD

1.Ceph认证机制ceph使用cephx协议对客户端进行身份认证.cephx用于对ceph保存的数据进行认证访问和授权,用于对访问ceph的请求进行认证和授权检查,与mon通信的请求都要经过ceph认证通过

上海_运维_Q先生·2022-09-20 12:56

kubernetes/k8s CSI分析-容器存储接口分析

良凯尔·2022-09-13 07:44

聊一聊Kubernetes数据持久化管理

PV的全称是PersistentVolume（持久化卷），是对底层数据存储的抽象，PV由管理员创建、维护以及配置，它和底层的数据存储实现方法有关，比如Ceph，NFS，ClusterFS等，都是通

小二上酒8·2022-09-08 04:38

全能成熟稳定开源分布式存储Ceph破冰之旅-上

Ceph实现了分布式统一的存储，既支持对象存储、块设备存储还支持文件系统，不失为目前最成熟稳定的存储解决方案，本篇先了解传统存储问题和Ceph的优势，介绍总体架构和组成部分，说明官网文档部署和部署版本建议

itxiaoshen·2022-09-07 22:00

Ceph 4 slow ops, oldest one blocked for 638 sec, mon.cephnode01 has slow ops

第二天早上都能看到4slowops,oldestoneblockedfor638sec,mon.cephnode01hasslowops的报错。虽然不影响使用，但看着有点难受。

上海_运维_Q先生·2022-09-04 18:56

从用户到开发者是一种思维进化过程 | 访 StarRocks Committer 周威

周威，腾讯游戏高级工程师，对StarRocks、MySQL、Ceph、k8s等有比较深入的理解。他有着“技术匠人”典型的思维洞察力，认为技术开发就是把自己的想法翻译给计算机听。

·2022-09-01 19:59

镜像仓库 Harbor 对接 MinIO 对象存储

的部署可以使用NFS存储，虽然可以使用rsync+inotify做数据同步做解决单点问题，但是NFS效率/性能有限，没有对象存储那么强大，所以一般使用对象存储居多，这里选用MinIO对象存储软件，当然也可以使用Ceph

进击云原生·2022-09-01 10:57

ceph 010 clustermap ceph调优

clustermap[ceph:root@clienta/]#cephmondumpepoch4fsid2ae6d05a-229a-11ec-925e-52540000fa0clast_changed2021

supermao12·2022-08-21 10:00

ceph 009 管理定义crushmap 故障域

管理和自定义crushmap定义pg到osd的映射关系通过crush算法使三副本映射到理想的主机或者机架更改故障域提高可靠性pg到osd映射由crush实现下载时需要将对象从osd搜索到，组成文件，那么对象多了就会效率变低，那么从pg组里面搜索。提高效率对象放在pg要通过hash算法9

supermao12·2022-08-20 10:00

ceph 008 ceph多区域网关(ceph对象容灾) cephfs文件系统

他是需要秘钥与配置文件的但真正服务端只需要通过curl就好ceph多区域网关对象存储容灾解决方案zone与zone会做数据同步。

supermao12·2022-08-17 15:00

ceph 007 双向池同步 rgw对象网关配置 s3对象存储

一对一就算是池模式的双向同步，镜像也具有主备关系双向同步，池模式[root@clienta~]#cephosdpoolcreaterbdpool'rb

supermao12·2022-08-16 10:00

ceph 006 rbd高级特性 rbd快照镜像克隆 rbd缓存 rbd增量备份 rbd镜像单向同步

版本[root@clienta~]#ceph-vcephversion16.2.0-117.el8cp(0e34bb74700060ebfaa22d99b7d2cdc037b28a57)pacific(

supermao12·2022-08-14 16:00

k8s学习-DaemonSet（模板、创建、更新、回滚、删除等）

使用DaemonSet的场景运行集群存储的daemon，比如ceph或者glusterd节点的CNI网络插件：calico节点日志的收集：fluentd或者是filebeat节点

lady_killer9·2022-08-14 07:44

ceph 005 赋权补充 rbd块映射

我的ceph版本[root@serverc~]#ceph-vcephversion16.2.0-117.el8cp(0e34bb74700060ebfaa22d99b7d2cdc037b28a57)pacific

supermao12·2022-08-13 14:00

ceph 004 纠删码池修改参数 cephx认证

复习ceph003存储池为逻辑概念，存储池可以占用整个集群的所有空间[root@ceph01~]#cephosdpoolcreatepool1pool'pool1'created[root@ceph01

supermao12·2022-08-12 19:00

k8s中清除已安装的rook-ceph集群

/mysql.yamlkubectldelete-nrook-cephcephblockpoolreplicapoolkubectldeletestorageclassrook-ceph-blockkubectldelete-fcsi

zh_admini·2022-08-12 07:40

k8s——kubernetes使用rook部署ceph集群

kubernetes使用rook部署ceph集群一：环境准备1.安装时间服务器进行时间同步所有的kubernetes的集群节点[root@master~]#yum-yinstallntpdate[root

是维C呀·2022-08-12 07:39

K8S集群rook部署ceph集群

前言：之前自己用rook部署过几次ceph集群，每次部署或多或少都会遇到一些问题。有些网上还能找到解决方法，有的只能靠自己去解决，毕竟每个人部署遇到的问题不一定都相同。

西幻001·2022-08-12 07:39

k8s 集群部署rook-ceph存储系统及使用

一、Rook、ceph简介Ceph分布式存储系统Ceph是一种高度可扩展的分布式存储解决方案，提供对象、文件和块存储。

Cloud孙文波·2022-08-12 07:38

K8s上使用rook搭建Ceph集群

目录准备工作一、安装kubectl二：win10安装DockerDesktopforWindows（非必须）三、Harbor知识补充：1、Cephmgr和mon2：Ceph中的CephFS、RBD、RGW

victoruu·2022-08-12 07:07

K8S章节2 — k8s集群中通过rook方式部署ceph

1、k8s部署参考：kubernetes简介及单master集群搭建。部署完成后如下：hostnameIPADDRk8s-master192.168.1.11k8s-node01192.168.1.12k8s-node02192.168.1.13[root@k8s-master~]#kubectlgetnodesNAMESTATUSROLESAGEVERSIONk8s-masterReadymas

victoruu·2022-08-12 07:36

k8s集群中部署rook+ceph云原生存储

1.概念1.1.Ceph1.2.Rook1.3.架构2.部署rook+ceph2.1.准备事项2.1.1.建议配置2.1.2.本文环境2.1.3.注意事项2.1.4.克隆rook项目到本地2.1.5.同步镜像