CEPH分布式存储第16页

ceph rados对象存储索引残留问题排查与处理

问题现象对象存储存储桶无法删除，检查发现生命周期过期后存储桶中有文件残留，未完全删除，但实际访问文件时为404，通过s3cmd无法删除对象，且无报错。问题定位检查bucket当前状态，发现桶内有大量object残留：#radosgw-adminbucketstats--bucket=xxx{"bucket":"xxx","zonegroup":"97cde842-9840-46d2-98f5-2f

洒满阳光的午后·2023-11-13 14:08

ceph集群—部署（附错误点解析）

目录ceph配置步骤1.配置无密码连接2.创建ceph的源4.准备存储磁盘5.安装部署软件ceph-deploy6.部署ceph集群7.osd共享磁盘服务存储类型：DAS直连存储（satasas）NAS

吃饭就用盆·2023-11-13 13:06

离线安装ceph集群并制作本地ceph镜像仓库

需求：安装ceph-15.2.10集群操作系统：CentOS7.5ceph版本：ceph-15.2.10主机规划安装ceph集群节点主机规格节点inm247：CPU：24C，内存：256GB，硬盘：900GB

韩帅平·2023-11-13 13:36

【ceph】集群搭建（centos7-1908）

编号hostnameip对应下图节点ceph-1dev-ceph1192.168.199.175/24admin-nodeceph-2dev-ceph2192.168.199.164/24node1ceph

稔稔·2023-11-13 13:35

arm平台的ceph部署安装指导

arm平台的ceph部署安装指导1环境准备OS安装类型：CentOS-7.5-aarch64-1804。注：操作系统安装使用最小简化版安装(如上图)，其余步骤安装一般安装操作系统步骤即可。

我超有耐心的·2023-11-13 13:05

ceph安装部署

ceph集群创建：创建虚拟机器必须是单数例如：3，6，9等主机名对相应的/etc/hosts，ip地址，yum源可以上网查询修改所有主机的主机名，ssh免密连接，ntp时间同步，创建物理磁盘hostnamectlset-hostnameceph1reboot1

glnullops·2023-11-13 13:05

分布式存储Ceph部署

分布式存储Ceph1、Ceph简介Ceph使用C++语言开发，遵循LGPL协议开源。SageWeil(Ceph论文发表者)于2011年创立了以Inktank公司主导Ceph的开发和社区维护。

Ymaint·2023-11-13 13:35

centos 7.7单机安装ceph

服务器/虚拟机准备1.配置网络，保证机器可以使用公网网络源2.额外添加几个盘，作为数据盘，此处我加了/dev/vdb/dev/vdc两块10G的盘系统信息[root@localhostceph-cluster

jsd2honey·2023-11-13 13:04

centos7下ceph-jewel单节点部署

服务器/虚拟机准备1.配置dns，保证机器可以使用公网网络源2.额外添加几个盘，作为数据盘，此处我加了/dev/vdb/dev/vdc/dev/vdd三块100G的盘准备源添加centos源和epel源，本文全部使用阿里云的源[root@dev179~]rm/etc/yum.repos.d/*-rf[root@dev179~]curlhttp://mirrors.aliyun.com/repo/C

chuotudi5686·2023-11-13 13:33

ceph-deploy bclinux aarch64 ceph 14.2.10

ssh-copy-id，部署机免密登录其他三台主机所有机器硬盘配置参考如下，计划采用vdb作为ceph数据盘下载ceph-deploypipinstallceph-deploy免密登录+设置主机名hostnamectl

hkNaruto·2023-11-13 13:02

常用网址备份

ceph相关网址DeployingCe

柠檬ooo·2023-11-13 10:16

Ceph 块设备

无处不在的块设备接口使虚拟块设备成为与Ceph这样的海量存储系统交互的理想之选。Ceph块设备是精简配置的、大小可调且将数据条带化存储到集群内的多个OSD。

weixin_30466421·2023-11-13 00:51

CEPH简介

CEPH简介无论您是要向CloudPlatform提供Ceph对象存储和/或Ceph块设备服务，部署Ceph文件系统还是将Ceph用于其他目的，所有CephStorageCluster部署都首先要设置每个

allway2·2023-11-13 00:20

Ceph 笔记， ssh写入缓存

硬件建议—Ceph文档写入缓存企业级SSD和HDD通常包括断电保护功能，包括在运行时断电时确保数据耐久性，以及使用多级缓存来加快直接或同步写入速度。

hkNaruto·2023-11-13 00:19

云数据库MongoDB监控指标解读与关注

演讲嘉宾简介：陈柯任（花名：莫归），阿里巴巴高级开发工程师，曾在大众点评从事MongoDB与MySQL相关运维和自动化研发，现主要致力于分布式存储和NoSQL数据库相关领域以下内容根据演讲嘉宾视频分享以及

Winsdons·2023-11-12 13:44

CentOS7下搭建Ceph分布式存储架构

(1).Ceph概述Ceph是为了优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统，并且还是一个开源的分布式文件系统。

假面生·2023-11-12 12:52

谈谈桌面虚拟化

“一项好的技术不会消亡，它只是会不断的以新的形式重新出现”--我自己现如今流行的各种热门技术--云计算，大数据，深度学习，分布式存储，等等等等，其实都不是某一年突然从石头里面蹦出来的。

weixin_34200628·2023-11-12 11:26

Seafile学习（八） Ceph深入理解

首先明确Ceph的客户端和服务器端在哪部分，客户端可以对接Ceph封装的那三种接口，也可以直接访问rados层。服务器端就是rados层。

望隐少年·2023-11-12 05:44

块存储、文件存储、对象存储的区别

参考文章链接：一篇文章让你理解Ceph的三种存储接口(块设备、文件系统、对象存储)：https://blog.csdn.net/wangmingshuaiguo/article/details/92628036Ceph

weixin_30682415·2023-11-12 05:44

深入理解 ceph mgr

背景监控是管理的第一步，所以ceph-mgr目前的主要功能是把集群的一些指标暴露给外界使用。监控是什么东西呢？

「已注销」·2023-11-12 05:13

Red Hat Ceph存储—《深入理解Ceph架构》

2.5.1副本I/O2.5.2纠删码I/O2.6自管理的内部操作2.6.1心跳2.6.2同步2.6.3数据再平衡与恢复2.6.4校验(或擦除)2.7高可用2.7.1数据副本2.7.2Mon集群2.7.3CephX

老马农·2023-11-12 05:13

Redhat Ceph存储之“深入理解Ceph架构”

本文由Ceph中国社区穆艳学翻译、耿航校稿，英文原文出处:Red_Hat_Ceph_Storage-2-Architecture_Guide(扫文尾二维码读原文)目录第1章概览第2章存储集群架构2.1存储池

架构师技术联盟·2023-11-12 05:13

深入浅出分布式存储的设计与优化之道

随着信息化程度的不断提高，全球数据日益膨胀。面对当前PB级的海量数据存储需求，传统的存储系统在容量和性能的扩展上存在瓶颈。云存储以其扩展性强、性价比高、容错性好等优势得到了业界的广泛认同。由于其前瞻性，众多企业都将其作为进军云计算的第一步。分布式文件系统和分布式块存储作为云存储中重要的技术，成为奠定云存储发展的重要基石。对于大多数专注于云计算本身的IT技术人员来说，对分布式文件系统和分布式块存储未

UCloud_TShare·2023-11-12 05:43

一致性算法介绍（二）

1.4.NWRN：在分布式存储系统中，有多少份备份数据W：代表一次成功的更新操作要求至少有w份数据写入成功R：代表一次成功的读数据操作要求至少有R份数据成功读取NWR值的不同组合会产生不同的一致性效果，

狠情·2023-11-11 08:26

云架构师学习------云存储白皮书深入理解

云存储白皮书深入理解行业描述数字经济时代的到来1、基础设施的云化2、核心技术互联网化3、应用数据化和智能化存储行业的变革1、存储服务网络的巨变2、云原生对云存储的新要求3、智能与存储的交相辉映技术产品（阿里云为例）自研分布式存储技术

Avery123123·2023-11-11 03:32

一站式构建cloud平台工具

https://cloud-atlas.readthedocs.io/zh_CN/latest/ceph/index.html

Locutus·2023-11-10 22:30

智能物联网时代里信息存储、处理和传输方式的变化浅谈

因此，分布式存储技术将得到更广泛的应用，如区块链技术、云存储技术等。这些技术将使数据存储更加安全、可靠和高效。2、处理方式的变化：物联网设备数量

成都亿佰特电子科技有限公司·2023-11-10 19:08

和数链“分布式存储”技术结合隐私计算让数据更安全

存储是IT业的核心技术，全球存储行业历经半个世纪的洗礼，在技术和需求相互促进的演变下沧桑变幻，经历桌面级存储、企业级存储、云存储多次迭代变迁。目前的存储方式主要是“大数据中心”等集中式存储，随着数据规模和复杂度的迅速增加，数据存储服务日益成为互联网发展的瓶颈，数据存储的安全性受到了极大的挑战。隐私泄露、数据丢失、黑客攻击、传输效率低、存储成本增加等因素，阻碍互联网的进一步发展。随着大数据时代和云计

华南首席酱油官·2023-11-10 17:45

分布式存储-Minio环境搭建

目录简介基于docker环境的minio单机部署docker环境搭建minio环境搭建基于java的文件上传和下载文件上传问题java连接服务端的用户名、密码和端口问题不能连接上Minio服务上传文件权限简介官网：https://docs.min.io/MinIO是一个基于ApacheLicenseV2.0开源协议的轻量级的对象存储服务。适合存储大容量非结构化的数据，如图片、视频、日志文件、备份数

Ning静致远·2023-11-10 09:52

假装得大佬·2023-11-10 06:05

Mac 通过docker安装MinIO

也就是分布式存储。关于MinIO1、MinIO是什么？官方解释：MinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务。

灬囖·2023-11-10 04:54

11-Docker-Redis集群部署

00-前言在工作环境中，我们常常被要求配置多种集群，Redis集群是最常见的入门需要掌握的集群配置方法，在之前的学习中，我们学习掌握了分布式存储的算法，本质上集群的部署就是通过分布式存储算法将数据分发部署好的不同的容器

西瓜太郎呀！·2023-11-10 01:02

10-Docker-分布式存储算法

01-哈希取余算法分区哈希取余分区（HashModulusPartitioning）是一种在分布式计算和数据存储中常用的分区策略，其目的是将数据或计算任务分配到多个节点或服务器上，以实现负载均衡和提高性能。这种分区策略的核心思想是使用哈希函数来将数据或任务的标识（通常是键或标签）映射到一个固定范围的分区中，然后使用取余运算来确定应该分配给哪个分区。使用Python进行哈希取余算法运行代码及结果如下

西瓜太郎呀！·2023-11-10 01:32

k8s安装rook-ceph1.8

集群各节点主机内核版本不低于4.17Kubernetes集群有至少3个工作节点(master和worker)，且每个工作节点都有一块初系统盘以外的未格式化的裸盘（工作节点是虚拟机时，未格式化的裸盘可以是虚拟磁盘），用于创建3个CephOSD

大虾别跑·2023-11-09 16:21

k8s集成ceph

有两个参考参见1：内容全参见2：rbd，比较详细ceph的配置在ceph集群中执行如下命令：[root@node1~]#ceph-scluster:id:365b02aa-db0c-11ec-b243-

月夜楓·2023-11-09 16:20

基于机器学习的脑电病理学诊断

机器学习(Machinelearning,ML)方法有可能实现临床脑电(Electroencephalography,EEG)分析的自动化。

思影科技·2023-11-09 14:36

Ceph入门到精通-网络调优netstat -s

netstat-s统计结果每个指标含义及值是否正常Tcp:66115434activeconnectionopenings92137410passiveconnectionopenings13925035failedconnectionattempts28188907connectionresetsreceived29397connectionsestablished85972524908segm

瓦哥架构实战·2023-11-09 12:31

Haddop,HDFS和MapDeduce简单理论

HadoopHadoop1Hadoop2HDFS3.MapDeduceHadoop1Hadoop开源的分布式存储+分布式计算平台核心组件：HDFS：分布式文件系统，存储海量数据。

杰KaMi·2023-11-07 06:25

云原生-Ubuntu20.04安装KubeSphere虚拟化（KSV）

存储部分通过K8s的CSI机制，既能对接青云的企业级分布式存储，如QingStorNeonS

平塘码道·2023-11-07 02:44

centor7快速（ceph-deploy）搭建ceph

目标如图(其实我是参照英文文档，同时由于国情的原因加入一些小伎俩，以及自己踩过的坑与大家一起分享)搭建环境：vmwareworkstationpro15所用系统：centor7ceph-deploy－－

逸云。·2023-11-06 21:12

ceph-deploy部署ceph集群，安装Web-UI

使用ceph-deploy快速安装ceph1.把ceph仓库添加到ceph-deploy管理节点新增/etc/yum.repos.d/ceph.repo（管理节点上）.

Bamshk·2023-11-06 21:39

Ceph-deploy安装

ceph安装文档1、安装ntp我们建议在所有Ceph节点上安装NTP服务（特别是CephMonitor节点），以免因时钟漂移导致故障，详情见时钟。

此处一淌水·2023-11-06 21:39

Ceph源代码主要目录和文件介绍

Ceph14.2.22源代码：https://download.ceph.com/tarballs/ceph-14.2.22根目录【admin】：管理工具，用于架设文档服务器等【cmake】：Ceph对

gengduc·2023-11-06 21:05

ceph-deploy在线安装ceph(Ubuntu18)

文章目录准备安装出错重来方法安装ceph-deploy配置各节点的静态IP和hosts安装chrony和openssh-server(所有节点)创建有sudo权限的用户(所有节点)免密登陆配置关闭防火墙安装

零起跑线·2023-11-06 21:04

Ceph-deploy跳过gpg-key验证（离线环境安装Ceph）

问题CentOS-7.6.1810离线环境搭建Ceph环境时出现gpg-key安装源公钥检查错误。原因是执行ceph-deployinstall命令的服务器无法访问互联网。

高达可以过山车不行·2023-11-06 21:31

Ceph IO流程及数据分布

CephIO流程及数据分布1.1正常IO流程图步骤：client创建clusterhandler。client读取配置文件。client连接上monitor，获取集群map信息。

gengduc·2023-11-06 21:59

014 Ceph管理和自定义CRUSHMAP

一、概念1.1Ceph集群写操作流程client首先访问cephmonitor获取clustermap的一个副本，知晓集群的状态和配置数据被转化为一个或多个对象，每个对象都具有对象名称和存储池名称以PG

weixin_30949361·2023-11-06 19:39

CEPH自定义crushmap

CEPH自定义crushmap实现储存隔离文章目录CEPH自定义crushmap实现储存隔离一、更新规则1、获取规则信息2、更改规则以及规则说明二、rbdpool之间的数据迁移Kubernetesceph-csi

思考人生的莱纳·2023-11-06 19:39

ceph学习（2）——crush map 故障域划分

crushmap是ceph集群最重要的组成部分之一，crush算法实现了ceph集群的去中心化，这也是它实现分布式的关键，简单来说，crush算法决定了客户端的数据写到哪，从哪读取客户需要的数据。

jiangxi_·2023-11-06 19:38

ceph-crush map区分ssd和hdd资源池

环境3块SSD6块HDD#ceph-scluster:id:b4c125fd-60ab-41ce-b51c-88833089a3adhealth:HEALTH_OKservices:mon:3daemons

kjma·2023-11-06 19:08

推荐频道

CEPH分布式存储