CEPH分布式存储第6页

Mantle: A Programmable Metadata Load Balancer for the Ceph File System——论文泛读

SC2015Paper元数据论文阅读汇总问题优化Ceph的元数据局部性和负载平衡。

妙BOOK言·2024-01-15 17:03

ubuntu20.04 ceph文件系统搭建

各个节点环境准备时间同步apt-getinstallntp-yntpdatentp2.aliyun.comcp/usr/share/zoneinfo/Asia/Shanghai/etc/localtime更新ceph

爱吃土豆的猫ttt·2024-01-15 13:53

ceph搭建ubuntu20.04案例

三台机器准备工作安装依赖sudoapt-getinstallopenssh-serversudoaptinstallvimaptinstallnet-tools设置root密码##设置root密码所有操作在root下进行sudopasswdrootsupasswdrootvim/etc/ssh/sshd_configPermitRootLoginyes设置为yessudosystemctlrest

白日梦@·2024-01-15 13:23

Ubuntu20.04部署ceph16(pacific)集群 - 傻瓜式教程

Ubuntu20.04部署ceph16pacific1环境介绍与配置1.1ceph介绍1.2环境介绍1.3基础环境准备1.3.1关闭selinux、防火墙1.3.2设置主机名，每台设置1.3.3设置网卡对应网卡

KKCai_·2024-01-15 13:52

ceph集群扩容

1.确定要扩容的节点2.集群创建前检查检查IP，且ping一下集群中的其他节点clusternetworkIP，看是否能ping通pingmon修改主机的/etc/hosts文件,并添加所有节点信息检查防火墙是否关闭firewall-cmd--statecat/etc/selinux/configsestatus-v查看集群内各主机时间是否一致,ntp(chronyd):datesystemctl

大大金·2024-01-15 01:44

Ceph入门到精通-通过 CloudBerry Explorer 管理对象bucket

简介CloudBerryExplorer是一款可用于管理对象存储（CloudObjectStorage，COS）的客户端工具。通过CloudBerryExplorer可实现将COS挂载在Windows等操作系统上，方便用户访问、移动和管理COS文件。支持系统支持Windows、macOS系统。下载地址前往CloudBerry官方下载。安装和配置注意以下配置步骤以CloudBerryExplorer

瓦哥架构实战·2024-01-14 08:07

【个人记录】Ceph删除存储池

删除volunes池：cephosdpooldelete--yes-i-really-really-mean-itvolumesvolumes提示：ErrorEBUSY:pool'volumes'hastierscache

三千院喵·2024-01-14 08:30

【个人记录】Ceph删除OSD

目标在ceph集群中踢出osd1操作下线OSD1cephosdout1移除集群cephosdcrushremoveosd.1删除节点数据cephauthdelosd.1cephosdrm1查看是否生效cephosdtree

三千院喵·2024-01-14 08:30

【个人记录】ceph修改osd池副本数

执行ceph-s时提示：health:HEALTH_WARN3pool(s)havenoreplicasconfigured显示有3个池没有配置副本。

三千院喵·2024-01-14 08:26

最全对象存储（云盘）挂载本地主机或服务器

1.对象存储介绍1.1分类分布式存储的应用场景相对于其存储接口，现在流行分为三种:块存储:这种接口通常以QEMUDriver或者KernelModule的方式存在，这种接口需要实现Linux的BlockDevice

tuoluzhe8521·2024-01-14 05:32

OKEx徐坤：Filecoin的机遇与风险

近期IPFS/Filecoin成为行业的热点，我也受邀在Odaily星球日报举办的「星际崛起——IPFS技术与分布式存储生态云峰会」进行了主题分享，内容涵盖了去中心化存储市场趋势、IPFS/Filecoin

徐坤Alysa·2024-01-14 04:49

【ceph】在虚拟环境中需要给osd所在的虚拟盘扩容操作

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph

向往风的男子·2024-01-13 13:22

【ceph】如何将osd的内容挂载出来---ceph-objectstore-tool 实现

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph

向往风的男子·2024-01-13 13:18

11张手绘图：搞定分布式系统容错架构

到底啥是分布式存储？那啥又是分布式存储系统呢？天哪！某台机器宕机了咋办？Master节点如何感知到数据副本消失？如何复制副本保持足够副本数量删除多余副本又该怎么做呢？

石杉的架构笔记·2024-01-13 10:32

区块链是如何存数据的？

我们都知道，区块链技术是一种去中心化的分布式存储方式，那么区块链如何存储和记录数据呢？————————个人技术公众号：解决方案工程师欢迎同领域的朋友关注、相互交流。

公众号：链上物联网·2024-01-13 07:58

C++——STL标准模板库——容器详解——list

list是一种分布式存储的线性表，每个节点分为数据域和指针域，其中指针域中包含一个指向前驱节点的指针和一个指向后续节点的指针，基本模型如下：（二）特性1、双向链表：每个元素都有一个前驱和一个后继，这种结构允许在链表的任何位置实现快速的插入和删除而不影响其他元素

诗酒伴年华·2024-01-13 05:23

K8s 存储卷配置

docker存储容器删除，数据也删除，针对需要应用持久化的数据就要配置存储，常见就是基于存储到节点上（而节点存储可以是NFS、ceph、iscsi等等）K8s的Pod存储由于Pod是基于容器的集合，基于

Y。S。H。·2024-01-13 00:01

k8s数据持久化（存储卷）

存储卷的类型有很多，我们常用到一般有四种：**emptyDir，hostPath，NFS以及云存储（ceph,glasterfs…）**等。

givenchy_yzl·2024-01-13 00:56

AdaM: An Adaptive Fine-Grained Scheme for Distributed Metadata Management——泛读论文

zFS[16]，CalvinFS[21]，DROP[24]，AngleCut[8]静态子树划分：HDFS[6],NFS[14],PVFS2[25],CXFS[10]andCoda[17]动态子树划分：Ceph

妙BOOK言·2024-01-12 21:41

基于鲲鹏云服务迁移技术和实践（鲲鹏生态）

鲲鹏计算产业生态产业链芯片能力积累到芯片技术创新芯片架构创新华为云鲲鹏云服务典型应用场景：大数据：分布式存储：把一个文件分开放，不同文件，不同硬盘，不同PC数据库：分布

努力的小陈、·2024-01-12 20:46

这次在搞不定 Redis 集群搭建！你来找我~~

Redis集群简介下载&安装Redis搭建Redis集群手动方式搭建自动方式搭Redis集群简介RedisCluster即Redis集群，是Redis官方在3.0版本推出的一套分布式存储方案。

码农开花·2024-01-12 20:42

NVMe-oF 1.1规范：多路径、非对称命名空间和NVMe/TCP

提到NVMeoverFabric，我就会想到它的几种应用场景：1、存储阵列到主机的网络连接（替代FC、iSCSI等）；2、服务器、本地NVMe存储解耦（跨机箱/JBOF），SSD存储资源池化共享；3、分布式存储

大隐隐于野·2024-01-12 18:07

Kafka在车联网中应用浅谈

数据分片与分布式存储：Kafka可以将车辆产生的数据分片存储，实现分布式存储和数据备份。这种设计可以有效地应对数据量大的情况，提高数据存储和处理的效率。消息队列与

MarkHD·2024-01-12 14:06

联手英特尔，释放星飞分布式全闪存储潜能

近日，英特尔官网发布了与XSKY星辰天合联手打造的解决方案，即XSKY的新一代全闪分布式存储系统XINFINI，该存储系统采用英特尔QAT加速数据压缩/解压缩，从而大幅度提升存储系统性能。

XSKY星辰天合·2024-01-12 09:15

ceph、gluster、longhorn选型对比

CephCeph是一个分布式的存储系统，可以在统一的系统中提供唯一的对象、块和文件存储。

科氏加速度·2024-01-12 07:28

Openstack云计算（五）ceph

Ceph简介：Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。ceph]的统一体现在可以提供文件系统、块存储和对象存储,分布式体现在可以动态扩展。

wmd13164306712·2024-01-12 07:50

9.云原生存储之ceph在k8s中应用及问题处理

文章目录ceph应用场景ceph应用在k8s集群外使用块设备ceph客户端配置创建块挂载使用删除pool在k8s集群内使用块设备创建块池和StorageClass使用存储块存储映射问题处理问题现象事件分析

野心与梦·2024-01-12 07:31

布隆过滤器应用场景优势不足

分布式系统：在分布式系统中，可以用于快速判断某个数据在分布式存储中的存在与否，减少网络传输和存储访问。爬虫系统：用于判断一个URL是否已经被爬取

KevinAha·2024-01-11 22:36

k8s（存储）数据卷与数据持久卷

容器内文件会丢失问题2：一个Pod中运行多个容器并需要共享文件kubenetes卷（Volume）这一抽象概念能够解决这两个问题常用的数据卷•节点本地（hostPath，emptyDir）•网络（NFS，Ceph

黑马金牌编程·2024-01-11 12:11

Springboot对接ceph集群以及java利用s3对象网关接口与ceph集群交互

忆林520·2024-01-11 11:37

Ceph 集群状态监控细化

需求在做Ceph的监控报警系统时，对于Ceph集群监控状态的监控，最初只是简单的OK、WARN、ERROR，按照Ceph的status输出来判断的，仔细想想，感觉这些还不够，因为WARN、ERROR状态中

Joncc·2024-01-11 10:30

ELK 企业级日志分析系统

●ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。

峡谷在逃戚风·2024-01-11 06:59

ceph对接nfs-ganesha 安装配置手顺

概要nfs-ganesha开始支持ceph，对接cephfs,rgw.服务端安装和配置配置yum源[nfs-ganesha]name=nfs-ganeshabaseurl=http://us-west.ceph.com

zdlinux·2024-01-11 05:01

Ceph异常断电osd无法启动修复 failed to load OSD map for epoch

问题现象：日志错误，一般出现在节点异常掉电或者其他异常/crc...skipping2020-03-2309:40:54.3347f6b38bffb80-1bluestore(/var/lib/ceph

zdlinux·2024-01-11 05:01

glusterFS

它将自动故障转移作为主要功能.分布式存储系统.集群式NAS存储.无集中式元数据服务,采用Hash算法定位.一致性哈希DHT.Hash值落在哪个范围内,数据就存储在哪里.弹性卷管理.自动做了raid.2.

MoonSoin·2024-01-11 04:42

ceph warning mute 静音

root@test:~#ceph-scluster:id:9ef94365-5d9e-4c3a-a844-f198e0fa48cbhealth:HEALTH_WARNTherearedaemonsrunninganolderversionofceph

石兴稳·2024-01-10 22:17

【转载】万亿级数据洪峰下的分布式消息引擎

为了应对这些不可控的洪峰数据，中间件团队通过大量研究和实践，推出了低延迟高可用解决方案，在分布式存储领域具有一定的普适性。在此基

ongahong·2024-01-10 14:06

给VMWARE虚拟机分区扩容

创建物理卷4、扩展LVM卷组，给LVM卷组添加新的物理卷5、给home分区扩容6、自动扩展XFS文件系统到最大的可用大小7、查看扩容结果背景：本人使用vmware搭建了一个centos7.6的环境准备编译ceph

牛跃2214·2024-01-10 11:55

Redis面试题7

减少网络往返次数；解决单线程模型的方法有：使用多实例部署，提高并发量和吞吐量；使用线程池机制，在单线程的基础上并发地工作；解决内存限制的方法有：使用分片技术，将数据分散到不同的服务器上；使用Redis集群，通过分布式存储和

CrazyMax_zh·2024-01-10 09:19

Ceph源码分析-s-＞req_id = store-＞svc()-＞zone_utils-＞unique_id(req-＞id)

s->req_id=store->svc()->zone_utils->unique_id(req->id);涉及到指针和对象方法的调用。我会逐步为你解释这行代码的含义。s->req_id=...;s是一个指针，它指向一个结构或类。req_id是该结构或类的一个成员变量。这行代码的意思是：将req_id的值设置为后面的表达式的返回值。store->svc()store也是一个指针，它指向一个结构或

瓦哥架构实战·2024-01-10 07:03

Ceph学习 -- （3）Ceph接口与存储引擎

ceph分布式-》无需查表，算算就好-》算出的结果clustermapclustermapmonmaposdmappgmapcrushmaprados集群：1、mon集群负责：1、监控全局状态-》clustermap1

肥海学习日志·2024-01-10 07:02

【ceph】ceph学习：浅析开源项目之Ceph--研读

目录1Ceph概述2核心组件3IO流程4IO顺序性5PG一致性协议5.1StateMachine5.2FailoverOverview5.3PGPeering5.4Recovery/Backfill6引擎概述

bdview·2024-01-10 07:31

云原生专栏

云原生之kubesphere基础服务搭建5.云原生安全之kubesphere应用网关配置域名TLS证书6.云原生之DevOps和CICD7.云原生之jenkins集成SonarQube8.云原生存储之Ceph

野心与梦·2024-01-10 07:31

k8s部署rook-ceph记录

目录1.部署前准备1.1环境信息1.1.1系统环境版本1.1.2rook-ceph版本1.2版本对照确认1.2.1os与ceph版本1.2.2rook与ceph版本1.2.3ceph与kubenetes

quadimodo·2024-01-10 07:00

8.云原生存储之Ceph集群