Ceph块存储

分部署存储Ceph

文章目录Ceph一.deploy-ceph部署1.系统环境初始化1.1修改主机名，DNS解析1.2时间同步1.3配置apt基础源与ceph源1.4关闭selinux与防火墙1.5创建ceph集群部署用户
张现伟的成长之路·2023-08-30 06:46

ceph对象三元素data、xattr、omap

这里有一个ceph的原则，就是所有存储的不管是块设备、对象存储、文件存储最后都转化成了底层的对象object，这个object包含3个元素data，xattr，omap。
大隐隐于野·2023-08-30 00:08

【Terraform学习】使用 Terraform创建 S3 存储桶事件（Terraform-AWS最佳实战学习）

python》：python零基础入门学习《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-08-30 00:03

ceph存储 ceph中pglog处理流程

ceph的PGLog是由PG来维护，记录了该PG的所有操作，其作用类似于数据库里的undolog。
skdkjzz·2023-08-29 14:01

ceph中PGLog处理流程

正文structpg_log_entry_t{ObjectModDescmod_desc;//用于保存本地回滚的一些信息，用于EC模式下的回滚操作bufferlistsnaps;//克隆操作，用于记录当前对象的snap列表hobject_tsoid;//操作的对象osd_reqid_treqid;//请求唯一标识(caller+tid)vector>extra_reqids;eversion_tv
大隐隐于野·2023-08-29 14:01

Ceph EC pg backfill run

pg的backfill请求也是发送到osd的workqueue中与业务IO一起竞争。PGRecovery::runbackfill57voidPGRecovery::run(58OSD*osd,59OSDShard*sdata,60PGRef&pg,61ThreadPool::TPHandle&handle)62{63osd->do_recovery(pg.get(),epoch_queued,r
大隐隐于野·2023-08-29 14:01

ceph中PGLog处理流程

ceph的PGLog是由PG来维护，记录了该PG的所有操作，其作用类似于数据库里的undolog。
大隐隐于野·2023-08-29 14:58

Ceph源码解析：PG peering

集群中的设备异常(异常OSD的添加删除操作)，会导致PG的各个副本间出现数据的不一致现象，这时就需要进行数据的恢复，让所有的副本都达到一致的状态。一、OSD的故障和处理办法：1.OSD的故障种类：故障A：一个正常的OSD因为所在的设备发生异常，导致OSD不能正常工作，这样OSD超过设定的时间就会被out出集群。故障B：一个正常的OSD因为所在的设备发生异常，导致OSD不能正常工作，但是在设定的时间
大隐隐于野·2023-08-29 06:16

ceph peering机制-状态机

本章介绍ceph中比较复杂的模块：Peering机制。该过程保障PG内各个副本之间数据的一致性，并实现PG的各种状态的维护和转换。
大隐隐于野·2023-08-29 06:39

Ceph入门到精通-FAQ-display ospf error中，各个Error值的含义是什么

发布时间:2015-02-13|浏览次数:4738|下载次数:0|文档编号：EKB1000068090目录问题描述解决方案问题描述Q：displayospferror中，各个Error值的含义是什么？解决方案A：1、Generalpacketerrors:通用报文错误计数：−IP:receivedmyownpacket：收到源地址是自己IP地址发送的报文。产生原因：出现二层环路。−Badpacke
瓦哥架构实战·2023-08-29 06:09

【Docker的使用基础】Mac下利用Docker安装Redis

python爬虫入门进阶❤️4.Ceph实战，从原理到实战应有尽有。Ceph实战
码农飞哥·2023-08-28 23:51

【Docker的使用基础】Mac下利用Docker安装 Kafka

python爬虫入门进阶❤️4.Ceph实战，从原理到实战应有尽有。Ceph实战
码农飞哥·2023-08-28 19:29

ceph 网络模块

代码入手方式：1.osd的网络通信messenger在old.h中定义，如下图所示2.然后查看cluster_messenger的创建。3.再来查看internal_messenger的由来，是osd构造函数赋值的。4.最后看看ms_cluster的创建，在osd初始化的时候创建的。以上，就是cluster_messenger是如何跟IP绑定的过程。5.然后通过这个messenger发送网络消息即
620T·2023-08-28 17:18

keras使用稀疏输入进行训练

在python中我们可以使用scipy中的sparse模块存储这些矩阵，但是在用keras搭建神经网络使用这些矩阵作为神经网络的输入时，则需要做一些处理才能使用sparse格式的数据。
AlchemistMartin·2023-08-28 16:30

ubuntu机器重启后netplan命令丢失

机器重启后网卡不显示ip，netplan命令丢失，ifconfigeth0up无效，由于上不了网，无法通过网络在线安装包通过其他机器下在netplan.io包拷贝后安装报错，缺少python环境root@ceph-osd01
inner222·2023-08-28 07:21

ceph-架构扩展

理论：Ceph是一个开源的、统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
嘿嘿龙帅·2023-08-28 05:15

JVM实战(一)： dump文件的产生以及执行shell脚本

1.dump文件产生1.1絮絮叨叨目前，公司使用的OLAP组件实现了k8s容器化如果使用宿主机磁盘存储日志，pod升级（本人是删除后重建）后，日志数据会丢失为了保证日志数据不丢失，专门配置了一个基于ceph
晓之木初·2023-08-28 03:17

架构扩展-ceph(1)

理论：Ceph是一个开源的、统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
努力买大G·2023-08-27 22:32

一文解析block io生命历程

一、什么是块设备和块设备层从计算机诞生开始，就有了IO设备，IO设备大致分为两类，块设备和字符设备，块设备的2个重要特性就是：块存储和可寻址。而块设备层，就是通过组织管理，
Linux内核站·2023-08-27 11:56

Ceph入门到精通-基于ECMP的多活负载均衡策略

本文简单介绍一下，如何基于ECMP，使用Quagga+LVS+Keepalived构建多活负载均衡方案1.背景介绍负载均衡，主要用于大规模分布式集群下，提供高性能服务。为了给负载均衡器提供高可用，一般利用主备或者主主模式实现。主备模式即只有主负载均衡器提供负载均衡功能，当主负载均衡器出现异常时，自动切换到备负载均衡器，继续提供负载均衡功能。主主模式（也称之为双活负载均衡），两个负载均衡器同时提供负
瓦哥架构实战·2023-08-27 03:19

Ceph入门到精通-Podman设置容器开机自启

步骤总结：1.启动一个容器#podmanrun-d--namewebhttpd2.查看该容器#podmanps3.每次都启动新容器方式创建servcie//--new参数，每次启动都删除旧容器，启动一个新容器#podmangeneratesystemd-n--new-fweb4.查看启动文件#cat/root/container-web.service5.将server文件保存在/etc/syst
瓦哥架构实战·2023-08-27 03:49

Ceph入门到精通-如何编译安装Quagga？

Quagga1.理论部分1.1软件简介Quagga中文翻译斑驴，是一种先进的路由软件包，提供一套基于TCP/IP的路由协议。1.2斑驴的应用场景–使得操作系统变成专业的路由–使得操作系统具有与传统路由通过路由协议直接对接1.3斑驴支持的路由协议–BGP–OSPF–RIP–IS-IS–MPLS–LDP–BFD–PIM-SSM1.4斑驴与传统路由的区别–传统路由以提供所有路由协议的过程程序的方式运行–
瓦哥架构实战·2023-08-27 03:48

yolov8实战之torchserve服务化：使用yolov8x来预打标

原始数据是在ceph上，比较直观的方式就是一张张读，然后一张张推理。
CodingInCV·2023-08-26 11:21

块存储、文件存储、对象存储三者之比较

转自块存储、文件存储、对象存储三者之比较|周末送资料1、块存储典型设备：磁盘阵列，硬盘块存储主要是将裸磁盘空间整个映射给主机使用的，就是说例如磁盘阵列里面有5块硬盘（为方便说明，假设每个硬盘1G），然后可以通过划逻辑盘
allenhaozi·2023-08-26 10:00

无论您接受与否，IPFS都会渗透到我们的生活中

面对天量的数据，IPFS提供了一个高吞吐量、按内容寻址的块存储模型，及与内容相关超链接。Filecoin的诞生为什么是必然，而不是偶然。
中创矿池·2023-08-25 20:26

Linux学习--Ceph部署

前期准备资源下载链接:https://pan.baidu.com/s/1Yof-X-fD8kYLSmLAWFo5Ug提取码:txj5环境准备主机名IP地址ceph1192.168.88.11/24ceph2192.168.88.12
丢爸·2023-08-25 20:39

Ceph入门到精通-大流量10GB/s LVS+OSPF 高性能架构

LVS和LVS+keepalived这两种架构在平时听得多了，最近才接触到另外一个架构LVS+OSPF。这个架构实际上是LVS+Keepalived的升级版本，我们所知道LVS+Keepalived架构是这样子的：随着业务的扩展，我们可以对web服务器做水平扩展，以此来提高系统的处理能力。但是我们会发现，两台Director间始终只有一台是处于工作状态，而另一台处于不工作的备份状态，即使访问的流量
瓦哥架构实战·2023-08-25 05:14

Ceph入门到精通-大流量10GB/s支持OSPF(ECMP)-LVS 集群

Keepalived-LVS能够提高集群的高可用性并增加后端检测功能、简化配置，满足常规需求。但Keepalived-LVS集群中，同一个VIP只能由一台设备进行宣告，为一主多备的架构，不能横向拓展集群的性能，为此我们引入OSPF来解决该问题。OSPF(ECMP)ECMP（Equal-CostMultipathRouting）等价多路径，存在多条不同链路到达同一目的地址的网络环境中，如果使用传统的
瓦哥架构实战·2023-08-25 05:40

Xilinx FPGA RAM存储资源verilog可综合描述方法

对于XilinxFPGA器件，片内存储资源分为块存储BlockRAM和分布式存储DistributedRAM。BlockRAM为硬核，不会占用触发器FF和查找表LUT这类逻辑资源。
MmikerR·2023-08-24 19:27

使用StorageClass动态创建pv

rook-ceph安装部署到位后，就可以开始来尝试使用StorageClass来动态创建pv了。
张兆坤的那些事·2023-08-23 15:30

使用rook搭建Ceph集群

宿主机：MacBookPro（AppleM2Max）VMwareFusionPlayer版本13.0.2VM软硬件：ubuntu22.04.24核CPU，5G内存，40G硬盘*每台机器分配硬件资源很重要，可以适当超过宿主机的资源量，否则会导致各种问题IP和角色（163为master，其他为node)：192.168.19.163k8smaster192.168.19.161k8sworker319
张兆坤的那些事·2023-08-23 15:58

Kylin v10 编译安装ceph 15.2.17

1.环境：ceph：octopus（15.2.17）OS：Kylin-Server-V10_U1-Release-Build02-20210824-GFB-x86_642.基础环境准备2.1配置软件源vim
牛角上的男孩·2023-08-23 12:54

smiley-http-proxy-servlet核心由httpclient改为okHttp

源组件有个问题，代理ceph文件系统时，文件名中包含+（）这些符号，会拼接在请求路径上，正常应该unicode转码，但是在组件核心请求到ceph时，httpclient发送请求会在请求前自动解码+（%2B
打呼噜的狒狒·2023-08-22 06:22

包管理工具，代码压缩编译等工具

1,包管理工具对于一⻔成熟的语言来说，在有语言规范的同时，社区或者制定语言规范的组织也会有模块化的规范和模块存储到平台，每个人都能将自己写好的模块化代码发布到平台上，同时任何人也可以下载公共平台上其他人的模块化代码
小王子__·2023-08-22 04:40

无涯教程-PHP - File 函数

NameDefaultChangeableChangelogallow_url_fopen"1"PHP_INI_ALLPHP_INI_ALLinPHP<=4.3.4.PHP_INI_SYSTEMinPHP<6.AvailablesincePHP4.0.4
Hi无涯教程·2023-08-22 01:45

ceph集群的扩容缩容

文章目录集群扩容添加osd使用ceph-deploy工具手动添加添加节点新节点前期准备新节点安装ceph，出现版本冲突ceph-deploy增加节点集群缩容删除osd删除节点添加monitor节点删除monitor
王哞哞哞哞·2023-08-21 18:38

单独配置ceph osd服务的coredump

前言coredump文件作用这里不多介绍，主要为了osd进程有bug导致进程crash了，然后抓取coredump后方便定位bug。配置一般可以在/etc/profile中用ulimit命令来打开系统所有用户的coredump:$cat/etc/profile...echo"/var/crash/core.%e.%p">/proc/sys/kernel/core_patternulimit-S-c
ypdai·2023-08-21 14:10

k8s rbd provider

问题创建好ceph集群后,在k8s是中创建好storageclass后.创建pvc居然不能自动创建pv.报如下错误failedtocreaterbdimage:executablefilenotfoundin
myonlyzzy·2023-08-21 11:10

我看见你的声音

于是听起里面的插曲都是比较经典的老歌仿佛唤醒了很多年前的回忆喜欢听英摇之后就很少听中文歌想起来初中时最喜欢的林宥嘉还有五月天孙燕姿陈绮贞现在又听到这些老歌感觉时间过好快啊对于我来说每一首我听过很多次的歌都是一块存储了我回忆的碎片会因为再次听到它想起来当时循环它的时候那些经历过的时光不论是现在还是未来音乐对于我来说是必不可少的
Suki芝·2023-08-21 04:08

UVa 247 Calling Circles

CallingCirclesIfyou'veseentelevisioncommercialsforlong-distancephonecompanieslately,you'venoticedthatmanycompanieshavebeenspendingalotofmoneytryingtoconvincepeoplethattheyprovidethebestserviceatthelow
c21c21·2023-08-21 04:56

描述对象存储，与文件存储，块存储的区别

先说说块存储吧，典型代表--SAN。对于用户来说，SAN好比是一块大磁盘，用户可以根据需要随意将SAN格式化成想要的文件系统来使用。
王上山·2023-08-20 16:59

指针漫谈

#数据的意义依赖于解释在一块存储区域内，存有数据，但是数据代表了什么，却依赖于解释！
快乐的阿常艾念宝·2023-08-20 11:07

Hadoop知识点总结——HDFS小文件过多问题、解决方法

HDFS小文件过多问题、解决方法小文件过多的影响存储层面计算层面解决方法1、采用har归档方式2、采用CombineTextInputFormat3、开启JVM重用小文件过多的影响存储层面每个文件均按块存储
笑看风云路·2023-08-20 04:04

ceph集群和数据库到底是储存数据_区块链和数据库，技术到底有何区别？

点击上方"太一云"关注我们关于数据库和区块链，总会有很多的困惑。区块链其实是一种数据库，因为他是数字账本，并且在区块的数据结构上存储信息。数据库中存储信息的结构被称为表格。但是，区块链是数据库，数据库可不是区块链。他们虽然都是存储信息的，但是设计却完全不同，所以不可以互换。而且，这两者存在的目标也不同，所以对于很多人来说，他们不是很清楚为什么区块链是需要的，以及为什么数据库更适合存储某些数据。首先
weixin_39558221·2023-08-20 00:43

存储系统的三种分类及KV模型

一、数据储存方式类型1.对象存储通常意义的键值存储，其接口就是简单的GET、PUT、DEL和其他扩展，代表主要有Swift、S3以及Gluster等；2.块存储这种接口通常以QEMUDriver或者KernelModule
zhaot1993·2023-08-19 21:09

学一点Ceph知识：初识Ceph

Ceph是什么？Ceph是一个开源的分布式存储系统，可大规模扩展、高性能、无单点故障，在普通的服务器上可以支持到PB级容量，商用机器上支持的容量可以达到EB级别。
清茶豆奶·2023-08-19 15:59

分布式存储Ceph技术

分布式存储ceph技术目录分布式存储ceph技术分布式存储什么是分布式存储分布式存储的特性存储的分类（不完善）cephceph简介ceph的优势ceph架构ceph的基本组件ceph结构ceph存储种类和应用场景块存储文件存储对象存储
Mr_Wzzzz·2023-08-19 06:05

前端工具人的日常学习2022-09-04

今天复习一下js的变量存储方式栈（stack）、堆（heap）JS变量都存储在内存中，而内存给变量开辟了两块存储空间，分别为栈（stack）空间和堆（heap）空间stack：存放JS基本数据类型，通过按值访问
spikekk·2023-08-19 03:34

RocketMQ 5.0 架构解析：如何基于云原生架构支撑多元化场景

首先介绍RocketMQ5.0的核心概念和架构概览；然后从集群角度出发，从宏观视角学习RocketMQ的管控链路、数据链路、客户端和服务端如何交互；最后介绍消息队列最重要的模块存储系统，了解RocketMQ
阿里云云原生·2023-08-19 02:53

计算机专业surface pro,微软Surface Pro 7详细评测：仍旧是最好的二合一平板电脑

今年10月初，当人们还沉浸在国庆放假的喜悦中的时候，大洋彼岸的微软在纽约召开新品发布会，一口气发布了6款Surface设备，除了惊艳的双屏电脑SurfaceNeo以及传说中的“SurfacePhone”
磨磨蹭蹭磨磨唧唧·2023-08-18 22:46
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他