Ceph

Ceph IO流程及数据分布

1.CephIO流程及数据分布1.1正常IO流程图步骤：client创建clusterhandler。client读取配置文件。client连接上monitor，获取集群map信息。
大隐隐于野·2023-09-01 10:14

ceph源码阅读 erasure-code

1、ceph纠删码纠删码(ErasureCode)是比较流行的数据冗余的存储方法，将原始数据分成k个数据块(datachunk)，通过k个数据块计算出m个校验块(codingchunk)。
大隐隐于野·2023-09-01 10:14

Ceph的纠删码特性 EC（Erasure Code）代码流程

从GitHub上CloneCeph项目，我是基于(cephversion12.2.11luminous版本)的代码来分析的一、EC（ErasureCode）是什么？
大隐隐于野·2023-09-01 10:14

ceph源码阅读 buffer

ceph::buffer是ceph非常底层的实现，负责管理ceph的内存。
大隐隐于野·2023-09-01 10:44

Ceph基础知识和基础架构认识

1Ceph基础介绍Ceph是一个可靠地、自动重均衡、自动恢复的分布式存储系统，根据场景划分可以将Ceph分为三大块，分别是对象存储、块设备存储和文件系统服务。
大隐隐于野·2023-09-01 10:11

非常详细的 Ceph 介绍、原理、架构

非常详细的Ceph介绍、原理、架构1.Ceph架构简介及使用场景介绍1.1Ceph简介Ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
大隐隐于野·2023-09-01 07:30

ceph架构及 IO流程

CEPH是由多个节点构成的集群，它具有良好的可扩展性和可靠性。
大隐隐于野·2023-09-01 07:30

【python零基础入门学习】python基础篇之判断与for循环（二）

python》：python零基础入门学习《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-08-31 23:13

【Terraform学习】使用 Terraform创建Lambda函数启动EC2（Terraform-AWS最佳实战学习）

python》：python零基础入门学习《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-08-31 09:33

【Terraform学习】使用 Terraform创建DynamoDB添加项目（Terraform-AWS最佳实战学习）

python》：python零基础入门学习《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-08-31 09:33

【Terraform学习】Terraform模块基础操作（Terraform模块）

python》：python零基础入门学习《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-08-31 08:28

php7.4升级php8.0后重启系统网站访问异常问题

安装完php8.0之后也禁用了旧版本php：禁用phpsudoa2dismodphp7.4启用phpsudoa2enmodphp8.0也重启了php8.0-fpm服务：sudoservicephp8.0
fengxingke·2023-08-30 14:45

Ceph入门到精通-Lunix性能分析工具汇总

出于对Linux操作系统的兴趣，以及对底层知识的强烈欲望，因此整理了这篇文章。本文也可以作为检验基础知识的指标，另外文章涵盖了一个系统的方方面面。如果没有完善的计算机系统知识，网络知识和操作系统知识，文档中的工具，是不可能完全掌握的，另外对系统性能分析和优化是一个长期的系列。本文档主要是结合Linux大牛，Netflix高级性能架构师BrendanGregg更新Linux性能调优工具的博文，搜集L
瓦哥架构实战·2023-08-30 06:23

【无标题】

Cephdeploy-ceph部署投入使用ceph前，要知道一个很现实得问题，ceph对低版本内核得客户端使用非常不友好，低内核是指小于等于3.10.0-862，默认的centos7.5及以下的系统都是小于此类内核
张现伟的成长之路·2023-08-30 06:22

Ceph入门到精通-LVS基础知识

LB集群:（LoadBalancing）即负载均衡集群,其目的是为了提高访问的并发量及提升服务器的性能，其实现方式分为硬件方式和软件方式。硬件实现方式：常用的有F5公司的BIG-IP系列、A10公司的AX系列、Citrix公司的NetScaler系列等软件实现方式：LVS工作于传输层、nginx工作于应用层、haproxy工作于传输层和应用层本文主要讲解LVS。一、什么是LVS?1.LVS:(Li
瓦哥架构实战·2023-08-30 06:47

Ceph入门到精通-OSD waring 设置建议

警告1在/var/lib/ceph/osd中找到的多个ceph_fsid值。这可能意味着您正在托管许多集群的OSD此节点或某些OSD配置错误以加入您期望的集群。
瓦哥架构实战·2023-08-30 06:17

分部署存储Ceph

文章目录Ceph一.deploy-ceph部署1.系统环境初始化1.1修改主机名，DNS解析1.2时间同步1.3配置apt基础源与ceph源1.4关闭selinux与防火墙1.5创建ceph集群部署用户
张现伟的成长之路·2023-08-30 06:46

ceph对象三元素data、xattr、omap

这里有一个ceph的原则，就是所有存储的不管是块设备、对象存储、文件存储最后都转化成了底层的对象object，这个object包含3个元素data，xattr，omap。
大隐隐于野·2023-08-30 00:08

【Terraform学习】使用 Terraform创建 S3 存储桶事件（Terraform-AWS最佳实战学习）

python》：python零基础入门学习《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-08-30 00:03

ceph存储 ceph中pglog处理流程

ceph的PGLog是由PG来维护，记录了该PG的所有操作，其作用类似于数据库里的undolog。
skdkjzz·2023-08-29 14:01

ceph中PGLog处理流程

正文structpg_log_entry_t{ObjectModDescmod_desc;//用于保存本地回滚的一些信息，用于EC模式下的回滚操作bufferlistsnaps;//克隆操作，用于记录当前对象的snap列表hobject_tsoid;//操作的对象osd_reqid_treqid;//请求唯一标识(caller+tid)vector>extra_reqids;eversion_tv
大隐隐于野·2023-08-29 14:01

Ceph EC pg backfill run

pg的backfill请求也是发送到osd的workqueue中与业务IO一起竞争。PGRecovery::runbackfill57voidPGRecovery::run(58OSD*osd,59OSDShard*sdata,60PGRef&pg,61ThreadPool::TPHandle&handle)62{63osd->do_recovery(pg.get(),epoch_queued,r
大隐隐于野·2023-08-29 14:01

ceph中PGLog处理流程

ceph的PGLog是由PG来维护，记录了该PG的所有操作，其作用类似于数据库里的undolog。
大隐隐于野·2023-08-29 14:58

Ceph源码解析：PG peering

集群中的设备异常(异常OSD的添加删除操作)，会导致PG的各个副本间出现数据的不一致现象，这时就需要进行数据的恢复，让所有的副本都达到一致的状态。一、OSD的故障和处理办法：1.OSD的故障种类：故障A：一个正常的OSD因为所在的设备发生异常，导致OSD不能正常工作，这样OSD超过设定的时间就会被out出集群。故障B：一个正常的OSD因为所在的设备发生异常，导致OSD不能正常工作，但是在设定的时间
大隐隐于野·2023-08-29 06:16

ceph peering机制-状态机

本章介绍ceph中比较复杂的模块：Peering机制。该过程保障PG内各个副本之间数据的一致性，并实现PG的各种状态的维护和转换。
大隐隐于野·2023-08-29 06:39

Ceph入门到精通-FAQ-display ospf error中，各个Error值的含义是什么

发布时间:2015-02-13|浏览次数:4738|下载次数:0|文档编号：EKB1000068090目录问题描述解决方案问题描述Q：displayospferror中，各个Error值的含义是什么？解决方案A：1、Generalpacketerrors:通用报文错误计数：−IP:receivedmyownpacket：收到源地址是自己IP地址发送的报文。产生原因：出现二层环路。−Badpacke
瓦哥架构实战·2023-08-29 06:09

【Docker的使用基础】Mac下利用Docker安装Redis

python爬虫入门进阶❤️4.Ceph实战，从原理到实战应有尽有。Ceph实战
码农飞哥·2023-08-28 23:51

【Docker的使用基础】Mac下利用Docker安装 Kafka

python爬虫入门进阶❤️4.Ceph实战，从原理到实战应有尽有。Ceph实战
码农飞哥·2023-08-28 19:29

ceph 网络模块

代码入手方式：1.osd的网络通信messenger在old.h中定义，如下图所示2.然后查看cluster_messenger的创建。3.再来查看internal_messenger的由来，是osd构造函数赋值的。4.最后看看ms_cluster的创建，在osd初始化的时候创建的。以上，就是cluster_messenger是如何跟IP绑定的过程。5.然后通过这个messenger发送网络消息即
620T·2023-08-28 17:18

ubuntu机器重启后netplan命令丢失

机器重启后网卡不显示ip，netplan命令丢失，ifconfigeth0up无效，由于上不了网，无法通过网络在线安装包通过其他机器下在netplan.io包拷贝后安装报错，缺少python环境root@ceph-osd01
inner222·2023-08-28 07:21

ceph-架构扩展

理论：Ceph是一个开源的、统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
嘿嘿龙帅·2023-08-28 05:15

JVM实战(一)： dump文件的产生以及执行shell脚本

1.dump文件产生1.1絮絮叨叨目前，公司使用的OLAP组件实现了k8s容器化如果使用宿主机磁盘存储日志，pod升级（本人是删除后重建）后，日志数据会丢失为了保证日志数据不丢失，专门配置了一个基于ceph
晓之木初·2023-08-28 03:17

架构扩展-ceph(1)

理论：Ceph是一个开源的、统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
努力买大G·2023-08-27 22:32

Ceph入门到精通-基于ECMP的多活负载均衡策略

本文简单介绍一下，如何基于ECMP，使用Quagga+LVS+Keepalived构建多活负载均衡方案1.背景介绍负载均衡，主要用于大规模分布式集群下，提供高性能服务。为了给负载均衡器提供高可用，一般利用主备或者主主模式实现。主备模式即只有主负载均衡器提供负载均衡功能，当主负载均衡器出现异常时，自动切换到备负载均衡器，继续提供负载均衡功能。主主模式（也称之为双活负载均衡），两个负载均衡器同时提供负
瓦哥架构实战·2023-08-27 03:19

Ceph入门到精通-Podman设置容器开机自启

步骤总结：1.启动一个容器#podmanrun-d--namewebhttpd2.查看该容器#podmanps3.每次都启动新容器方式创建servcie//--new参数，每次启动都删除旧容器，启动一个新容器#podmangeneratesystemd-n--new-fweb4.查看启动文件#cat/root/container-web.service5.将server文件保存在/etc/syst
瓦哥架构实战·2023-08-27 03:49

Ceph入门到精通-如何编译安装Quagga？

Quagga1.理论部分1.1软件简介Quagga中文翻译斑驴，是一种先进的路由软件包，提供一套基于TCP/IP的路由协议。1.2斑驴的应用场景–使得操作系统变成专业的路由–使得操作系统具有与传统路由通过路由协议直接对接1.3斑驴支持的路由协议–BGP–OSPF–RIP–IS-IS–MPLS–LDP–BFD–PIM-SSM1.4斑驴与传统路由的区别–传统路由以提供所有路由协议的过程程序的方式运行–
瓦哥架构实战·2023-08-27 03:48

yolov8实战之torchserve服务化：使用yolov8x来预打标

原始数据是在ceph上，比较直观的方式就是一张张读，然后一张张推理。
CodingInCV·2023-08-26 11:21

Linux学习--Ceph部署

前期准备资源下载链接:https://pan.baidu.com/s/1Yof-X-fD8kYLSmLAWFo5Ug提取码:txj5环境准备主机名IP地址ceph1192.168.88.11/24ceph2192.168.88.12
丢爸·2023-08-25 20:39

Ceph入门到精通-大流量10GB/s LVS+OSPF 高性能架构

LVS和LVS+keepalived这两种架构在平时听得多了，最近才接触到另外一个架构LVS+OSPF。这个架构实际上是LVS+Keepalived的升级版本，我们所知道LVS+Keepalived架构是这样子的：随着业务的扩展，我们可以对web服务器做水平扩展，以此来提高系统的处理能力。但是我们会发现，两台Director间始终只有一台是处于工作状态，而另一台处于不工作的备份状态，即使访问的流量
瓦哥架构实战·2023-08-25 05:14

Ceph入门到精通-大流量10GB/s支持OSPF(ECMP)-LVS 集群

Keepalived-LVS能够提高集群的高可用性并增加后端检测功能、简化配置，满足常规需求。但Keepalived-LVS集群中，同一个VIP只能由一台设备进行宣告，为一主多备的架构，不能横向拓展集群的性能，为此我们引入OSPF来解决该问题。OSPF(ECMP)ECMP（Equal-CostMultipathRouting）等价多路径，存在多条不同链路到达同一目的地址的网络环境中，如果使用传统的
瓦哥架构实战·2023-08-25 05:40

使用StorageClass动态创建pv

rook-ceph安装部署到位后，就可以开始来尝试使用StorageClass来动态创建pv了。
张兆坤的那些事·2023-08-23 15:30

使用rook搭建Ceph集群

宿主机：MacBookPro（AppleM2Max）VMwareFusionPlayer版本13.0.2VM软硬件：ubuntu22.04.24核CPU，5G内存，40G硬盘*每台机器分配硬件资源很重要，可以适当超过宿主机的资源量，否则会导致各种问题IP和角色（163为master，其他为node)：192.168.19.163k8smaster192.168.19.161k8sworker319
张兆坤的那些事·2023-08-23 15:58

Kylin v10 编译安装ceph 15.2.17

1.环境：ceph：octopus（15.2.17）OS：Kylin-Server-V10_U1-Release-Build02-20210824-GFB-x86_642.基础环境准备2.1配置软件源vim
牛角上的男孩·2023-08-23 12:54

smiley-http-proxy-servlet核心由httpclient改为okHttp

源组件有个问题，代理ceph文件系统时，文件名中包含+（）这些符号，会拼接在请求路径上，正常应该unicode转码，但是在组件核心请求到ceph时，httpclient发送请求会在请求前自动解码+（%2B
打呼噜的狒狒·2023-08-22 06:22

无涯教程-PHP - File 函数

NameDefaultChangeableChangelogallow_url_fopen"1"PHP_INI_ALLPHP_INI_ALLinPHP<=4.3.4.PHP_INI_SYSTEMinPHP<6.AvailablesincePHP4.0.4
Hi无涯教程·2023-08-22 01:45

ceph集群的扩容缩容

文章目录集群扩容添加osd使用ceph-deploy工具手动添加添加节点新节点前期准备新节点安装ceph，出现版本冲突ceph-deploy增加节点集群缩容删除osd删除节点添加monitor节点删除monitor
王哞哞哞哞·2023-08-21 18:38

单独配置ceph osd服务的coredump

前言coredump文件作用这里不多介绍，主要为了osd进程有bug导致进程crash了，然后抓取coredump后方便定位bug。配置一般可以在/etc/profile中用ulimit命令来打开系统所有用户的coredump:$cat/etc/profile...echo"/var/crash/core.%e.%p">/proc/sys/kernel/core_patternulimit-S-c
ypdai·2023-08-21 14:10

k8s rbd provider

问题创建好ceph集群后,在k8s是中创建好storageclass后.创建pvc居然不能自动创建pv.报如下错误failedtocreaterbdimage:executablefilenotfoundin
myonlyzzy·2023-08-21 11:10

UVa 247 Calling Circles

CallingCirclesIfyou'veseentelevisioncommercialsforlong-distancephonecompanieslately,you'venoticedthatmanycompanieshavebeenspendingalotofmoneytryingtoconvincepeoplethattheyprovidethebestserviceatthelow
c21c21·2023-08-21 04:56

ceph集群和数据库到底是储存数据_区块链和数据库，技术到底有何区别？

点击上方"太一云"关注我们关于数据库和区块链，总会有很多的困惑。区块链其实是一种数据库，因为他是数字账本，并且在区块的数据结构上存储信息。数据库中存储信息的结构被称为表格。但是，区块链是数据库，数据库可不是区块链。他们虽然都是存储信息的，但是设计却完全不同，所以不可以互换。而且，这两者存在的目标也不同，所以对于很多人来说，他们不是很清楚为什么区块链是需要的，以及为什么数据库更适合存储某些数据。首先
weixin_39558221·2023-08-20 00:43
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他