E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
----Ceph
Ceph
IO流程及数据分布
1.
Ceph
IO流程及数据分布1.1正常IO流程图步骤:client创建clusterhandler。client读取配置文件。client连接上monitor,获取集群map信息。
大隐隐于野
·
2023-09-01 10:14
Ceph专栏
ceph
ceph
源码阅读 erasure-code
1、
ceph
纠删码纠删码(ErasureCode)是比较流行的数据冗余的存储方法,将原始数据分成k个数据块(datachunk),通过k个数据块计算出m个校验块(codingchunk)。
大隐隐于野
·
2023-09-01 10:14
Ceph专栏
ceph
Ceph
的纠删码特性 EC(Erasure Code)代码流程
从GitHub上Clone
Ceph
项目,我是基于(
ceph
version12.2.11luminous版本)的代码来分析的一、EC(ErasureCode)是什么?
大隐隐于野
·
2023-09-01 10:14
Ceph专栏
ceph
ceph
源码阅读 buffer
ceph
::buffer是
ceph
非常底层的实现,负责管理
ceph
的内存。
大隐隐于野
·
2023-09-01 10:44
Ceph专栏
ceph
Ceph
基础知识和基础架构认识
1
Ceph
基础介绍
Ceph
是一个可靠地、自动重均衡、自动恢复的分布式存储系统,根据场景划分可以将
Ceph
分为三大块,分别是对象存储、块设备存储和文件系统服务。
大隐隐于野
·
2023-09-01 10:11
Ceph专栏
ceph
非常详细的
Ceph
介绍、原理、架构
非常详细的
Ceph
介绍、原理、架构1.
Ceph
架构简介及使用场景介绍1.1
Ceph
简介
Ceph
是一个统一的分布式存储系统,设计初衷是提供较好的性能、可靠性和可扩展性。
大隐隐于野
·
2023-09-01 07:30
Ceph专栏
ceph
ceph
架构及 IO流程
CEPH
是由多个节点构成的集群,它具有良好的可扩展性和可靠性。
大隐隐于野
·
2023-09-01 07:30
Ceph专栏
ceph
【python零基础入门学习】python基础篇之判断与for循环(二)
python》:python零基础入门学习《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-08-31 23:13
python零基础入门
学习
python
【Terraform学习】使用 Terraform创建Lambda函数启动EC2(Terraform-AWS最佳实战学习)
python》:python零基础入门学习《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-08-31 09:33
terraform
terraform
学习
aws
【Terraform学习】使用 Terraform创建DynamoDB添加项目(Terraform-AWS最佳实战学习)
python》:python零基础入门学习《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-08-31 09:33
terraform
terraform
学习
【Terraform学习】Terraform模块基础操作(Terraform模块)
python》:python零基础入门学习《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-08-31 08:28
terraform
terraform
学习
aws
php7.4升级php8.0后重启系统网站访问异常问题
安装完php8.0之后也禁用了旧版本php:禁用phpsudoa2dismodphp7.4启用phpsudoa2enmodphp8.0也重启了php8.0-fpm服务:sudoservi
ceph
p8.0
fengxingke
·
2023-08-30 14:45
分享类
大数据
php
windows
ubuntu
win10子系统
Ceph
入门到精通-Lunix性能分析工具汇总
出于对Linux操作系统的兴趣,以及对底层知识的强烈欲望,因此整理了这篇文章。本文也可以作为检验基础知识的指标,另外文章涵盖了一个系统的方方面面。如果没有完善的计算机系统知识,网络知识和操作系统知识,文档中的工具,是不可能完全掌握的,另外对系统性能分析和优化是一个长期的系列。本文档主要是结合Linux大牛,Netflix高级性能架构师BrendanGregg更新Linux性能调优工具的博文,搜集L
瓦哥架构实战
·
2023-08-30 06:23
Ceph入门到精通
ceph
【无标题】
Ceph
deploy-
ceph
部署投入使用
ceph
前,要知道一个很现实得问题,
ceph
对低版本内核得客户端使用非常不友好,低内核是指小于等于3.10.0-862,默认的centos7.5及以下的系统都是小于此类内核
张现伟的成长之路
·
2023-08-30 06:22
ceph
存储
分布式
k8s
Ceph
入门到精通-LVS基础知识
LB集群:(LoadBalancing)即负载均衡集群,其目的是为了提高访问的并发量及提升服务器的性能,其实现方式分为硬件方式和软件方式。硬件实现方式:常用的有F5公司的BIG-IP系列、A10公司的AX系列、Citrix公司的NetScaler系列等软件实现方式:LVS工作于传输层、nginx工作于应用层、haproxy工作于传输层和应用层本文主要讲解LVS。一、什么是LVS?1.LVS:(Li
瓦哥架构实战
·
2023-08-30 06:47
ceph
lvs
负载均衡
Ceph
入门到精通-OSD waring 设置建议
警告1在/var/lib/
ceph
/osd中找到的多个
ceph
_fsid值。这可能意味着您正在托管许多集群的OSD此节点或某些OSD配置错误以加入您期望的集群。
瓦哥架构实战
·
2023-08-30 06:17
Ceph入门到精通
ceph
分部署存储
Ceph
文章目录
Ceph
一.deploy-
ceph
部署1.系统环境初始化1.1修改主机名,DNS解析1.2时间同步1.3配置apt基础源与
ceph
源1.4关闭selinux与防火墙1.5创建
ceph
集群部署用户
张现伟的成长之路
·
2023-08-30 06:46
ceph
ceph
对象三元素data、xattr、omap
这里有一个
ceph
的原则,就是所有存储的不管是块设备、对象存储、文件存储最后都转化成了底层的对象object,这个object包含3个元素data,xattr,omap。
大隐隐于野
·
2023-08-30 00:08
Ceph专栏
ceph
【Terraform学习】使用 Terraform创建 S3 存储桶事件(Terraform-AWS最佳实战学习)
python》:python零基础入门学习《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-08-30 00:03
terraform
terraform
学习
aws
ceph
存储
ceph
中pglog处理流程
ceph
的PGLog是由PG来维护,记录了该PG的所有操作,其作用类似于数据库里的undolog。
skdkjzz
·
2023-08-29 14:01
ceph存储
ceph
中PGLog处理流程
正文structpg_log_entry_t{ObjectModDescmod_desc;//用于保存本地回滚的一些信息,用于EC模式下的回滚操作bufferlistsnaps;//克隆操作,用于记录当前对象的snap列表hobject_tsoid;//操作的对象osd_reqid_treqid;//请求唯一标识(caller+tid)vector>extra_reqids;eversion_tv
大隐隐于野
·
2023-08-29 14:01
Ceph专栏
ceph
Ceph
EC pg backfill run
pg的backfill请求也是发送到osd的workqueue中与业务IO一起竞争。PGRecovery::runbackfill57voidPGRecovery::run(58OSD*osd,59OSDShard*sdata,60PGRef&pg,61ThreadPool::TPHandle&handle)62{63osd->do_recovery(pg.get(),epoch_queued,r
大隐隐于野
·
2023-08-29 14:01
Ceph专栏
ceph
ceph
中PGLog处理流程
ceph
的PGLog是由PG来维护,记录了该PG的所有操作,其作用类似于数据库里的undolog。
大隐隐于野
·
2023-08-29 14:58
Ceph专栏
ceph
Ceph
源码解析:PG peering
集群中的设备异常(异常OSD的添加删除操作),会导致PG的各个副本间出现数据的不一致现象,这时就需要进行数据的恢复,让所有的副本都达到一致的状态。一、OSD的故障和处理办法:1.OSD的故障种类:故障A:一个正常的OSD因为所在的设备发生异常,导致OSD不能正常工作,这样OSD超过设定的时间就会被out出集群。故障B:一个正常的OSD因为所在的设备发生异常,导致OSD不能正常工作,但是在设定的时间
大隐隐于野
·
2023-08-29 06:16
Ceph专栏
ceph
ceph
peering机制-状态机
本章介绍
ceph
中比较复杂的模块:Peering机制。该过程保障PG内各个副本之间数据的一致性,并实现PG的各种状态的维护和转换。
大隐隐于野
·
2023-08-29 06:39
Ceph专栏
ceph
Ceph
入门到精通-FAQ-display ospf error中,各个Error值的含义是什么
发布时间:2015-02-13|浏览次数:4738|下载次数:0|文档编号:EKB1000068090目录问题描述解决方案问题描述Q:displayospferror中,各个Error值的含义是什么?解决方案A:1、Generalpacketerrors:通用报文错误计数:−IP:receivedmyownpacket:收到源地址是自己IP地址发送的报文。产生原因:出现二层环路。−Badpacke
瓦哥架构实战
·
2023-08-29 06:09
Ceph入门到精通
ceph
lvs
【Docker的使用基础】Mac下利用Docker安装Redis
python爬虫入门进阶❤️4.
Ceph
实战,从原理到实战应有尽有。
Ceph
实战
码农飞哥
·
2023-08-28 23:51
Java高并发编程入门
macos
docker
redis
【Docker的使用基础】Mac下利用Docker安装 Kafka
python爬虫入门进阶❤️4.
Ceph
实战,从原理到实战应有尽有。
Ceph
实战
码农飞哥
·
2023-08-28 19:29
Ceph实战
Java高并发编程入门
Docker
docker
macos
kafka
ceph
网络模块
代码入手方式:1.osd的网络通信messenger在old.h中定义,如下图所示2.然后查看cluster_messenger的创建。3.再来查看internal_messenger的由来,是osd构造函数赋值的。4.最后看看ms_cluster的创建,在osd初始化的时候创建的。以上,就是cluster_messenger是如何跟IP绑定的过程。5.然后通过这个messenger发送网络消息即
620T
·
2023-08-28 17:18
ubuntu机器重启后netplan命令丢失
机器重启后网卡不显示ip,netplan命令丢失,ifconfigeth0up无效,由于上不了网,无法通过网络在线安装包通过其他机器下在netplan.io包拷贝后安装报错,缺少python环境root@
ceph
-osd01
inner222
·
2023-08-28 07:21
ubuntu
linux
运维
ceph
-架构扩展
理论:
Ceph
是一个开源的、统一的分布式存储系统,设计初衷是提供较好的性能、可靠性和可扩展性。
嘿嘿龙帅
·
2023-08-28 05:15
ceph
架构
JVM实战(一): dump文件的产生以及执行shell脚本
1.dump文件产生1.1絮絮叨叨目前,公司使用的OLAP组件实现了k8s容器化如果使用宿主机磁盘存储日志,pod升级(本人是删除后重建)后,日志数据会丢失为了保证日志数据不丢失,专门配置了一个基于
ceph
晓之木初
·
2023-08-28 03:17
java相关
#
《深入理解Java
虚拟机》
java
架构扩展-
ceph
(1)
理论:
Ceph
是一个开源的、统一的分布式存储系统,设计初衷是提供较好的性能、可靠性和可扩展性。
努力买大G
·
2023-08-27 22:32
架构
ceph
Ceph
入门到精通-基于ECMP的多活负载均衡策略
本文简单介绍一下,如何基于ECMP,使用Quagga+LVS+Keepalived构建多活负载均衡方案1.背景介绍负载均衡,主要用于大规模分布式集群下,提供高性能服务。为了给负载均衡器提供高可用,一般利用主备或者主主模式实现。主备模式即只有主负载均衡器提供负载均衡功能,当主负载均衡器出现异常时,自动切换到备负载均衡器,继续提供负载均衡功能。主主模式(也称之为双活负载均衡),两个负载均衡器同时提供负
瓦哥架构实战
·
2023-08-27 03:19
ceph
负载均衡
运维
Ceph
入门到精通-Podman设置容器开机自启
步骤总结:1.启动一个容器#podmanrun-d--namewebhttpd2.查看该容器#podmanps3.每次都启动新容器方式创建servcie//--new参数,每次启动都删除旧容器,启动一个新容器#podmangeneratesystemd-n--new-fweb4.查看启动文件#cat/root/container-web.service5.将server文件保存在/etc/syst
瓦哥架构实战
·
2023-08-27 03:49
Ceph入门到精通
ceph
podman
Ceph
入门到精通-如何编译安装Quagga?
Quagga1.理论部分1.1软件简介Quagga中文翻译斑驴,是一种先进的路由软件包,提供一套基于TCP/IP的路由协议。1.2斑驴的应用场景–使得操作系统变成专业的路由–使得操作系统具有与传统路由通过路由协议直接对接1.3斑驴支持的路由协议–BGP–OSPF–RIP–IS-IS–MPLS–LDP–BFD–PIM-SSM1.4斑驴与传统路由的区别–传统路由以提供所有路由协议的过程程序的方式运行–
瓦哥架构实战
·
2023-08-27 03:48
Ceph入门到精通
ceph
yolov8实战之torchserve服务化:使用yolov8x来预打标
原始数据是在
ceph
上,比较直观的方式就是一张张读,然后一张张推理。
CodingInCV
·
2023-08-26 11:21
yolov7/8系列解读与实战
YOLO
pytorch
目标检测
深度学习
计算机视觉
Linux学习--
Ceph
部署
前期准备资源下载链接:https://pan.baidu.com/s/1Yof-X-fD8kYLSmLAWFo5Ug提取码:txj5环境准备主机名IP地址
ceph
1192.168.88.11/24
ceph
2192.168.88.12
丢爸
·
2023-08-25 20:39
linux
学习
ceph
Ceph
入门到精通-大流量10GB/s LVS+OSPF 高性能架构
LVS和LVS+keepalived这两种架构在平时听得多了,最近才接触到另外一个架构LVS+OSPF。这个架构实际上是LVS+Keepalived的升级版本,我们所知道LVS+Keepalived架构是这样子的:随着业务的扩展,我们可以对web服务器做水平扩展,以此来提高系统的处理能力。但是我们会发现,两台Director间始终只有一台是处于工作状态,而另一台处于不工作的备份状态,即使访问的流量
瓦哥架构实战
·
2023-08-25 05:14
Ceph入门到精通
ceph
lvs
架构
Ceph
入门到精通-大流量10GB/s支持OSPF(ECMP)-LVS 集群
Keepalived-LVS能够提高集群的高可用性并增加后端检测功能、简化配置,满足常规需求。但Keepalived-LVS集群中,同一个VIP只能由一台设备进行宣告,为一主多备的架构,不能横向拓展集群的性能,为此我们引入OSPF来解决该问题。OSPF(ECMP)ECMP(Equal-CostMultipathRouting)等价多路径,存在多条不同链路到达同一目的地址的网络环境中,如果使用传统的
瓦哥架构实战
·
2023-08-25 05:40
Ceph入门到精通
ceph
使用StorageClass动态创建pv
rook-
ceph
安装部署到位后,就可以开始来尝试使用StorageClass来动态创建pv了。
张兆坤的那些事
·
2023-08-23 15:30
ceph
kubernetes
kubernetes
rook-ceph
StorageClass
使用rook搭建
Ceph
集群
宿主机:MacBookPro(AppleM2Max)VMwareFusionPlayer版本13.0.2VM软硬件:ubuntu22.04.24核CPU,5G内存,40G硬盘*每台机器分配硬件资源很重要,可以适当超过宿主机的资源量,否则会导致各种问题IP和角色(163为master,其他为node):192.168.19.163k8smaster192.168.19.161k8sworker319
张兆坤的那些事
·
2023-08-23 15:58
ceph
kubernetes
ceph
kubernetes
rook-ceph
Kylin v10 编译安装
ceph
15.2.17
1.环境:
ceph
:octopus(15.2.17)OS:Kylin-Server-V10_U1-Release-Build02-20210824-GFB-x86_642.基础环境准备2.1配置软件源vim
牛角上的男孩
·
2023-08-23 12:54
云计算
kylin
ceph
smiley-http-proxy-servlet核心由httpclient改为okHttp
源组件有个问题,代理
ceph
文件系统时,文件名中包含+()这些符号,会拼接在请求路径上,正常应该unicode转码,但是在组件核心请求到
ceph
时,httpclient发送请求会在请求前自动解码+(%2B
打呼噜的狒狒
·
2023-08-22 06:22
http
网络协议
网络
proxy
无涯教程-PHP - File 函数
NameDefaultChangeableChangelogallow_url_fopen"1"PHP_INI_ALLPHP_INI_ALLinPHP<=4.3.4.PHP_INI_SYSTEMinPHP<6.Availablesin
cePH
P4.0.4
Hi无涯教程
·
2023-08-22 01:45
无涯教程
php
ceph
集群的扩容缩容
文章目录集群扩容添加osd使用
ceph
-deploy工具手动添加添加节点新节点前期准备新节点安装
ceph
,出现版本冲突
ceph
-deploy增加节点集群缩容删除osd删除节点添加monitor节点删除monitor
王哞哞哞哞
·
2023-08-21 18:38
ceph
ceph
单独配置
ceph
osd服务的coredump
前言coredump文件作用这里不多介绍,主要为了osd进程有bug导致进程crash了,然后抓取coredump后方便定位bug。配置一般可以在/etc/profile中用ulimit命令来打开系统所有用户的coredump:$cat/etc/profile...echo"/var/crash/core.%e.%p">/proc/sys/kernel/core_patternulimit-S-c
ypdai
·
2023-08-21 14:10
k8s rbd provider
问题创建好
ceph
集群后,在k8s是中创建好storageclass后.创建pvc居然不能自动创建pv.报如下错误failedtocreaterbdimage:executablefilenotfoundin
myonlyzzy
·
2023-08-21 11:10
UVa 247 Calling Circles
CallingCirclesIfyou'veseentelevisioncommercialsforlong-distan
ceph
onecompanieslately,you'venoticedthatmanycompanieshavebeenspendingalotofmoneytryingtoconvincepeoplethattheyprovidethebestserviceatthelow
c21c21
·
2023-08-21 04:56
ceph
集群和数据库到底是储存数据_区块链和数据库,技术到底有何区别?
点击上方"太一云"关注我们关于数据库和区块链,总会有很多的困惑。区块链其实是一种数据库,因为他是数字账本,并且在区块的数据结构上存储信息。数据库中存储信息的结构被称为表格。但是,区块链是数据库,数据库可不是区块链。他们虽然都是存储信息的,但是设计却完全不同,所以不可以互换。而且,这两者存在的目标也不同,所以对于很多人来说,他们不是很清楚为什么区块链是需要的,以及为什么数据库更适合存储某些数据。首先
weixin_39558221
·
2023-08-20 00:43
上一页
12
13
14
15
16
17
18
19
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他