E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Ceph块存储
如何测量进程级别或容器级别的 IO 延迟
因为:一些基于网络的的存储方案,如
Ceph
,天然地有不稳定性SSD/RAINController本身的不稳定性在Linux下,传统地,我们有iostat/sar等等工具可以看系统级、存储设备级的问题。
·
2023-09-26 12:22
Ceph
概述 、 部署
Ceph
集群 、
Ceph
块存储
这里写目录标题概述环境准备配yum源12ssh免密分发小脚本时间同步添加虚拟磁盘安装部署软件
ceph
-deploynode1安装
ceph
-deploy(部署
ceph
的一个python脚本)创建目录(目录名称可以任意
XUPT-BDAL-LAB-ML&OP
·
2023-09-26 12:52
分布式
运维
ceph
存储池pool操作
1、列出存储池
ceph
osdlspools2、创建存储池
ceph
osdpoolcreatepoolnamepg-numpgp-numreplicatedcrush-ruleset-nameexpected-num-objects
SkTj
·
2023-09-25 19:38
ceph
代码分析 读_BlueStore源码分析之BlockDevice
前言
Ceph
新的存储引擎BlueStore已成为默认的存储引擎,抛弃了对传统文件系统的依赖,直接管理裸设备,通过Libaio的方式进行读写。
马汝为
·
2023-09-25 15:18
ceph
代码分析
读
[元带你学NVMe协议] ZNS 架构实现 : 解决传统SSD问题的高性能存储栈设计
2.2ZNS的架构实现先看看支持zone存储的SMRHDD以及支持zonefs的nvmessd的整个存储栈形态其中对于
ceph
这样的应用来说bluestore或者Seastore这样的后端引擎是直接管理裸设备的
m0_29032027
·
2023-09-25 15:43
java
linux
运维
网易国产开源分布式存储系统——Curve
可应用于主流的云原生基础设施平台:对接OpenStack平台为云主机提供高性能
块存储
服务;对接Kubernetes为其提供RWO、RWX等类型的持久化存储卷;对接PolarFS作为云原生数据库的高性能存储底座
·
2023-09-25 11:26
ceph
运维操作-SCRUB
1.基本概念1.1什么是ScrubScrub是
Ceph
集群副本进行数据扫描的操作,用于检测副本间数据的一致性,包括scrub和deep-scrub。
lihanglucien
·
2023-09-25 07:56
k8s volume存储卷、PV、PVC和存储类
1.3举例1.3.1临时存储emptyDir类型1.3.2HOST级别hostPath类型1.3.3网络级别NFS类型1.3.4网络级别rdb类型1.3.5网络级别GlusterFS类型1.3.6网络级别
Ceph
FS
TimeRovers
·
2023-09-24 23:53
k8s
kubernetes
linux————
ceph
分布式部署
目录一、概述特点1、统一存储2、高扩展性3、可靠性强4、高性能组件1、Monitor2、OSD3、MOD4、Objet5、PG6、RADOS7.Libradio8.CRUSH9.RBD10.RGW11.
Ceph
FS
丗卅
·
2023-09-24 21:49
ceph
分布式
华为云Stack的学习(七)
八、华为云Stack存储服务介绍1.云硬盘EVS云硬盘(ElasticVolumeService,EVS),又名磁盘,是一种虚拟
块存储
服务,主要为ECS(ElasticCloudServer)和BMS(
C1yas0
·
2023-09-24 19:45
云计算
华为云
云计算
高级运维学习(九)
块存储
、文件系统存储和对象存储的实现
块存储
基础块设备存取数据时,可以一次存取很多。
.久一
·
2023-09-24 18:23
Linux
高级运维学习
学习
linux
运维
kubernetes
docker
容器
ceph
各类分布式文件系统的区别和概述 | HDFS、GFS、
Ceph
、TFS、Moosefs、IPFS等
文章目录参考分布式文件系统定义各类系统对比图各类文件系统简介shepdogshepdog基本架构
Ceph
FastDFSfastDFS介绍Trackerserver追踪服务器Storageserver储存服务器客户端
stone_fall
·
2023-09-23 23:56
#
分布式文件系统
分布式
文件系统
分布式文件系统对比与选型参考
、数据的存储方式:2、数据的读取速率3、数据的安全机制二、主流分布式文件系统介绍1.GFS(GoogleFileSystem)2.HDFS(HadoopDistributedFileSystem)3.
Ceph
4
草莓不苦
·
2023-09-23 23:55
运行环境
分布式存储
MinIO文件存储
从国内外这四个公有云厂商对象存储的描述,我们就能看出对象存储的几个特点:海量存储:一般
块存储
来说(公有云形态为云盘)体量如果能达到PB级别;但是对象存储的体量,PB就不够看了,至少都是EB的支持。
TROWS
·
2023-09-23 23:25
后端
java
ceph
osd 常见故障处理
如果
ceph
health或
ceph
-s返回的是健康状态,这意味着monitors形成了法定人数。如果monitor还没达到法定人数、或者monitor状态错误,要先解决monitor的问题。
大鱼民
·
2023-09-23 16:41
ceph
分布式存储搭建
服务三、安装OSD1.centos1、centos2、centos3、三个虚拟机各加一个磁盘2.热刷新磁盘并格式化3.创建OSD四、安装dashboard1.生成签名和创建安全认证2.启动服务五、创建
ceph
予安
·
2023-09-23 05:59
ceph
ceph
分布式存储
目录前言一、概述(一)、特点(二)、组件(三)、架构图二、搭建(一)、基础环境(二)、准备工作(三)、
ceph
安装(四)、集群构建(五)、dashboard安装(六)、
ceph
文件系统创建(七)、客户端挂载总结前言
SCL_78534660
·
2023-09-23 05:57
ceph
【python零基础入门学习】python进阶篇之时间表示方法和异常处理以及linux系统的os模块执行shell命令以及记账程序编写教学(一)
python运维脚本》:python运维脚本实践《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-09-23 01:27
python零基础入门
学习
python
开发语言
运维
【运维面试100问】(三)说说你在故障排除方面的经历
python运维脚本》:python运维脚本实践《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-09-23 01:23
linux
运维
学习
架构
v8引擎工作与“寄存器”的关系
寄存器是cpu为了提高性能开辟的一
块存储
空间,是个部件,可以理解为寄存器=有存储功能的触发器,每存的一行二进制串对应一个触发器,所以寄存器是N多个触发器组成的,一旦被命名为触发器这个词,我们都知道,速度嗷嗷的
运动程序员
·
2023-09-22 20:41
笔记
前端
Ceph
和Owncloud部署与使用
Ceph
和Owncloud部署与使用1.部署
ceph
集群(1)虚拟机基础配置在VMware中设置VMnet1的网络为仅主机模式,网段设置为203.0.113.0;VMnet8设置为NAT模式,网段设置为
白菜go
·
2023-09-22 19:31
ceph
分布式存储简介
Ceph
简介什么是分布式存储?
程序员面试吧
·
2023-09-22 16:21
小米云原生文件存储平台化实践:支撑 AI 训练、大模型、容器平台多项业务
在训练平台的存储方案中,小米曾尝试了多种不同的存储方式,包括
Ceph
+NFS、HDFS和对象存储挂载等。然而,这些不同的存储方式导致了数据冗余和维护管理成本的增加,同时也带来了扩展性和性能方面的问题。
·
2023-09-22 15:12
人工智能文件系统大数据机器学习
ceph
分布式存储部署
特点1、统一存储虽然
ceph
底层是一个分布式文件系统,但由于在上层开发了支持对象和块的接口。所以在开源存储软件中,能够一统江湖。至于能不能千秋万代,就不知了。2、高扩展性扩容方便、容量大。
lsqaa
·
2023-09-22 07:55
ceph
ceph
分布式存储
目录一、概述1、特点2、组件3、架构图二、分布式部署1、环境拓扑2、实验准备3、
ceph
安装安装初始化monitor同步管理信息安装mgr(管理守护进程)安装rgw创建mds服务OSD安装4、dashboard
黑影680
·
2023-09-22 07:50
ceph
分布式
ceph
分布式存储
ceph
特点
Ceph
项目最早起源于Sage就读博士期间的工作(最早的成果于2004年发表),并随后贡献给开源社区。在经过了数年的发展之后,目前已得到众多云计算厂商的支持并被广泛应用。
载雨舟
·
2023-09-22 04:44
ceph
分布式
Ceph
(S3)对象存储通过生命周期管理实现存储的智能分层
前提条件本文假设您部署了一个
Ceph
集群,其中包含2个RGW,并创建了所需的RGW池,例如buckets.data、buckets.index、buckets.non-ec、rgw.logrgw.meta
新钛云服
·
2023-09-21 23:24
大数据
java
python
linux
数据库
ZFS了解
存储数据的管理通常涉及两个方面:对一个或多个
块存储
设备(如硬盘驱动器和SD卡)进行物理卷管理,并将它们组织成操作系统所看到的逻辑块设备(通常涉及卷管理器、RAID控制器、阵列管理器或合适的设备驱动程序)
动态一时爽,重构火葬场
·
2023-09-21 12:49
io
文件系统
自定义及发布一个webservice服务
服务Endpoint.publish()发布(默认对public修饰的方法进行发布)-通过wsimport生成本地代理来访问自己发布的webservicewsimport1.发布自定义webservi
ceph
one.javapackagews.myWeb
weixin_34278190
·
2023-09-21 07:03
java
移动开发
开发工具
高级运维学习(八)
Ceph
概述与部署
ceph
概述
ceph
可以实现的存储方式:
块存储
:提供像普通硬盘一样的存储,为使用者提供“硬盘”文件系统存储:类似于NFS的共享方式,为使用者提供共享文件夹对象存储:像百度云盘一样,需要使用单独的客户端
Ceph
.久一
·
2023-09-21 06:14
Linux
高级运维学习
运维
学习
ceph
linux
服务器
从B-21轰炸机看美空军作战战略趋势
(U.S.AirFor
ceph
oto)(一)B-21开发进展(二)B-21性能研判声明:公众号转载的文章及图片出于非商业性的教育和科研目的供大家参考和探讨,并不意味着支持其观点或证实其内容的
renhongxia1
·
2023-09-21 00:11
人工智能
轰炸机
Ceph
遇到的错误
错误1
ceph
_deploy.monmon.
ceph
-mon-2monitorisnotyetinquorum移除监控节点上次初始化创建的文件
ceph
-deploymondestroy
ceph
-mon-node1
河码匠
·
2023-09-20 15:07
【运维面试100问】(二)你最擅长什么?对某某擅长吗?---请设计一个符合公司使用的lvs架构
python运维脚本》:python运维脚本实践《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-09-20 06:56
linux
运维
学习
lvs
架构
Ceph
数据保护(多副本和纠删码)
文章目录一、什么是分布式存储?二、什么是多副本和纠删码技术?三、多副本和纠删码对存储节点有什么要求?四、什么是M+N:1纠删码?五、多副本和纠删码哪个好,应该如何选择?六、应该具体选择什么规格的纠删码和多副本?一、什么是分布式存储?介绍多副本和纠删码之前,我们先来说一下分布式存储。分布式存储是不同于传统集中式存储的的一种架构,很多时候也被称为SDS软件定义存储(SoftwareDefinedSto
gengduc
·
2023-09-20 05:27
分布式存储Ceph
ceph
多副本
纠删码
开源分布式存储系统(HDFS、
Ceph
)架构分析
文章目录中间控制节点架构-HDFSNameNode节点分析DataNode节点分析SecondNameNode节点分析Client分析完全无中心架构-
Ceph
Ceph
Monitor分析
Ceph
OSD分析
gengduc
·
2023-09-20 05:25
分布式存储Ceph
开源
分布式
hdfs
ceph
架构
k8s储存卷
卷的类型In-Tree存储卷插件◼临时存储卷◆emptyDir◼节点本地存储卷◆hostPath,local◼网络存储卷◆文件系统:NFS、GlusterFS、
Ceph
FS和Cinder◆块设备:iSCSI
inner222
·
2023-09-20 05:49
kubernetes
容器
云原生
2021-06-28
威廉和凯特,在菲利普亲王葬礼结束后,不与哈里说话,因为怕泄漏WilliamandKaterefusedtotalktoHarryafterPrin
cePh
ilip’sfuneral剑桥公爵和公爵夫人,萨塞克斯公爵
潇洒二爷
·
2023-09-19 20:44
Loki 日志系统分布式部署实践四 minio
说明loki支持文件系统、对象存储、NoSQL,对象存储大多都要使用公有云,但所幸的是它支持了awss3兼容的存储,那么这里就可以使用
ceph
rgw和minio,本篇部署minio说明对象存储在云环境下是一种基础设施
kong62
·
2023-09-19 18:49
9月11-12日上课内容 第二章 GFS 分布式文件系统
本章结构前言存储
块存储
硬盘文件存储nfslvmraidext4ext3centos6xfscentos7对象存储GFS
Ceph
fastdfs云端OSS阿里云存储url链接S3亚马逊url链接switch
m0_70766460
·
2023-09-19 15:02
服务器
运维
分布式
GlusterFS
分布式文件系统
ceph
安装
当然在开源界已经有好几款比较成熟的产品,比如
Ceph
,GlusterFS,TFS,HDFS等。GlusterFS,
ceph
在最近几年发展火热。
jerry的技术与思维
·
2023-09-19 10:22
Python入门(八):对象类型之文件
文件1.文件和文件对象1.1基础知识1.2文件的基本操作1.2.1open()函数详解1.2.2文件的常见运算1.2.3使用文件的注意2.文件使用实例2.1open函数存储文件2.2pickle模
块存储
lyl1621
·
2023-09-19 09:03
Python新手入门
Python文件
文件处理
Ceph
入门到精通-
ceph
pool 删除导致 misplaced 的原因
misplaced的原因
Ceph
中的misplaced对象是指将对象(或对象的副本)存储在错误的位置上,这可能会导致性能下降或数据不一致的问题。
瓦哥架构实战
·
2023-09-19 04:47
Ceph入门到精通
ceph
Grafana 备份恢复教程
原文链接:https://fuckcloudnative.io/posts/how-to-back-up-all-of-your-grafana-dashboards/目前我们k8s集群的Grafana使用
ceph
米开朗基杨
·
2023-09-18 19:24
【自律】如何长期自律-迎难而上
python运维脚本》:python运维脚本实践《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-09-18 15:00
人生闲谈
学习
【Doris全面解析】存储层设计介绍2——写入流程、删除流程分析
本文主要通过阅读DorisBE模块代码,详细分析了DorisBE模
块存储
层的实现原理,阐述和解密Doris高效的写入、查询能力背后的核心技术。
ApacheDoris
·
2023-09-18 08:36
大数据
分布式
数据库
python
mysql
区块链(1):区块链简介
它从一个单独的块开始,称为genesisblock【创世区块】2区块链BLOCK的类的定义第一个区块叫做Genesis[创世]block,每个
块存储
以下信息:IndexTimestampHashPreviousHashDataNonce
不死鸟.亚历山大.狼崽子
·
2023-09-18 07:32
区块链
区块链
合肥先进光源高速数据采集网的规划
除了这些产生海量数据的设备,服务器集群内部的数据,比如分布式磁盘阵列内部的传输数据,比如
ceph
、iSCSI、NFS等网络挂载的磁盘数据,这些海量数据都没有必
USTC-lup
·
2023-09-17 07:15
合肥先进光源
网络
OpenStack架构中核心的组件及其作用
(2)Cinder——Cinder组件主要的用途是提供
块存储
服务,最核心的两个部分是Scheduler和CinderVolume。当
大东子来搬砖
·
2023-09-17 06:31
openstack
几款常见存储系统的对比分析
一、主流存储系统介绍1.NetAppNetApp系统为各种不同平台上的用户提供了对全部企业数据的无缝访问,NetApp全系列光纤网络存储系统在文件访问方面支持NFS和CIFS,在
块存储
访问方面支持FCP
虹科云科技
·
2023-09-17 03:45
WEKA
存储系统
云存储
分布式存储
DNN
WEKA
【运维面试100问】(一)打包了一个镜像推送上去harbor,推不上是什么原因?
python运维脚本》:python运维脚本实践《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《
ceph
向往风的男子
·
2023-09-16 23:13
linux
运维
上一页
14
15
16
17
18
19
20
21
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他