E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
----Ceph
托福不过百斩获5所美国大学生物化学Ph.D全奖
GPA3.7,T92,GRE323天津大学,生物工程收获全奖offerUCLAPh.DinChemistryandBiochemistryUVAPh.DinBiochemistryRi
cePh
.DinBiochemistry
至领留学
·
2023-04-07 22:11
ceph
adm离线部署及curushmap
raid5,数据盘直通或raid0,电口为集群网络,用作osd守护进程之间的复制、恢复、心跳,光口为存储网络,用作对外存储流量#所有节点:##设置主机名:hostnamectlset-hostname
ceph
1hostnamectlset-hostname
ceph
2
查士丁尼·绵
·
2023-04-07 20:58
openstack
云计算
分布式存储技术(上):HDFS 与
Ceph
的架构原理、特性、优缺点解析
HDFS是Hadoop下的分布式文件系统技术,
Ceph
是能处理海量非结构化数据存储的对象存储技术,本文将对他们的架构原理、特性和优缺点做介绍。
星环科技
·
2023-04-07 13:04
hdfs
分布式
ceph
Ceph
存储实战 - 对象存储
此过程需要另外准备一台服务器
ceph
-rgw具体过程可参照我前面两篇博客,此处不再赘述,接下来我们继续在node1节点的操作在/etc/
ceph
目录下操作安装radows网关新建网关实例
ceph
-deployinstall
mengchaoc
·
2023-04-07 13:34
三
Ceph
集群搭建
Ceph
集群集群组件
Ceph
集群包括
Ceph
OSD,
Ceph
Monitor两种守护进程。
假面生
·
2023-04-07 12:32
存储
linux
Ceph
简介:
Ceph
是什么
Ceph
是一种分布式存储系统,所谓分布式,指的是
Ceph
可以部署在多台服务器上,通过多台服务器并行处理来对外提供高性能的读写块。
付少华
·
2023-04-07 12:31
分布式
ceph
概述
1、什么是
ceph
?
Ceph
是一个开放、自我修复和自我管理的统一分布式存储系统。具有高扩展性、高性能、高可靠性的优点。2、为什么要使用
ceph
?
ceph
目前已得到众多云计算厂商的支持并被广泛应用。
songtaiwu
·
2023-04-07 12:29
openstack
kubernetes
docker
容器
ceph
怎么搭建文件存储_SUSE专家谈
Ceph
落地之最佳实践
软件定义存储业内的重要开源项目
Ceph
可以说是目前业内最流行,应用最广泛的开源软件定义存储。
程序员良许
·
2023-04-07 12:29
ceph怎么搭建文件存储
分布式
ceph
完整存储理论 -01
分布式存储
ceph
一、
ceph
介绍1.1、
ceph
是什么
ceph
一个统一的、分布式的存储系统,设计初衷是提供较好的性能、可靠性和可扩展性。
FikL-09-19
·
2023-04-07 12:56
ceph分布式存储
分布式
ceph
磁盘集群
SAN存储区域网络[iSCSI...]提供块共享4)分布式存储备注:文件系统(ext3,ext4,xfs,ntfs,fat32)常见的分布式存储:HadoopLustreFastDFSGlusterFS
Ceph
迎浪而上,逆浪而行
·
2023-04-07 12:25
负载均衡
Ceph
扩容节点(新服务器)
Ceph
扩容节点(新服务器)1.修改所有节点hosts文件,添加新增节点192.168.1.33node4:[root@vm30cluster]#cat/etc/hosts127.0.0.1localhostlocalhost.localdomain192.168.0.30node1192.168.0.31node2192.168.0.32node3192.168.0.33node42
jjxws
·
2023-04-07 12:54
ceph
分布式存储
Ceph
测试系列(一):
Ceph
应用方案的服务器硬件选型 (2 of 2)
一、前言redhat官网给出不同应用场景时,其推荐的
Ceph
集群服务器硬件配置(包括CPU/Memory/Disk/Network)。仅作为服务器配置选择时参考,不做推荐使用。
Yannick_J
·
2023-04-07 12:23
Ceph
CEPH
分布式存储搭建(对象、块、文件三大存储)
集群配置信息:安装的
ceph
版本:
ceph
version12.2.12luminous配置所需源的地址wget-O/etc/yum.repos.d/CentOS-Base.repohttp://mirrors.aliyun.com
jerry-89
·
2023-04-07 12:23
ceph
世界500强是如何解决千亿流量留存问题的,《
Ceph
分布式存储架构》-使用CentOS 7部署
Ceph
分布式存储架构-为他们解决什么问题。
文章目录一、
Ceph
概述1.1
Ceph
介绍1.2
Ceph
各组件介绍二、
ceph
集群部署实验2.1配置
Ceph
安装源2.2在xuegod63上安装
ceph
-deploy管理工具2.3离线安装
ceph
2.4
极客事纪
·
2023-04-07 12:21
程序员
Linux
码农
ceph
linux
运维
云计算
自动化运维
分布式存储之
ceph
部署搭建
块存储:典型设备;磁盘阵列,硬盘作用:主要是将裸磁盘空间映射给主机使用,磁盘阵列(内含多块硬盘)做RAID操作或者LVM操作,逻辑划分出N块Logic盘并映射给主机使用,操作系统会识别到N块硬盘,但是无法感知到底是逻辑盘还是物理盘,所以还是会对其进行分区和格式化(无法共享数据)。每块逻辑盘实际上是由多块硬盘共同组成,在读写数据的时候,几块物理硬盘可以并行寻址和操作,大大提高了IO效率。优点:对块磁
9a9b3cafa4a0
·
2023-04-07 11:08
日常
local/Homebrew/Library/Taps/homebrew/homebrew-core/Formula/
[email protected]
文件注释brewinstall--build-from-sour
ceph
p
江河湖海琴瑟琵琶
·
2023-04-07 09:51
Ceph
alometric Landmark Detection by Attentive Feature Pyramid Fusion and Regression-Voting阅读笔记
代码:https://github.com/runnanchen/Anatomic-Landmark-Detection自己改了一点的:https://github.com/Nightmare4214/Anatomic-Landmark-Detection摘要不同的landmark需要不同级别的分辨率和语义,因此作者提出了一种特征金字塔融合注意力模块(attentivefeaturepyramid
Nightmare004
·
2023-04-07 08:14
深度学习
深度学习
人工智能
机器学习
常见问题汇总(2)
关于存储的一些问题
Ceph
增加osd的方法如果在部署环境前无法识别硬盘,但是环境又要求存储必须为
ceph
,可以用如下方法:部署模式按
ceph
走,在磁盘划分的时候根据实际情况划分环境部署成功且各组件正常工作
weixin_34166847
·
2023-04-07 06:20
主流分布式存储技术对比分析:GFS、HDFS、GlusterFS、
Ceph
、Swift
引言目前市面上各个厂家的分布式存储产品五花八门,但是如果透过产品本身的包装看到其背后的核心技术体系,基本上会分为两种架构,一种是有中心架构的分布式文件系统架构,以GFS、HDFS为代表;另外一种是完全无中心的分布式存储架构,以
Ceph
米朵儿技术屋
·
2023-04-06 19:18
综合技术探讨及方案专栏
分布式
hdfs
ceph
ceph
存储原理_
Ceph
存储引擎BlueStore简析
前文我们创建了一个单节点的
Ceph
集群,并且创建了2个基于BlueStore的OSD。
weixin_39527911
·
2023-04-06 14:53
ceph存储原理
ceph
bluefs 写操作 源码解析
ceph
bluefs的写操作是由RocksDB的Write之类的操作而触发的,其最终经过层层调用,最后会调用bluefs提供的一些列精简过的接口。
帮我起个网名
·
2023-04-06 14:20
ceph
ceph
bluefs
ceph
bluefs 日志压缩解析
bluefs的操作大量增加时,日志也会增加,从而增加占用空间,由于文件系统的元数据在内存中都有记录,且内存中的元数据都是非重复的,因此可以通过遍历元数据,将元数据重新写到日志文件当中,即可实现日志的压缩,具体是_compact_log_async函数来实现的,其实现如下:old_log_jump_to=log_file->fnode.get_allocated();//获取已经分配的空间,这些空间
帮我起个网名
·
2023-04-06 14:20
ceph
ceph
bluefs
bluefs
所以
ceph
通过一个简单文件系统bluefs来实现rocksenv的接口classBlueFS{public:
Ceph
Context*cct;#可以看到bluefs中支持下面这三种块设备staticconstexprunsignedMAX_BDEV
tiantao2012
·
2023-04-06 14:19
ceph
Ceph
BlueStore Allocator
文章目录疑问1:为什么有了FreelistManager还需要Allocator问题澄清疑问2:逻辑段和位图区别DataStructureInitUsageBlueFSBlueStoreConfigSummary疑问1:为什么有了FreelistManager还需要Allocator问题澄清1、BlueFS不用FreelistManager管理块设备空间的使用情况,而是将其持久化记录在文件系统的日
勤学-365
·
2023-04-06 14:38
ceph核心理论
Ceph
rgw中的元数据组织形式及存储结构分析
本来不想再写
Ceph
相关的文章了,最近在做
ceph
元数据优化研究及架构,整体思路是:将rados作为数据存储引擎,构建分布式元数据集群来管理元数据,如:将rgw或者fs相关的元数据从
ceph
的元数据池中抽取出来
lizhongwen1987
·
2023-04-06 14:32
存储
分布式
对象存储
Ceph
BlueStore:BlueFS元数据恢复replay流程详解 + 元数据encode/decode
文章目录引言BlueFS本文结论BlueFS元数据replay代码BlueFS内存元数据replay代码函数入口:BlueFS::mount回放superblock:BlueFS::_open_super回放journal:BlueFS::_replay元数据encode/decode函数encodedecode参考文献引言BlueFSBlueFS用来存储RocksDB相关的file文件,在故障时
easonwx
·
2023-04-06 14:57
Ceph
BlueStore
分布式
云计算
linux
大数据
Ceph
iSCSI Gateway:架构原理详解
文章目录为什么
Ceph
需要iSCSI?
Ceph
架构
Ceph
在应用场景的局限性局限有哪些?为什么存在局限?如何解决局限?什么是iSCSI?
easonwx
·
2023-04-06 14:56
Ceph
iSCSI
Gateway
分布式
gateway
linux
云计算
Ceph
RBD:条带(stripe)详解
Ceph
RBD如何使用条带?
easonwx
·
2023-04-06 14:56
Ceph
RBD
分布式
linux
云计算
大数据
Ceph
RBD:创建image + image元数据详解
{offset_idx}元数据汇总创建卷流程引言在
Ceph
RBD中,image是一个对外提供的逻辑概念,image由数据和元数据组成,数据和原数据都存储在底层RADOS对象中。
easonwx
·
2023-04-06 14:26
Ceph
RBD
分布式
linux
云计算
Ceph
RBD:克隆 + 克隆卷元数据/数据IO详解
文章目录引言克隆概述本文结论克隆的元数据结构创建卷vol_0创建快照vol_0_snap_0创建克隆卷vol_0_snap_0_clone_0克隆卷元数据克隆卷的元数据有哪些?如何找到clone卷对应的原卷?如何找到clone卷对应的快照?如何通过原卷找到clone卷?主要元数据总结创建clone卷流程克隆卷数据创建卷vol_1,写入8M数据创建快照vol_1_snap_0创建克隆卷vol_1_s
easonwx
·
2023-04-06 14:26
Ceph
RBD
分布式
云计算
linux
Ceph
BlueStore:BlueFS架构介绍 +元数据详解
文章目录概述BlueStore数据存储为什么需要BlueFS?BlueFS与RocksDB交互RocksDB数据文件RocksDB数据在BlueFS中存储BlueFS持久化元数据元数据组织结构元数据类详解bluefs_extent_t(data)bluefs_fnode_t(file)bluefs_super_t(superblock)bluefs_transaction_t(journal)Bl
easonwx
·
2023-04-06 14:15
Ceph
BlueStore
分布式
云计算
linux
大数据
数据库
【
ceph
】什么是
Ceph
?------(MinIO和
ceph
的区别|GFS(GlusterFS)、MFS、
Ceph
、Lustre|文档)
目录什么是
Ceph
?简介什么是块存储、文件存储和对象存储以及区别?
bandaoyu
·
2023-04-06 12:31
存储
ceph
分布式
2022-07-13极简医学——脑病
脑病En
ceph
alopathy脑病,是一种以觉醒受损、注意力不集中、定向障碍为特征的全面型认知障碍的临床综合征。
咏而归_3a57
·
2023-04-06 05:34
ceph
后端存储引擎
现在是2020年4月,
ceph
的发展已经到了BlueStore替代FileStore。
running_sheep
·
2023-04-06 04:35
Ceph
Luminous 12 添加/删除/更换 OSD 详解
目录1.OSD介绍2.手动操作2.1手动删除OSD2.1.1把OSD踢出集群2.1.2停止OSD2.1.3删除OSD2.1.3.1
Ceph
Luminous及之后版本操作2.1.3.2
Ceph
其他版本操作
zzboat0422
·
2023-04-06 03:34
ceph
linux
ceph
存储
使用离线源部署
ceph
所有
Ceph
集群都需要至少一个monitor,以及至少与集群中存储的对象副本一样多的OSD。引导初始monitor是部署
Ceph
存储集群的第一步。
weixin_46425916
·
2023-04-06 03:00
运维
linux
安装
ceph
dashboard
安装包yuminstall
ceph
-mgr-dashboard启用模块
ceph
mgrmoduleenabledashboard有可能需要强制启动
ceph
mgrmoduleenabledashboard-
CooperXJ
·
2023-04-06 03:26
ceph
运维
ceph
运维
ceph
n 版本 iops 测试
目的
ceph
iops测试当前使用中的iops限制方法libvirt库,支持qemukvm(本文不再进行测试)
ceph
新版本提供的iops限制有两种方法librbd库kernel两种本文主要测试两者区别及可行性信息软件版本
Terry_Tsang
·
2023-04-06 03:23
linux
ceph
手动部署
ceph
环境说明 (luminous 版)
环境说明CentOSLinuxrelease7.2(Core)主机名客户连接数据同步monaddrdataaddrosdjournalosddisk
ceph
svr-128040xx.199.128.40xxx
Terry_Tsang
·
2023-04-06 03:23
mon
ceph
mon
ceph
osd
mgr
Ceph
整体架构
1.
Ceph
架构#1.1
Ceph
接口
Ceph
支持三种接口:Object:有原生的API,而且也兼容Swift和S3的APIBlock:支持精简配置、快照、克隆File:Posix接口,支持快照1.2
Ceph
qq_42533216
·
2023-04-06 03:19
ceph
ceph
在龙芯3A4000上移植
ceph
15.2.13
记录一次龙芯移植,当初花了我很多时间,移植
ceph
推荐使用新一点的系统,不然会缺少很多依赖包。我使用的系统是银河麒麟v10服务器版(龙芯),所以打包出来的是rpm包。
fangjiaqi_hz
·
2023-04-06 03:18
linux
ceph
ceph
部署和使用详细教程
一、
ceph
介绍1、
ceph
起源
Ceph
项目最早起源于Sage就读博士期间的工作(最早的成果于2004年发表),并随后贡献给开源社区。
大虾别跑
·
2023-04-06 03:47
linux
ceph
分布式
云计算
centos7部署
ceph
+dashboard(nautilus)
前言
ceph
测试环境的搭建基本环境物理环境:VmwareWorkstaion系统版本:Centos-7.9-Minimal两个osd节点添加一块虚拟磁盘,建议不小于20Giphostnameservices192.168.150.101
ceph
-admin
lvbibir
·
2023-04-06 03:45
linux
服务器
运维
centos
几个
Ceph
性能优化的新方法和思路
0.常规的
Ceph
性能优化方法(1).硬件层面硬件规划:CPU、内存、网络SSD选择:使用SSD作为日志存储BIOS设置:打开超线程(HT)、关闭节能、关闭NUMA等(2).软件层面LinuxOS:MTU
架构师成长营
·
2023-04-06 03:08
Ceph
分布式存储的搭建(增加mon节点、模拟osd节点故障恢复)
文章目录一、
Ceph
分布式存储1.1、
Ceph
文件系统简述1.2、
Ceph
的优点二、
Ceph
架构和名称解释2.1、
Ceph
架构2.2、
Ceph
集群组件三、
Ceph
的存储过程四、
Ceph
搭建过程4.1、环境准备
诸葛钢铁云
·
2023-04-06 03:08
存储
ceph
部署踩坑——OSD服务无法启动
前话:部署
ceph
时,所有OSD节点的服务启动报错,无法正常启动服务。
小黑_深呼吸
·
2023-04-06 03:06
ceph
ceph
运维
【
Ceph
】
Ceph
介绍、原理、架构
目录理解
Ceph
的三种存储接口:块设备、文件系统、对象存储干货|非常详细的
Ceph
介绍、原理、架构1.
Ceph
架构简介及使用场景介绍1.1
Ceph
简介1.2
Ceph
特点1.3
Ceph
架构1.4
Ceph
核心组件及概念介绍
bandaoyu
·
2023-04-06 03:03
存储
ceph
java
开发语言
后端
ceph
基础架构详解
1.存储分类:直连式存储:U盘硬盘(本地存储:本地存储的本地的文件系统,不能再网络上用.)区域存储网络:专用存储网络(接交换机形成专用的存储网络)SAN==》对于稳定性要求比较高的:金融/银行网络附加存储:对外服务by网络,任何设备都可以访问2.分布式存储(是一个集群的概念)2.1即是通过网络将数据分散在多台独立的设备上.分布式存储系统的特性:1.可扩展性2.低成本高性能3.易用易管理2.2存在第
黑猫警张Evans
·
2023-04-06 03:02
ceph
网络
服务器
分布式
龙芯
Ceph
集群手动部署(LoongArch架构、
Ceph
N版、手动部署MON、OSD、MGR、Dashboard服务)
基础环境信息CPU:龙芯3C5000L×4硬盘:一块256的nvme用于安装操作,3块2T的HDD盘用作
Ceph
存储盘。
动感超人不会飞~
·
2023-04-06 03:00
linux
从零开始安装
Ceph
分布式存储|Ubuntu环境
操作系统:Ubuntu14.04.3
Ceph
版本号:HammerV0.94.5设备信息本安装教程假设有4台服务器(或者虚拟机),1台作为管理节点,另外3台作为存储节点。
SunnyZhang的IT世界
·
2023-04-06 01:08
上一页
21
22
23
24
25
26
27
28
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他