E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Ceph
【
ceph
】对象存储 - 使用python管理bucket
简介:用python管理对象存储的bucket,创建bucket、查看bucket,上传文件、删除文件;地址:access_key='OAOGLIF4DWUUXJGKPJ6J'secret_key='kJ3SyUCZM4dfRml6Fue6OjvB1WAKTAvLTnirWfYE'ip='10.10.10.27'port=7480bucket='First-bucket'脚本:#_*_coding
小醉90s
·
2023-04-05 16:28
Fluid — 云原生环境下的高效“数据物流系统”
Ceph
、GlusterFS、HDFS都会被广泛使用
bv2215
·
2023-04-05 08:26
程序员
架构
面试
K8s集群中部署KubeSphere
K8s集群中部署KubeSphere在k8s集群中部署kubesphere需要先创建一个名为managed-nfs-storage的storageclass,这里我用了最简单的nfs方式,当然也可以用
ceph
上海_运维_Q先生
·
2023-04-05 07:08
kubernetes
docker
容器
Thanos工作原理及组件简介
对象存储可以是每个云提供商提供的对象存储也可以是
ceph
、rook或minio这样的解决方案。工作原理Thanos和Prometheus并肩作战,从Pro
东风微鸣
·
2023-04-05 05:20
kubernetes
云原生
juicefs对接K8S和
ceph
集群对象存储作为SC后端存储
1
ceph
启用对象存储1.1安装
ceph
对象存储
ceph
管理节点的工作目录下,给
Ceph
对象网关节点安装
Ceph
对象所需的软件包。
cloud_engineer
·
2023-04-05 02:41
kuberenetes高级应用
kubernetes
ceph
容器
juicefs
k8s rbd 后端存储
githubyaml克隆地址:https://github.com/kubernetes-retired/external-storage/tree/master/
ceph
/rbd/deploy/rback8s
cloud_engineer
·
2023-04-05 02:10
ceph
后端
kubernetes
docker
常见开源分布式存储系统
系统整体对比对比说明/文件系统TFSFastDFSMogileFSMooseFSGlusterFS
Ceph
开发语言C++CPerlCCC++开源协议GPLV2GPLV3GPLGPLV3GPLV3LGPL
罗亚方舟
·
2023-04-05 02:19
java技术
前端
javascript
vue.js
【
ceph
】分布式存储
ceph
1块存储,文件存储,对象存储1.1简介文件存储:分层次存储,文件存储在文件夹中;访问文件时系统需要知道文件所在的路径。举例:企业部门之间运用网络存储器(NAS)进行文件共享。块存储:将数据拆分成块,并单独存储各个块,块是一段标准长度(块大小)的字节或比特。举例:可用于绝大部分通用业务场景下的数据存储。对象存储:扁平结构,数据会被分解为称为“对象”的离散单元,并保持在单个存储空间中;通过API接口供
qq_37717687
·
2023-04-05 01:07
ceph
分布式
网络
Ceph
系列01-
Ceph
简介
Ceph
的基本概念介绍和入门知识储备。1、
ceph
简介
Ceph
是一个开源项目,它提供软件定义的、统一的存储解决方案。
Ceph
是一个可大规模扩展、高性能并且无单点故障的分布式存储系统。
tinychen777
·
2023-04-05 01:06
Devops
ceph
全能成熟稳定开源分布式存储
Ceph
破冰之旅-上
文章目录概述定义传统存储方式及问题优势生产遇到问题架构总体架构组成部分CRUSH算法数据读写过程CLUSTERMAP部署部署建议部署版本部署方式
Ceph
adm部署前置条件安装
CEPH
ADM引导新的集群安装命令概述定义
IT小神
·
2023-04-05 01:29
运维
分布式
开源
分布式
ceph
【
ceph
】
ceph
学习:浅析开源项目之
Ceph
--研读
目录1
Ceph
概述2核心组件3IO流程4IO顺序性5PG一致性协议5.1StateMachine5.2FailoverOverview5.3PGPeering5.4Recovery/Backfill6引擎概述
bandaoyu
·
2023-04-05 01:49
存储
ceph
分布式
分布式开源存储架构
Ceph
概述
文章目录概述什么是
ceph
?
MyySophia
·
2023-04-05 01:37
#
k8s
虚拟化技术
分布式
开源
架构
《Nat Med》:单纯疱疹病毒性脑炎与SNORA31罕见突变相关
杂志上发表题为HumanSNORA31variationsimpaircorticalneuron-intrinsicimmunitytoHSV-1andunderlieherpessimplexen
ceph
alitis
ResearchGate_
·
2023-04-04 16:13
SUSE Enterprise Storage delivers best
Ceph
FS benchmark on Arm
SUSE企业存储在Arm上提供最佳
Ceph
FS基准自2006年推出以来,
Ceph
主要用于性能不是最关键方面的容量密集型用例。
QTM_Gitee
·
2023-04-04 06:30
#
Ceph
分布式存储
arm
ceph
suse
k8s中emptydir、hostpath、localvolume的区别
目前主流的两个容器集群存储解决方案是
ceph
和glusterfs,二者都是典型的网络
唐僧爱程序
·
2023-04-04 03:47
#
Kubernetes
kubernetes
分布式存储
Ceph
RBD-Mirror 灾备实践
1.说明介绍继上次分享的《分布式存储系统
Ceph
架构及使用场景解析》和《分布式存储
Ceph
之PG状态详解》,这次分享《分布式存储
Ceph
块存储灾备方案》。
糖糖糖糖糖糖糖糖糖糖糖糖糖糖糖糖糖糖
·
2023-04-04 03:13
自身免疫性脑炎 |A clinical approach to diagnosis of autoimmune en
ceph
alitis自身免疫性脑炎的临床诊断方法
文献出处:作者:GrausF,TitulaerMJ,BaluR,etal.标题:Aclinicalapproachtodiagnosisofautoimmuneen
ceph
alitis.杂志:LancetNeurol
persistencer
·
2023-04-04 02:27
Ceph
之对象存储
所以任何数据都可以存入对象服务器,如图片、视频、音频等2
Ceph
对象存储的构成RGW全称为RadosGateWay,是
Ceph
对象存储网关,用于向客户端应用程序提供存储界面,提供RestFulAPI接口
Frank_弗兰克
·
2023-04-03 19:57
SPDK对接
Ceph
性能优化
关键词:SPDK、NVMeOF、
Ceph
、CPU负载均衡SPDK是intel公司主导开发的一套存储高性能开发套件,提供了一组工具和库,用于编写高性能、可扩展和用户态存储应用。
天翼云开发者社区
·
2023-04-03 16:58
云计算
网络
java
安全
开发语言
云计算
Ceph
分布式存储系列(六):对象存储、块存储、文件存储的区别和优缺点
承接上文
Ceph
分布式存储系列(一):
Ceph
工作原理及架构浅析梳理分布式存储总体分为对象、块、文件三种存储类型,且
ceph
同时支持这三种存储类型,那么这里再简单谈一下三种存储类型的差异点及各自优势和适用环境
Echo&.
·
2023-04-03 11:17
Ceph
服务器
分布式存储
ceph
运维
Kubernetes中快速部署基于Rook-
Ceph
集群的分布式块存储
目录Rook安装下载Rook安装文件配置更改部署rook创建
ceph
集群配置更改创建
Ceph
集群*安装
ceph
snapshot控制器安装
ceph
客户端工具部署
ceph
-tools查看mgrservice
Ceph
dashboard
常鱼
·
2023-04-03 09:26
分布式存储
k8s
linux
运维
服务器
kvm安装centos7_ProxmoxVE 之 5.3集群安装及使用
ceph
(微信号:yuweibing7803,公众号:Openstack私有云)PVE5.3版本对于磁盘的管理,包括对分布式存储
ceph
的支持据说都更加友好了。
weixin_39632212
·
2023-04-03 08:44
kvm安装centos7
Ceph
对象存储部署
Ceph
对象存储部署与使用1.安装client操作系统(1)虚拟机基础设置在VMware中创建一台虚拟机,操作系统为CentOS-7-x86_64-DVD-1908,硬盘大小为20G,并将虚拟机的名字设为
白菜go
·
2023-04-03 06:21
ceph
(分布式存储)
文章目录一、
ceph
的组件和功能1.简介2.层次结构和功能二、
ceph
的数据读写流程三、使用
ceph
-deploy安装一个最少三个节点的
ceph
集群(推荐3个或以上的磁盘作为专用osd)1.基础配置配置主机名给三台主机写入
掌九
·
2023-04-03 05:26
分布式存储
分布式
swift
开发语言
Ceph
故障检测机制
1.节点故障检测概述节点的故障检测是分布式系统无法回避的问题,集群需要感知节点的存活,并作出适当的调整。通常我们采用心跳的方式来进行故障检测,并认为能正常与外界保持心跳的节点便能够正常提供服务。一个好的故障检测策略应该能够做到:及时:节点发生异常如宕机或网络中断时,集群可以在可接受的时间范围内感知;适当的压力:包括对节点的压力,和对网络的压力;容忍网络抖动扩散机制:节点存活状态改变导致的元信息变化
Lucien168
·
2023-04-03 05:17
云计算存储之
Ceph
有哪些核心组件?
Ceph
有哪些核心组件?
Ceph
的核心组件包括
Ceph
OSD、
Ceph
Monitor和
Ceph
MDS。
weixin_33896726
·
2023-04-03 05:39
数据结构与算法
运维
Ceph
集群基础
文章目录一、
Ceph
集群角色二、
Ceph
元数据保存方式2.1xattrs(扩展属性)2.2omap(objectmap对象映射)2.2.1filestore与leveldb2.2.2bluestore与
LlinCK
·
2023-04-03 05:30
Ceph
分布式
ceph
分布式存储
数据库
Ceph
主要概念
3.5ObjectStore模块3.5.1FileStore3.5.2Bluestore4数据peering和恢复4.1数据peering机制4.2数据恢复5数据端到端一致性1整体架构介绍1.1总体介绍
Ceph
supermary0712
·
2023-04-03 04:21
ceph
ceph
Anolis OS8.6QU1通过
ceph
adm部署
ceph
17.2.0分布式块存储(一)部署首个mon节点和图形界面
本文尝试在龙蜥AnolisOS8.6QU1上通过
ceph
adm部署
ceph
17.2.0分布式块存储,实现国产化操作系统上的存储系统构建。
forestqq
·
2023-04-03 04:11
国产操作系统
容器
存储
分布式
docker
运维
ceph
---
ceph
osd DNE状态对集群的影响
查看pg的状态(
ceph
pgmap$PGID),磁盘的分组存在osd无法分配问题,重启osd都不行,删除状态为DNE的osd后,creating状态的pg可以分配o
yysalad
·
2023-04-03 04:26
ceph
ceph
集群单个osd超95%导致集群无法读写集群恢复过程
ceph
新手,最近遇到的一个问题,已解决,请参考,文中有错误的话欢迎指正故障描述openstack环境中若干台虚拟机无法正常操作,尝试从horizon中重启虚拟机,重启过程中虚拟机状态一直停留在”poweringon
00lingylf
·
2023-04-03 04:26
ceph
中 pg和pgp的关系
pg和pgp的关系:pg是用来存放object的,pgp相当于是pg存放osd的一种排列组合,我举个例子,比如有3个osd,osd.1、osd.2和osd.3,副本数是2,如果pgp的数目为1,那么pg存放的osd组合就只有一种,可能是[osd.1,osd.2],那么所有的pg主从副本分别存放到osd.1和osd.2,如果pgp设为2,那么其osd组合可以两种,可能是[osd.1,osd.2]和[
武晓兵
·
2023-04-03 04:51
ceph存储测试
ceph
数据恢复机制_
ceph
数据恢复—系统盘故障,如何恢复集群
1将osd从crush中删除,并删除对应的osd,和auth,host
ceph
osdcrushrmosd.X
ceph
osdrmX
ceph
authdelosd.X2、将主机从集群中删除
ceph
osdcrushrm
weixin_39532628
·
2023-04-03 04:42
ceph
数据恢复机制
ceph
集群之-添加删除OSD
2019独角兽企业重金招聘Python工程师标准>>>关于
Ceph
OSD添加操作步骤如下:1、创建一个OSD,即:#
ceph
osdcreate[uuid]#若没有uuid参数,则该命令自动生成一个uuid
weixin_33938733
·
2023-04-03 04:10
python
Ceph
集群块设备使用-创建和使用OSD
创建
Ceph
块设备[root@node2~]#rbdcreateblock-device4--size5G--image-format1rbd:imageformat1isdeprecated查看块设备信息
weixin_34252090
·
2023-04-03 04:40
5g
ceph
存储 "
ceph
集群浅析五"
Ceph
的工作原理及流程
本文将对
Ceph
的工作原理和若干关键工作流程进行扼要介绍。如前所述,由于
Ceph
的功能实现本质上依托于RADOS,因而,此处的介绍事实上也是针对RADOS进行。
skdkjzz
·
2023-04-03 04:38
ceph存储
ceph
osd 迁移方案
说明参考
ceph
mon扩容缩容步骤
ceph
mgr在线迁移(扩容缩容)目标
ceph
集群迁移原理所有
ceph
client,
ceph
osd,
ceph
mgr角色启动时需要连接
ceph
mon在
ceph
osd工作过程中
Terry_Tsang
·
2023-04-03 04:36
ceph
Ceph
集群在线迁移方案
一环境准备1.1场景介绍最近收到一个需求,客户希望将运行了多年的
ceph
集群服务器全部更换掉,因为这些老服务器性能和容量都已经无法满足当前业务的需求,并希望在迁移到新服务器的过程中,业务不中断。
jiangxi_
·
2023-04-03 04:25
ceph
1.
ceph
的组件和功能2.
ceph
的数据读写流程3.使用
ceph
-deploy安装一个最少三个节点的
ceph
集群 推荐3个或以上的磁盘作为专用osd
一、使用
ceph
-deploy安装一个最少三个节点的
ceph
集群使用3个或以上的磁盘作为专用osd配置node1到所有节点root用户免密钥互信。
nightingaleV
·
2023-04-03 04:52
jvm
osd踢出集群并添加集群
osd踢出集群并添加集群因为物理服务器硬盘故障导致osddown,所以需要将down掉的osd踢出集群,等待硬盘更换完成后再次添加进集群[root@
ceph
-1
ceph
]#umount/var/lib/
m0_51832408
·
2023-04-03 04:17
运维
CEPH
Ubuntu14.04 集群添加 OSD 节点
在
ceph
-admin-node节点上为节点
ceph
-node1添加两个虚拟磁盘,挂载盘符为/dev/vdb,/dev/vdc,前者为osddata存放用,/dev/vdc为osdjournal使用。
jiankangshiye
·
2023-04-03 04:16
ceph
ceph
删除
Ceph
集群里的某个节点的全部OSD (1 of 3)
前言:如果你的
ceph
集群的数据只存在在该节点的所有OSD上,删除该节点的OSD会导致数据丢失。如果集群配置了冗余replication或者EC,需要做pg修复。
Yannick_J
·
2023-04-03 04:13
Ceph
ceph
删除osd的一些问题
数据和日志在同一个磁盘上的osd将osd.0踢出集群,执行
ceph
osdout0停止此osd进程,执行systemctlstop
ceph
-osd@0然后执行:
ceph
osdcrushremoveosd.0
beisaodou0721
·
2023-04-03 04:12
第二课
ceph
基础学习-OSD扩容换盘和集群运维
第二课
ceph
基础学习-OSD扩容换盘和集群运维文章目录第二课
ceph
基础学习-OSD扩容换盘和集群运维第一节OSD扩容1.1扩容背景1.2横向扩容1.3纵向扩容1.4数据重分步rebalancing1.5OSD
道教儒佛电磁波
·
2023-04-03 03:12
Ceph入门和实践
运维
linux
服务器
Ceph
OSD简介
Ceph
OSD是
Ceph
存储集群最重要的组件,
Ceph
OSD将数据以对象的形式存储到集群中每个节点的物理磁盘上,完成存储工作由OSDDaemon进程完成。
ZHANGJNWEI
·
2023-04-03 03:11
ceph
基于
Ceph
的 Kubernetes 数据持久化
本文通过简单介绍
Ceph
的功能特性与安装配置,并结合应用场景进行实践讲解,演示如何利用
Ceph
实现Kubernetes及常用业务需求场景下的数据持久化。
Docker_
·
2023-04-03 03:10
ceph
介绍、原理、架构、算法...个人学习记录
前言之前公司安排出差支援非结构化项目,采用springcloud+(redis+mysql数据冷热处理)+s3+es+
ceph
+kafka还涉及一些区块链技术等等…,在与大佬的沟通交流下对
ceph
产生了兴趣
偷偷学习被我发现
·
2023-04-03 03:04
大数据
架构
ceph
架构
学习
解决 nginx 出现 413 Request Entity Too Large 的问题
用所用的php请求解析服务是fpm,则检查/etc/php5/fpm/php.ini文件中的参数upload_max_filesize=20Mpost_max_size=20M重启fpm服务servi
ceph
p5
lookphp
·
2023-04-02 23:03
nginx上传文件,upload模块编译问题
虽然现在普遍的分布式文件存储方案很多,fastds,
ceph
,tfs,gfs等,而且云上的存储更加无脑,OSS,S3这些,只要你开通一下,然后照着官方的例子传参调用即可,随用随传,而且更加直观方便。
灬solver
·
2023-04-02 02:39
基于SpringBoot+Vue家乡特色推荐系统
python爬虫入门进阶❤️4.
Ceph
实战,从原理到实战应有尽有。
Ceph
实战
码农飞哥
·
2023-04-01 15:45
毕业设计
spring
boot
vue.js
java
毕业设计
上一页
22
23
24
25
26
27
28
29
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他