分布式存储CEPH

Redis进阶

一、Redis集群和分布式锁1.1Redis集群的概念和优势Redis集群是一种分布式系统架构，它将多个Redis实例组成一个逻辑集群，实现数据的分布式存储和高可用性。
青年老年程序员·2023-09-27 20:05

day32 NFS网络共享文件系统

在企业中实现数据存储的其它软件：FTP服务器（windows--server-U）部署安装麻烦/权限设置samba软件，部署安装麻烦windowslinux系统都支持分布式存储Moosefs（mfs）、
娇娜_5eb0·2023-09-27 19:54

openEuler部署Ceph集群(块存储)

openEuler部署Ceph集群1目标2环境2.1服务器信息2.2软件信息3部署流程3.1获取系统镜像3.2创建虚拟机3.3配置虚拟机3.3.1配置互信3.3.2关闭防火墙3.3.3配置免密登录3.3.4
一个码农的前三十年·2023-09-27 13:39

k8s部署单点的mysql实例

管理员密码的配置3.3lost+found配置3.4探针配置总结前言记录一下根据kubernetes.io的范本部署一个mysql实例的过程一、基础环境准备准备一个k8s集群，配置好存储类，我这里使用的是rook-ceph
大新新大浩浩·2023-09-27 09:40

Hadoop笔记（一）

在大数据领域提出了两个概念：分布式文件系统，用于存储大量的数据分布式计算框架MapReduce，高效地分析数据以上两个概念组成了一个名词叫HadoopHadoop的起源谷歌发布了三篇论文：GFS分布式存储系统
lew1sss·2023-09-27 08:50

Ceph入门到精通-常见Nginx服务器故障处理

目的：在Nginx服务器出现故障时，能快速定位并解决相关错误。概述：Nginx常见错误与问题之解决方法技术指南。安装环境：系统环境：redhatenterprise6.564bit1、Nginx常见启动错误有的时候初次安装nginx的时候会报这样的错误sbin/nginx-cconf/nginx.conf报错内容：sbin/nginx:errorwhileloadingsharedlibrarie
瓦哥架构实战·2023-09-27 07:55

Ceph入门到精通-lvs中ipvsadm的ActiveConn和InActConn的深入理解

lvs的activeconn是个一直让我很迷惑的东东.每次看到这个数巨大而真实机上的活动连接数并不是很高的时候,我都忍不住网上搜索一番,虽然大多时候总是无功而返,但是渐渐的总结出来了以下理论.ActiveConn是活动连接数,也就是tcp连接状态的ESTABLISHED;InActConn是指除了ESTABLISHED以外的,所有的其它状态的tcp连接.那既然这样,为什么从lvs里看的Active
瓦哥架构实战·2023-09-27 07:24

云计算 第五章 Hadoop 2.0 主流开源云架构

文章目录5.1引例5.1.1问题概述5.1.2常规解决方案5.1.3分布式下的解决方案1.分布式存储冗余存储与冗余计算5.1.4小结img5.2Hadoop2.0简述5.2.1Hadoop2.0由来5.2.2Hadoop2.0
是我，Zack·2023-09-27 07:23

Centos 下NTP环境的创建

最近在搭建Openstack以及Ceph的集群，由于集群中都存在多个节点，且节点间需要时间的同步，所以需要使用NTP，又考虑到有些时候网络环境是封闭的，所以需要自己搭建一个NTP的服务器服务器IP角色说明同步方式
铁猴·2023-09-27 07:21

ubuntu单节点快速部署ceph集群、部署rgw业务

ubuntu单节点快速部署ceph集群、部署rgw业务标签（空格分隔）：ubuntu、ceph集群、单节点、rgw一、背景：最近开始学习ceph集群的相关知识，作为初学者，部署单节点集群，足以满足学习的要求
喝水怪~·2023-09-27 07:19

Ceph入门到精通-netstat -s|grep “dropped“

“104081SYNstoLISTENsocketsdropped”是一个网络错误消息，通常出现在服务器日志或网络设备日志中。SYN是TCP握手过程中的一个步骤，用于建立连接。而LISTENsockets是服务器用于接收新连接的状态。这个错误消息表示服务器接收到了104081个传入的连接请求（SYNs），但由于某些原因，无法将这些连接请求附加到相应的LISTENsockets上，从而导致了连接的丢
瓦哥架构实战·2023-09-27 07:42

Ceph RGW multisite异地容灾备份方案

1.前言容灾(DisasterRecovery)，即容灾备份或灾备，是业务连续性系统的一个子集，用于保障IT系统在遭受自然灾害、人为操作失误或蓄意破坏后的数据还原和业务恢复.CephRGW多数据中心（multisite
咏箢·2023-09-27 06:37

IPFS和Filecoin的关系？

filecoin是一个分布式存储网络，把云存储变
4fd281c9d96e·2023-09-27 04:46

简述ceph文件储存系统

Ceph是一个统一的分布式存储系统和共享机制，它定义了数据如何存储在一个或多个节点上并呈现给其他机器以供文件访问。
奋豆来袭·2023-09-27 03:17

Crush Map规则的定制

参阅：https://ceph.readthedocs.io/en/latest/rados/operations/crush-map/（一）手动编辑CrushMap规则生产环境中，做类似调整尽量在磁盘为空磁盘的情况下进行调整或者提前规划好
深度遗忘·2023-09-27 02:18

SpringCloud微服务实战——搭建企业级开发框架（二十九）：集成对象存储服务MinIO+七牛云+阿里云+腾讯云

  微服务应用中图片、文件等存储区别于单体应用，单体应用可以放到本地读写磁盘文件，微服务应用必需用到分布式存储，将图片、文件等存储到服务稳定的分布式存储服务器。
·2023-09-26 21:29

k8s监控实战-部署prometheus

不依赖分布式存储，单个服务器节点是自主的。主要基于HTTP的pull方式主动采
qq_43076479·2023-09-26 17:13

【北亚企安数据恢复】Ceph存储介绍&Ceph数据恢复流程

Ceph存储基本架构：Ceph存储可分为块存储，对象存储和文件存储。Ceph基于对象存储，对外提供三种存储接口，故称为统一存储。
北亚数据恢复·2023-09-26 16:05

ceph分布式存储

目录一、概述二、组件三、架构图四、搭建一、概述ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
欢愉的猫·2023-09-26 15:43

【北亚企安数据恢复】Ceph存储基本概念介绍&Ceph数据恢复流程

Ceph存储基本架构：Ceph存储可分为块存储，对象存储和文件存储。Ceph基于对象存储，对外提供三种存储接口，故称为统一存储。
·2023-09-26 15:05

如何测量进程级别或容器级别的 IO 延迟

因为：一些基于网络的的存储方案，如Ceph，天然地有不稳定性SSD/RAINController本身的不稳定性在Linux下，传统地，我们有iostat/sar等等工具可以看系统级、存储设备级的问题。
·2023-09-26 12:22

Ceph概述 、 部署Ceph集群 、 Ceph块存储

这里写目录标题概述环境准备配yum源12ssh免密分发小脚本时间同步添加虚拟磁盘安装部署软件ceph-deploynode1安装ceph-deploy(部署ceph的一个python脚本)创建目录（目录名称可以任意
XUPT-BDAL-LAB-ML&OP·2023-09-26 12:52

ceph 存储池pool操作

1、列出存储池cephosdlspools2、创建存储池cephosdpoolcreatepoolnamepg-numpgp-numreplicatedcrush-ruleset-nameexpected-num-objects
SkTj·2023-09-25 19:38

ceph 代码分析 读_BlueStore源码分析之BlockDevice

前言Ceph新的存储引擎BlueStore已成为默认的存储引擎，抛弃了对传统文件系统的依赖，直接管理裸设备，通过Libaio的方式进行读写。
马汝为·2023-09-25 15:18

分布式存储中本地存储引擎

分布式存储中本地存储引擎最近几年存储介质得到了高速发展，单位存储介质的性能越来越高，从原来的机械硬盘不足100IOPS到现在的NVMeSSD一块就能达到50WIOPS，但与之形成反差的是CPU的速度提升并没有那么多
benpao1234567890·2023-09-25 15:15

[元带你学NVMe协议] ZNS 架构实现 : 解决传统SSD问题的高性能存储栈设计

2.2ZNS的架构实现先看看支持zone存储的SMRHDD以及支持zonefs的nvmessd的整个存储栈形态其中对于ceph这样的应用来说bluestore或者Seastore这样的后端引擎是直接管理裸设备的
m0_29032027·2023-09-25 15:43

系分 - 案例分析 - 数据库设计（分布式）

数据库设计（分布式）分布式数据库系统透明性分类两阶段提交协议2PC分区分表分库分区技术数据库主从复制NoSQL非关系型数据库与关系型数据库对比类型缓存技术RedisRedis与Memcache对比Redis分布式存储方案
WorkLee·2023-09-25 13:34

Hadoop初识及信息安全（大数据的分布式存储和计算平台）

目录什么是HadoopHadoop的特点Hadoop优点Hadoop的缺点Hadoop的重要组成信息安全什么是HadoopHadoop是一个适合大数据的分布式存储和计算平台。
墨痕诉清风·2023-09-25 11:40

网易国产开源分布式存储系统——Curve

导读：Curve是一款高性能、易运维、云原生的开源分布式存储系统(CNCFSandbox)。
·2023-09-25 11:26

ceph 运维操作-SCRUB

1.基本概念1.1什么是ScrubScrub是Ceph集群副本进行数据扫描的操作，用于检测副本间数据的一致性，包括scrub和deep-scrub。
lihanglucien·2023-09-25 07:56

k8s volume存储卷、PV、PVC和存储类

1.3举例1.3.1临时存储emptyDir类型1.3.2HOST级别hostPath类型1.3.3网络级别NFS类型1.3.4网络级别rdb类型1.3.5网络级别GlusterFS类型1.3.6网络级别CephFS
TimeRovers·2023-09-24 23:53

linux————ceph分布式部署

目录一、概述特点1、统一存储2、高扩展性3、可靠性强4、高性能组件1、Monitor2、OSD3、MOD4、Objet5、PG6、RADOS7.Libradio8.CRUSH9.RBD10.RGW11.CephFS
丗卅·2023-09-24 21:49

5W字讲解最新大数据面试题

本文目录：一、Hadoop二、Hive三、Spark四、Kafka五、HBase六、Flink七、数仓业务方面八、算法HadoopHadoop中常问的就三块，第一：分布式存储(HDFS)；第二：分布式计算框架
无精疯·2023-09-24 20:59

高级运维学习（九）块存储、文件系统存储和对象存储的实现

字符设备只能是字符流[root@ceph1~]#ll/dev/sdabrw-rw----1rootdisk8,0Dec1213:15/dev/sda#b表示block，块设备[root@ceph1~]#
.久一·2023-09-24 18:23

【分布式云储存】高性能云存储MinIO简介与Docker部署集群

简介MinIO优势MinIO技术亮点Docker部署MinIO集群docker与docker-compose安装新增nginx配置编写docker-compose.yml文件启动MinIO容器并验证前言分布式存储服务一直以来是中大型项目不可或缺的一部分
小沈同学呀·2023-09-24 10:01

Docker部署FastDFS分布式存储

1、准备工作dockerpullqinziteng/fastdfs:5.05Pwd="/data/software/fastdfs"mkdir${Pwd}/{storage,tracker}-p2、创建TEST容器，将fastdfs目录COPY到本地，方便后续维护管理！dockerrun-id--namefastdfsqinziteng/fastdfs:5.05dockercpfastdfs:/h
神奇的海马体·2023-09-24 06:07

各类分布式文件系统的区别和概述 | HDFS、GFS、Ceph、TFS、Moosefs、IPFS等

文章目录参考分布式文件系统定义各类系统对比图各类文件系统简介shepdogshepdog基本架构CephFastDFSfastDFS介绍Trackerserver追踪服务器Storageserver储存服务器客户端
stone_fall·2023-09-23 23:56

分布式文件系统对比与选型参考

、数据的存储方式：2、数据的读取速率3、数据的安全机制二、主流分布式文件系统介绍1.GFS（GoogleFileSystem）2.HDFS（HadoopDistributedFileSystem）3.Ceph4
草莓不苦·2023-09-23 23:55

ceph osd 常见故障处理

如果cephhealth或ceph-s返回的是健康状态，这意味着monitors形成了法定人数。如果monitor还没达到法定人数、或者monitor状态错误，要先解决monitor的问题。
大鱼民·2023-09-23 16:41

大数据分布式处理框架Hadoop

Hadoop是什么Hadoop是开源的分布式计算技术框架，用于处理大规模数据和实现分布式存储。
真空零点能·2023-09-23 07:08

ceph分布式存储搭建

服务三、安装OSD1.centos1、centos2、centos3、三个虚拟机各加一个磁盘2.热刷新磁盘并格式化3.创建OSD四、安装dashboard1.生成签名和创建安全认证2.启动服务五、创建ceph
予安·2023-09-23 05:59

ceph分布式存储

目录前言一、概述（一）、特点（二）、组件（三）、架构图二、搭建（一）、基础环境（二）、准备工作（三）、ceph安装（四）、集群构建（五）、dashboard安装（六）、ceph文件系统创建（七）、客户端挂载总结前言
SCL_78534660·2023-09-23 05:57

hive mysql初始_hive mysql 初始化

我们可以把Hive中海量结构化数据看成一个个的表，而实际上这些数据是分布式存储在HDFS中的。Hive经过对语句进行解析和转换，最终生成一系列基于had
戴舜·2023-09-23 04:14

【python零基础入门学习】python进阶篇之时间表示方法和异常处理以及linux系统的os模块执行shell命令以及记账程序编写教学（一）

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-09-23 01:27

【运维面试100问】（三）说说你在故障排除方面的经历

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-09-23 01:23

Ceph和Owncloud部署与使用

Ceph和Owncloud部署与使用1.部署ceph集群（1）虚拟机基础配置在VMware中设置VMnet1的网络为仅主机模式，网段设置为203.0.113.0；VMnet8设置为NAT模式，网段设置为
白菜go·2023-09-22 19:31

ceph分布式存储简介

Ceph简介什么是分布式存储？
程序员面试吧·2023-09-22 16:21

小米云原生文件存储平台化实践：支撑 AI 训练、大模型、容器平台多项业务

在训练平台的存储方案中，小米曾尝试了多种不同的存储方式，包括Ceph+NFS、HDFS和对象存储挂载等。然而，这些不同的存储方式导致了数据冗余和维护管理成本的增加，同时也带来了扩展性和性能方面的问题。
·2023-09-22 15:12

实时云渲染：元宇宙技术开发核心之一

元宇宙6个核心技术区块链技术：区块链技术是分布式存储、点对点
·2023-09-22 12:02

Redis的高性能之谜

我们还可以使用集群功能构建分布式存储服务，并实现非强一致性的分布式锁服务。在上述各种情况下，Redis都具有一个共同的优势，即处理速度快（高性能）。Redis有多快？
小技术君·2023-09-22 12:46
上一页 20 21 22 23 24 25 26 27 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他