分布式存储-ceph

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二十八）

》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph

向往风的男子·2024-09-16 02:26

KVM+GFS分布式存储系统构建KVM高可用

一、案列分析1.1案列概述本章案例主要使用之前章节所学的KVM及GlusterFs技术,结合起来从而实现KVM高可用。利用GlusterFs分布式复制卷，对KVM虚拟机文件进行分布存储和冗余。分布式复制卷主要用于需要冗余的情况下把一个文件存放在两个或两个以上的节点,当其中一个节点数据丢失或者损坏之后，KVM仍然能够通过卷组找到另一节点上存储的虚拟机文件，以保证虚拟机正常运行。当节点修复之后，Glu

henan程序媛·2024-09-16 00:17

Hadoop

它具有高度的可扩展性、容错性和高效的分布式存储与计算能力。

傲雪凌霜，松柏长青·2024-09-16 00:16

ceph KVM使用rbd做存储

://blog.csdn.net/bobpen/article/details/40112939博客：http://www.aboutyun.com/thread-13195-1-1.html导言很多cepher

SkTj·2024-09-15 08:14

Web3入门指南：从基础概念到实际应用

与以往依赖中心化服务器和大公司控制的数据模式不同，Web3通过区块链技术实现了数据的分布式存储和处理。这一去中心化

dingzd95·2024-09-14 23:01

HBase介绍

概述HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable：一个结构化数据的分布式存储系统》。

mingyu1016·2024-09-14 21:47

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（十一）

向往风的男子·2024-09-13 18:51

KVM+GFS分布式存储系统构建 KVM 高可用

一、案例分析本案例主要使用KVM及GlusterFS技术,结合起来从而实现KVM高可用。利用GlusterFs分布式复制卷，对KVM虚拟机文件进行分布存储和冗余。分布式复制卷主要用于需要冗余的情况下把一个文件存放在两个或两个以上的节点,当其中一个节点数据丢失或者损坏之后，KVM仍然能够通过卷组找到另一节点上存储的虚拟机文件，以保证虚拟机正常运行。当节点修复之后，GlusterFS会自动同步同一组卷

wkysdhr·2024-09-12 00:53

【mysql】mysql之优化

向往风的男子·2024-09-11 15:22

python 物理引擎摩擦力_Python物理引擎

的强大源自众多领域大牛的支持，例如物理引擎方面，就有N多模块支持PyODEPyODEisasetofopen-sourcePythonbindingsforTheOpenDynamicsEngine,anopen-sourcephysicsengine.PyMunkpymunkisaeasy-to-usepythonic2dphysicslibrarythatcanbeusedwhen

简单的艾伦·2024-09-09 18:00

ELK架构介绍

Elasticsearch提供分布式存储和搜索能力；Logstash负责数据收集和处理，而Kibana则提供数据可视化和分析界面。

星河漫漫l·2024-09-09 11:40

Hbase、hive以及ClickHouse的介绍和区别？

HBase的设计灵感来源于Google的Bigtable论文，它通过提供类似于Bigtable的能力，在Hadoop之上构建了一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。

damokelisijian866·2024-09-08 23:43

k8s 存储(PV、PVC、SC、本地存储、NFS)

大江东去了吗·2024-09-08 16:00

java 实现前后端分离_详解前后端分离之Java后端

那么问题来了，用户很多时，服务器压力很大，如果采用分布式存储session，又可能会出现不同步问题，那么前后端分离就很好的

bfecoder·2024-09-08 13:08

cephadm搭建ceph文件集群存储

一、基础配置1、配置主机名[root@ecs-cd34~]hostnamectlset-hostnamenode1[root@ecs-cd34~]execbash#主机名生效2、配置hosts解析（根据自己的服务器id修改）cat>>/etc/hosts/etc/docker/daemon.json<

L__liurs·2024-09-07 16:41

先进制造业数字化转型：典型场景存储需求及实践解析

本文将从先进制造企业数字化转型中典型场景的存储需求出发，结合XSKY分布式存储的实际案例，看分布式存储如何帮助企业进行存储转型，满足相关的数据使用需求。01 本地硬盘存储方案的

XSKY星辰天合·2024-09-07 16:08

存储集群消除pg数量过多的告警

[root@xxxxxxxxxxxxxx~]#ceph-scluster334cfe7e-9ccc-483d-8d2c-218fde3a5fdehealthHEALTH_WARNtoomanyPGsperOSD

大大金·2024-09-07 15:36

linux搭建ceph集群

linux三节点搭建ceph集群主机IP主机名称172.26.50.75node1172.26.50.112node2172.26.50.228node3ceph-mon，ceph-mgr，ceph-mds

浓黑的daidai·2024-09-07 11:05

3. ceph-mimic版本部署

ceph-mimic版本部署一、ceph-mimic版本部署1、环境规划2、系统基础环境准备2.1关闭防火墙、SELinux2.2确保所有主机时间同步2.3所有主机ssh免密2.4添加所有主机解析3、配置

Martin_wjc·2024-09-07 03:11

upmap的存储池osd坏盘处理问题

写在前面喜欢ceph的话欢迎关注奋斗的cepher微信公众号阅读更多好文！

奋斗的松鼠·2024-09-07 03:41

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二十四）

向往风的男子·2024-09-05 00:07

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（十九）

向往风的男子·2024-09-05 00:07

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二）

向往风的男子·2024-09-05 00:37

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二十三）

向往风的男子·2024-09-04 23:02

【初出江湖】分布式之什么是分布式存储？

目录标题分布式存储分布式存储系统特点分布式存储原理分布式存储的应用场景分布式存储和集中式存储的区别分布式存储分布式存储是一种将数据分散存储在多个节点上的存储方式。

无休居士·2024-09-03 15:05

缓存读写策略 Cache Aside Pattern，开发必备

我们在前面讲到了当我们业务面临大量写并发的时候，将数据库开发成分布式存储系统，然后又介绍了NoSql数据库与关系型数据库互相配合，以用来更好的服务与我们的业务发展。

架构师修炼·2024-09-02 12:20

经验笔记：Hadoop

Hadoop经验笔记一、Hadoop概述Hadoop是一个开源软件框架，用于分布式存储和处理大规模数据集。其设计目的是为了在商用硬件上运行，具备高容错性和可扩展性。

漆黑的莫莫·2024-09-02 03:54

ceph rgw：bucket policy实现

cephrgw：bucketpolicy实现相比于aws，rgw的bucketpolicy实现的还不是很完善，有很多细节都不支持，并且已支持的特性也在很多细节方面与s3不同，尤其是因为rgw不支持类似s3

牛牛Blog·2024-09-02 02:50

ceph rgw java_ceph rgw multisite基本用法

Realm：Zonegroup：理解为数据中心，由一个或多个Zone组成，每个Realm有且仅有一个MasterZonegroup，用于处理系统变更，其他的称为SlaveZonegroup，元数据与MasterZonegroup保持一致；Zone:Zone是一个逻辑概念，包含一个或者多个RGW实例。每个Zonegroup有且仅有一个MasterZone，用于处理bucket和user等元数据变更。

weixin_39587113·2024-09-02 02:19

一文读懂CEPH RGW基本原理

一文读懂CEPHRGW基本原理一、RGW简介二、RGW的组成结构三、Rgw用户信息四、BUCKET与对象索引信息五、RGW对象与RADOS对象的关系六、上传对象的处理流程七、RGW的双活机制八、RGW版本管理机制与

shichungang·2024-09-02 02:19

京存分布式存储强势助力自动驾驶行业！

随着自动驾驶技术的快速发展，数据存储已成为该领域的关键技术之一。自动驾驶系统涉及的数据类型繁多，包括车辆状态信息、环境感知数据、高精度地图数据、道路基础设施数据等，其规模庞大，需要高效、稳定的数据存储解决方案来满足不断增长的数据存储需求。在需求方面，自动驾驶行业要求存储系统具备高性能、高可靠性和高可用性，以支持实时数据处理和快速决策。例如，自动驾驶汽车需要实时访问大量的传感器数据、地图数据和其他相

京存高性能存储·2024-08-31 14:32

极客天成签署 CCLA，携手openEuler社区共拓信创AI新天地

极客天成以高通量分布式集群存储为先锋，围绕软件定义、智能化、安全可靠，全链RDMA构建了完全自主可控的分布式存储产品线和解决方案，主要解决用户海量数据下的高性能低时延数据读写难题，可为用户的数据中心提供

极客天成ScaleFlash·2024-08-31 14:32

中标 | 极客天成分布式存储软件成功中标华泰证券并行文件系统软件项目

2023年9月21日，北京极客天成科技有限公司分布式存储软件V3.0通过代理商成功中标华泰证券并行文件系统软件项目。

极客天成ScaleFlash·2024-08-31 14:31

如何在Web3.0应用中实现数据的安全存储？

在Web3.0应用中，可以通过以下几种方式实现数据的安全存储：一、分布式存储技术1.IPFS（InterPlanetaryFileSystem，星际文件系统）：-IPFS是一种去中心化的分布式文件存储系统

alankuo·2024-08-31 09:31

【mysql】mysql之存储引擎学习

向往风的男子·2024-08-31 05:28

单机安装 ELK 日志分析系统

Elasticsearch是一个基于Lucene的、支持全文索引的分布式存储和索引引擎，主要负责将日

TheFlsah·2024-08-30 21:40

【ceph学习】ceph如何进行数据的读写（2）

本章摘要上文说到，librados/IoctxImpl.cc中调用objecter_op和objecter的op_submit函数，进行op请求的封装、加参和提交。本文详细介绍相关函数的调用。osdc中的操作初始化Op对象，提交请求设置Op对象的时间，oid，操作类型等信息。//osdc/Objector.h//mid-levelhelpersOp*prepare_mutate_op(consto

陶二先生·2024-08-30 09:46

【ceph学习】ceph如何进行数据的读写（3）

//ceph_osd.ccMessenger*ms_public=Messenger::cr

陶二先生·2024-08-30 08:43

云原生应用(7)之Docker容器数据持久化存储机制

容器数据持久化存储介绍物理机或虚拟机数据持久化存储由于物理机或虚拟机本身就拥有大容量的磁盘，所以可以直接把数据存储在物理机或虚拟机本地文件系统中，亦或者也可以通过使用额外的存储系统（NFS、GlusterFS、Ceph

技术路上的苦行僧·2024-08-29 18:10

Python知识点：如何使用HBase与HappyBase进行分布式存储

使用HBase与HappyBase进行分布式存储是处理大规模数据的有效方式。HBase是一个基于Hadoop的开源分布式数据库，可以处理非常大的表。

杰哥在此·2024-08-29 15:51

Openstack 与 Ceph集群搭建(下)： Openstack部署

文章目录文章参考部署节点准备1.修改Host文件与hostname名称2.安装NTP软件3.网卡配置信息4.开启Docker共享挂载5.安装python虚拟环境6.安装kolla-ansible7.加载AnsiblegalaxyrequirementsOpenstack安装前预配置1.配置密码2.配置multinode文件3.修改全局配置文件Openstack正式安装1.启动bootstrap-s

范枝洲·2024-08-29 01:43

学习笔记六：ceph介绍以及初始化配置

k8s对接cephceph是一种开源的分布式的存储系统，包含以下几种存储类型：块存储（rbd）文件系统cephfs对象存储分布式存储的优点：Ceph核心组件介绍安装Ceph集群初始化配置Ceph安装源安装基础软件包安装

风车带走过往·2024-08-27 23:49

秋招Java后端开发——非关系型数据库篇（Redis）

分布式架构天生支持分布式存储和计算，能够跨多个

番茄炒西红柿炒蛋·2024-08-27 13:19

云原生存储解决方案

云原生存储解决方案使用Rook、Ceph等工具进行云原生存储管理云原生存储简介什么是云原生存储云原生存储是指设计用于云原生环境中的存储解决方案，通常在容器化平台如Kubernetes上运行。

爱技术的小伙子·2024-08-26 13:38

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（十二）

向往风的男子·2024-08-25 05:20

【mysql】mysql之数据操作语言（insert、delete、update）