分布式文件系统Ceph

Kubernetes集群中部署SonarQube服务

SonarQube服务的分步指南，包含持久化存储、数据库配置和高可用性建议：1.前置条件已部署Kubernetes集群（版本≥1.19）安装kubectl和helm工具配置StorageClass（如NFS、Ceph

demonlg0112·2025-03-25 10:56

第7章：实践项目7.2 大型项目实战

目录第7章：实践项目7.2大型项目实战一、桌面应用1.跨平台任务管理器二、网络服务2.在线图书管理系统三、嵌入式系统3.智能家居控制系统四、分布式系统4.分布式文件系统五、机器学习与AI5.图像识别系统六

xiaoheshang_123·2025-03-25 03:30

Ceph集群2025（Squid版）导出高可用NFS集群(上集)

#创建一个CephFS文件系统cephfsvolumecreatecephfs02#创建子卷cephfssubvolumegroupcreatecephfs02myfsg2#查看子卷cephfssubvolumegrouplscephfs02

野猪佩挤·2025-03-24 06:43

努力的搬砖人.·2025-03-22 18:16

Sqoop安装部署

ApacheSqoop简介Sqoop（SQL-to-Hadoop）是Apache开源项目，主要用于：将关系型数据库中的数据导入Hadoop分布式文件系统（HDFS）或相关组件（如Hive、HBase）。

愿与狸花过一生·2025-03-21 22:10

Ceph数据恢复方案–分布式文件系统删除数据的恢复

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、Ceph的三种存储结构二、Ceph中删除数据的恢复提取1.本次案例情况简介：2.数据分析：2.1：BlueStore架构2.2

San结构数据恢复·2025-03-21 09:43

【服务器数据恢复】数据中心存储服务器VMware vSAN分布式存储架构数据恢复解析

分布式文件系统（DistributedFileSystem，DFS）是一种能够在多台计算机之间共

海境超备·2025-03-21 08:40

Fastdfs-V5.11使用docker部署集群(X86)

composetracker与storage启动目录层级与配置文件client.confstorage.conf查看集群信息测试测试集群扩容与缩减nginx配置一、Fastdfs介绍FastDFS是一款高性能的分布式文件系统

礁之·2025-03-20 07:11

【mysql】mysql之主从部署以及介绍

》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph

向往风的男子·2025-03-20 04:20

基于BClinux8部署Ceph 19.2(squid)集群

#作者：闫乾苓文章目录1.版本选择Ceph版本发布历史目前官方在维护的版本2.部署方法3.服务器规划4.前置配置4.1系统更新4.2配置hostscat>>/etc/hosts>/etc/hosts/etc

磐基Stack专业服务团队·2025-03-19 19:06

HarmonyNext实战：基于ArkTS的跨设备文件同步与冲突解决案例详解

HarmonyOSNext提供了强大的分布式文件系统和冲突解决机制，帮助开发者实现高效、可靠的跨设备文件同步。本文将深入探讨如何在HarmonyOSNext中使用ArkTS实现跨设备文件同步与冲突

·2025-03-19 16:47

【Go基础】Go入门与实践资源帖

系统教程从语法讲起：李文周博客七天快速上手项目Go测试驱动开发博客孔令飞项目开发实战课程，孔令飞图文教程《Go语言高级编程》书籍Go算法刷题模板Go实战项目KV系统crawlab分布式爬虫平台seaweedfs分布式文件系统

小超人冲鸭·2025-03-19 16:41

中电金信25/3/18面前笔试（需求分析岗+数据开发岗）

MapReduceSparkStormFlink解析：Hadoop的核心组件是HDFS（分布式文件系统）和MapReduce（分布式计算框架）。

苍曦·2025-03-19 12:43

DeepSeek 3FS 与 JuiceFS：架构与特性比较

在AI业务中，企业需要处理大量的文本、图像、视频等非结构化数据，还需要应对数据量的爆炸式增长，分布式文件系统因此成为AI训练的关键存储技术。

·2025-03-18 18:07

FastD：高性能PHP API框架

FastD：高性能PHPAPI框架fastD:rocket:AhighperformancePHPAPIframework.项目地址:https://gitcode.com/gh_mirrors/fa/

钟冶妙Tilda·2025-03-14 06:29

debian-pve-ceph

从头开始安装debian9.8debian-9.8.0-amd64-netinst.isovi/etc/vim/vimrc.tinysetnocompatiblesetbackspace=2一、让debian终端文件显示不同颜色vim/etc/vim/vimrc取消“syntaxon”的注释二、让debian终端文件夹显示不同颜色修改.bashrc文件，vim/root/.bashrc修改如下：#

weixin_34278190·2025-03-13 23:19

HBase2.6.1部署文档

1、HBase概述ApacheHBase是基于Hadoop分布式文件系统（HDFS）之上的分布式、列存储、NoSQL数据库。

CXH728·2025-03-12 17:10

Hadoop、Spark和 Hive 的详细关系

核心组件：HDFS(HadoopDistributedFileSystem)：分布式文件系统，提供高吞吐量的数据访问。

夜行容忍·2025-03-11 18:46

Hadoop：全面深入解析

其核心组件包括Hadoop分布式文件系统（HDFS）

CloudJourney·2025-03-09 21:29

Hadoop介绍：什么是Hadoop？了解Hadoop的应用

Hadoop框架主要包括HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）、MapReduce、YA

Zzzxt007·2025-03-09 21:55

【Hadoop】详解HDFS

Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件上的分布式文件系统，它是一个高度容错性的系统，适合部署在廉价的机器上，能够提供高吞吐量的数据访问，非常适合大规模数据集上的应用。

2302_79952574·2025-03-09 09:13

HDFS的设计架构

HDFS是Hadoop生态系统中的分布式文件系统，设计用于存储和处理超大规模数据集。它具有高可靠性、高扩展性和高吞吐量的特点，适合运行在廉价硬件上。

F_0125·2025-03-09 05:21

鸿蒙系统分布式文件概述、访问、拷贝

1.分布式文件系统概述分布式文件系统（hmdfs，HarmonyOSDistributedFileSystem）提供跨设备的文件访问能力，适用于如下场景：两台设备组网，用户可以利用一台设备上的编辑软件编辑另外一台设备上的文档

小时代的大玩家·2025-03-08 09:20

Ceph实战（一）-分布式存储介绍与原理架构概述

深度视觉机器·2025-03-08 07:57

hadoop

的核心架构主要包括HDFS（HadoopDistributedFileSystem）和YARN（YetAnotherResourceNegotiator），以及MapReduce计算框架：1.1HDFS（分布式文件系统

百里自来卷·2025-03-06 06:00

深入检索：专业知识检索的高级算法与架构策略

这可以通过将索引数据分片存储在不同的节点上，并使用分布式文件系统或对象存储来存储大规模的索引数据。任务分配：设计任务调度器，负责将查询请求分配到空闲的节点上进

是小旭啊·2025-03-06 05:52

Java 大视界 -- Java 大数据分布式文件系统的性能调优实战（101）

亲爱的朋友们，热烈欢迎来到青云交的博客！能与诸位在此相逢，我倍感荣幸。在这飞速更迭的时代，我们都渴望一方心灵净土，而我的博客正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识，也期待你毫无保留地分享独特见解，愿我们于此携手成长，共赴新程！一、欢迎加入【福利社群】点击快速加入：青云交灵犀技韵交响盛汇福利社群点击快速加入2：2024CSDN博客之星创作交流营（NEW)二、本博客的精华专栏：大数据新视

青云交·2025-03-05 18:25

凤凰架构-演进中的架构

原始分布式时代1、惠普公司=》网络运算架构（NCA）=》远程服务调用的雏形卡内基梅隆大学=》AFS文件系统=》分布式文件系统的最早实现麻省理工学院=》Kerberos协议=》服务认证和访问控制的基础性协议

metazz·2025-03-05 02:37

NFS配置全解析：让文件共享变得如此简单

1NFS简介NFS（NetworkFileSystem）：是一种分布式文件系统协议，允许用户通过网络访问远程文件系统，就像访问本地文件一样。它最初由SunMicro

IT成长日记·2025-03-04 23:44

云原生存储架构：构建数据永续的新一代存储基础设施

引言：重新定义数据基础设施边界蚂蚁集团基于Ceph构建的全闪存存储集群达到EB级规模，单集群IOPS突破1亿，延迟稳定在200μs内。

桂月二二·2025-03-04 15:14

避免Hive和Spark生成HDFS小文件

HDFS是为大数据设计的分布式文件系统，对大数据做了存储做了针对性的优化，但却不适合存储海量小文件。

穷目楼·2025-03-03 22:36

大数据技术学习框架（更新中......）

小技工丨·2025-03-03 04:05

Ceph Cookbook: 掌握分布式存储技术的实践指南

本文还有配套的精品资源，点击获取简介：《CephCookbook》是一本面向希望深入学习Ceph分布式存储系统的读者的实用指南。本书通过实际案例和操作指导，全面介绍Ceph的核心概念和关键技术。

云山雾村·2025-02-28 11:31

深入探讨Ceph：分布式存储架构的未来

分布式存储技术应运而生，成为解决现代数据存储难题的关键方案，而Ceph作为分布式存储领域的佼佼者，正日益受到广泛关注和应用。

深度Linux·2025-02-28 10:50

FUSE，从内核到用户态文件系统的设计之路

JuiceFS就是基于FUSE构建的高性能分布式文件系统，充分发挥了FUSE的灵活性和扩展性。为了更好地理解FUSE的设计理念，我们将首先回顾内核文件系统以及网络文件系统（如

·2025-02-27 17:14

Hive SQL 使用及进阶详解

一、Hive简介Hive是建立在Hadoop之上的数据仓库基础架构，它提供了类似于SQL的查询语言HiveSQL（也称为HQL），用于对存储在Hadoop分布式文件系统（HDFS）中的大规模数据进行数据查询和分析

小四的快乐生活·2025-02-27 03:37

MongoDB 数据库简介

MongoDB概述MongoDB是一个基于分布式文件系统的NoSQL数据库，由10gen公司

wjs2024·2025-02-26 17:20

HDFS是如何存储和管理大数据

HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）是专为大数据处理而设计的分布式文件系统，具有高吞吐量、高容错性等特点，适用于大规模数据存储和管理。

python资深爱好者·2025-02-26 11:38

云原生时代的分布式文件系统设计与实现

Alluxio，一个开源的分布式文件系统，应运而生，为大数据和人工智能应用提供了革命性的解决方案。

ITPUB-微风·2025-02-25 08:33

jmeter 与大数据生态圈中的服务进行集成

以下为你详细介绍JMeter与大数据生态圈中几种常见服务（HadoopHDFS、Spark、Kafka、Elasticsearch）集成的方法：与HadoopHDFS集成实现思路HDFS是Hadoop的分布式文件系统

小赖同学啊·2025-02-24 13:40

HDFS分布式文件系统的架构及特点

一、HDFS架构HDFS采用的是主从（Master/Slave）架构，即一个HDFS通常是由一个Master和多个Slave组成。Master为NameNode主要用于管理HDFSSlave为DataNode主要用于存储文件SecondaryNode用于辅助NameNodeHDFS架构1.1BlockBlock是HDFS文件系统中最小的存储单位，通常称为数据块。在HDFS文件系统中存储的文件会被拆

互联网上的猪·2025-02-24 04:40

分布式NAS集群+ceph+CTDB

分布式存储系统中，分布式NAS、CTDB和Ceph常常被结合使用以提供高性能、高可用性和灵活扩展的存储解决方案。

Comedy_宁·2025-02-22 05:09

4.Ceph监控

Ceph监控演示如何监控一个Ceph集群。我们将学习如何用ceph的命令行工具进行监控。监控集群的整体状态健康状态ceph命令的health选项查看集群的健康状态。

yongbang_yan·2025-02-22 05:08

ceph fs status 输出详解

cephfsstatus命令用于显示Ceph文件系统的状态信息，其中各列的含义如下：RANK：元数据服务器（MDS）的等级或标识符。

时空无限·2025-02-22 05:38

ceph中报错“ clock skew detected on mon.ceph2, mon.ceph3”

自己搭建的ceph集群，显示时间不同步:clockskewdetectedonmon.ceph2,mon.ceph3但是查看chrony进程已经启动，ceph配置文件中,如下参数也已经配置，

下一页盛夏花开·2025-02-22 04:06

ceph-deploy osd activate xxx bluestore ERROR

cephluminous12.2.0bluestore添加osd出错:[ceph_deploy.conf][DEBUG]foundconfigurationfileat:/root/.cephdeploy.conf

only火车头·2025-02-22 04:33

ceph bluestore Blob 分析

cephversion:11.0.0bluestore包含一个非常重要的结构，Blob,本节主要分析Blob，注意ceph版本是基于11.0.0的。

only火车头·2025-02-22 04:03

ceph HEALTH_WARN clock skew detected on mon.f, mon.o, mon.p, mon.q

问题cephhealthdetail[WRN]MON_CLOCK_SKEW:clockskewdetectedonmon.f,mon.o,mon.p,mon.qmon.fclockskew0.243128s

时空无限·2025-02-22 04:29

一次交换机故障导致的云平台（opensatck+ceph）不可用的记录

前言发现几年前记录的一次由于交换机故障导致的云平台使用异常的问题，因为比较少见所以也整理记录一下一、细节过程用户联系说好多运行在云主机上的网页访问不了了，需要处理一下。甲方现场还挺远，我就先登陆在虚拟机上部署的堡垒机，发现堡垒机也不好使。机房运维联系说有台业务交换机坏了，有备件，正在更换。换上之后，过了一会，堡垒机就好使了。赶紧登陆上去检查服务。存储集群已经开始自动恢复，虚拟机也逐渐恢复了业务能力

大新新大浩浩·2025-02-22 04:29

Linux-ISCSI

⏰️创作时间：2025年02月17日19点50分iSCSI协议是没有同步机制的，要想解决同步机制，需要配置集群文件系统或者是分布式文件系统，防止数据不同步的问题iSCSI基于IP协议的技术标准，该技术允许用户通过

DC_BLOG·2025-02-20 20:16

推荐频道