fastDFS分布式文件系统

FastDFS在linux上部署

首先把需要的压缩文件上传到linux服务器中安装依赖：yum-yinstallgccyuminstall-yunzipzipyum-yinstalllibeventyum-yinstallpcrepcre-develzlibzlib-developensslopenssl-devel安装libfastcommon-master解压压缩包：unziplibfastcommon-master.zip进
狗语·2023-04-08 12:54

分布式文件存储系统MinIO

分布式文件存储系统MinIO实战这份笔记是摘抄B站视频图灵课堂出品的Minio视频，视频链接如下【MinIO很强-让我放弃FastDFS拥抱MinIO的8大理由】https://www.bilibili.com
_0.78·2023-04-08 11:40

Hbase高手之路 -- 第一章 -- Hbase简介

第一章–Hbase简介一、Hadoop从1970年开始，大多数的公司数据存储和维护使用的是关系型数据库大数据技术出现后，很多拥有海量数据的公司开始选择像Hadoop的方式来存储海量数据Hadoop使用分布式文件系统
落空空。·2023-04-08 09:16

GFS分布式文件系统

GFS分布式文件系统一、GlusterFS概述1、GlusterFS简介2、GlusterFS特点3、GlusterFS术语4、模块化堆栈式架构5、GlusterFS工作流程二、弹性HASH算法三、GFS
指尖_流逝的年华·2023-04-08 07:21

分布式文件存储

DFS）是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点（可简单的理解为一台计算机）DFS可以看作是一个接口:具体实现有OSS,GlusterFS、GoogleFS、FastDFS
风生u·2023-04-08 07:19

ES-Hadoop学习之ES和HDFS数据交换

ES作为强大的搜索引擎，HDFS是分布式文件系统。ES可以将自身的Document导入到HDFS中用作备份，ES也可以将存储在HDFS上的结构化文件导入为ES的中的Document。
wangjinming1976·2023-04-08 04:44

一文走进hadoop大数据技术生态！

一、概述1.1大数据与hadoop1.2组件介绍二、部署2.1部署模式2.2单机部署方式2.3单机数据分析2.3.1热点词汇分析三、核心组件架构介绍3.1HDFS架构及角色3.1.1HDFS角色--分布式文件系统
大唐有趣的小胡·2023-04-08 03:59

企业级Hadoop大数据平台实战（1）——认识Hadoop

Hadoop实现了一个分布式文件系统（Hado
CapejasmineY·2023-04-08 03:51

SpringBoot整合FastDFS

SpringBoot整合FastDFS文章目录SpringBoot整合FastDFS@[TOC](文章目录)前言FastDFS简介:一、安装FastDFS(使用Dokcer安装)1.从镜像库中拉起fastdfs
不会代码的蛋蛋·2023-04-08 02:10

11张图了解HDFS的架构设计！

HDFS介绍HDFS是一个适合部署在廉价机器上的，具有高度容错性的，高吞吐量的分布式文件系统。HDFS的设计理念支持超大规模数据集运行在HDFS上的应用具有很大的数据集。
hellozhouq·2023-04-07 18:23

简述HDFS架构——入门了解

HDFS（HadoopDistributedFileSystem）：Hadoop分布式文件系统。HDFS只是分布式文件系统中的一种。
以前不懂珍惜！·2023-04-07 18:10

HDFS 的架构

HDFS：Hadoop中的分布式文件系统HadoopDistributedFileSystem，存储和管理海量数据文件系统（FileSystem）：为了管理文件，在存储系统上建立的一些文件组织和结构主要包括文件目录和文件本身分布式
琳小小小·2023-04-07 18:01

minio文件服务器备份,springboot2.2.X手册：放弃fastdfs，整合Minio做文件服务器真香...

溪云阁：专注编程教学，架构，JAVA，Python，微服务，机器学习等，欢迎关注获取源码，篇幅较长，建议先收藏。目录什么是MinioMinio是Apcche旗下的一款开源的轻量级文件服务器，基于对象存储，协议是基于ApacheLicensev2.0，开源可用于商务。Minio主要用来存储非结构化的数据，类似文件，图片，照片，日志文件，各类备份文件等，按照官网描述，文件的大小从几KB到5TB。Min
弓弢·2023-04-07 14:07

Minio 分布式文件系统详解 分别使用java与js操作

Minio分布式文件系统详解分别使用java与js操作1、Minio服务搭建1.1、Minio单节点搭建1.2、Miniodocker部署1.3、Minio纠删码部署2、MinioClient的使用3、
Modify_QmQ·2023-04-07 14:32

分布式存储技术（上）：HDFS 与 Ceph的架构原理、特性、优缺点解析

面对企业级数据量，单机容量太小，无法存储海量的数据，这时候就需要用到多台机器存储，并统一管理分布在集群上的文件，这样就形成了分布式文件系统。
星环科技·2023-04-07 13:04

ceph磁盘集群

Samba...]提供文件系统共享3)SAN存储区域网络[iSCSI...]提供块共享4)分布式存储备注:文件系统(ext3,ext4,xfs,ntfs,fat32)常见的分布式存储：HadoopLustreFastDFSGlusterFSCeph
迎浪而上，逆浪而行·2023-04-07 12:25

六阶段大数据--day03--hadoop分布式文件系统HDFS/ MapReduce介绍/ Yarn资源调度

一分布式文件系统HDFS1.HDFS的来源HDFS:HadoopDistributedFilesystem(hadoop分布式文件系统)HDFS起源于Google的GFS论文（GFS，Mapreduce
心猿意码~~·2023-04-07 08:34

移动计算【临时，考完删】

移动计算三要素信息交互、无线通讯、移动终端网络要解决的问题将集中计算变为分布式计算远程通信：远程过程调用、分层协议设计、端到端参数配置容错与高可用性：分布式事务、两阶段提交、负载均衡远程信息访问：缓存、分布式文件系统
爱吃鱼的鸡米·2023-04-07 07:55

FastDFS

1.什么是FastDFS1.定义FastDFS(FastDistributedfilesystem)用c语言编写的一款开源的轻量级分布式文件系统2.功能:文件存储,文件访问(文件上传,文件下载)文件同步等
小Pawn爷·2023-04-06 22:39

主流分布式存储技术对比分析：GFS、HDFS、GlusterFS、Ceph、Swift

1引言目前市面上各个厂家的分布式存储产品五花八门，但是如果透过产品本身的包装看到其背后的核心技术体系，基本上会分为两种架构，一种是有中心架构的分布式文件系统架构，以GFS、HDFS为代表；另外一种是完全无中心的分布式存储架构
米朵儿技术屋·2023-04-06 19:18

GFS中一致性的总结

GFS中一致性的总结1.一致性(consistency)的背景只要在分布式系统中，不管是分布式文件系统还是分布式数据库，只要数据存在多个副本，就一定会涉及到一致性的问题。
血小板自动机·2023-04-06 19:11

GFS（Google 文件系统）的简略理解及自己的看法

GFS是google的一个带有可拓展的新式分布式文件系统，既然是可拓展，顾名思义可用于大量数据，大型数据或者分布式的一个访问系统。当然，也更高效，不然也不会有它的存在在这里。
柒柒个大菠萝·2023-04-06 19:32

GlusterFS 分布式文件系统

目录引言一、文件系统简介1.组成2.作用3.文件系统的挂载使用二、GFS分布式文件系统概述1.GFS简介2.GFS的特点3.GFS专业术语4.模块化堆栈式架构5.GFS工作流程6.各服务器详解三、GFS
头发莫的了呀·2023-04-06 19:59

实验：超详细的——GFS分布式文件系统！

设备列表：node1：20.0.0.3node2：20.0.0.5node3：20.0.0.6node4：20.0.0.7客户端：20.0.0.8开局必配操作，不然一定会出问题四台都要做此操作！！！[root@node1~]#systemctlstopfirewalld###关闭防火墙[root@node1~]#systemctldisablefirewalld###关闭自启动[root@node
EAsonTX·2023-04-06 19:58

【云计算与大数据技术】文件存储格式行式、列式、GFS、HDFS的讲解（图文解释 超详细）

一、分布式文件系统文件系统最后都需要以一定的格式存储数据文件，常见的文件存储布局有行式存储、列式存储以及混合式存储三种，不同的类别各有其优缺点和适用的场景，在目前的大数据分析系统中，列式存储和混合式存储方案因其特殊优点被广泛采用
showswoller·2023-04-06 19:23

云计算基础——云存储技术简介

多文件大量写入的应用数据大量读写的应用多个使用端都希望读取同一个文件的应用云存储技术的应用及其面临的问题云存储的应用领域备份归档分配共享协作云存储技术面临的问题互联网宽带的发展应用存储的发展集群技术、网络计算和分布式文件系统
肉肉肉肉肉肉~丸子·2023-04-06 19:13

开源的分布式文件系统GlusterFS（Gluster File System）

GlusterFS（全称为GlusterFileSystem）是一个开源的分布式文件系统，它可以将多台服务器的存储空间合并成一个大的、可扩展的存储池，提供高可靠性和高性能的文件共享和存储服务GlusterFS
Htojk·2023-04-06 17:34

linux fs源代码分析,BlueFs源代码分析报告.doc

BlueFs源代码分析报告BlueFs源代码分析报告一、什么是BluefsBluefs是密歇根大学电子工程与计算机科学系的研究者们提出的一个分布式文件系统。
weixin_39611546·2023-04-06 14:54

JuiceFS：读流程源码分析 + 预取 + 淘汰

文章目录引言源码分析读同步线程处理slice读数据异步预取淘汰关键总结参考文献引言juicefs是一款面向云原生设计的高性能分布式文件系统，其有如下特点：数据存储和元数据存储分离，可以适配多种数据和元数据存储引擎
easonwx·2023-04-06 14:27

JuiceFS：写流程源码解析+刷盘+数据一致性分析

引言juicefs是一款面向云原生设计的高性能分布式文件系统，其有如下特点：数据存储和元数据存储分离，可以适配多种数据和元数据存储引擎。
easonwx·2023-04-06 14:57

GFS论文中文翻译

原文地址：http://labs.google.com/papers/gfs.html摘要我们已经设计和实现了GoogleFileSystem，一个适用于大规模分布式数据处理相关应用的，可扩展的分布式文件系统
three_man·2023-04-06 13:55

GFS

GFS摘要我们设计并实现了GoogleGFS文件系统，一个面向大规模数据密集型应用的、可伸缩的分布式文件系统。
tanqiwen1·2023-04-06 13:24

分布式系统论文精读2：GFS

THEGoogleFileSystem2009摘要我们设计并实现了GoogleGFS文件系统，一个面向大规模数据密集型应用的、可伸缩的分布式文件系统。
污喵王の胖君·2023-04-06 13:50

GFS分布式文件系统

GFS分布式文件系统一、rsync的应用场景二、GFS分布式文件系统FS---文件系统文件系统组成：文件系统的作用：glusterfs简介glusterfs特点glusterfs术语模块化堆栈式架构glusterfs
dingshun129·2023-04-06 12:34

Google File System（GFS）中文版

e4%b8%ad%e6%96%87%e7%89%88/TheGoogleFileSystem中文版译者：alex摘要我们设计并实现了GoogleGFS文件系统，一个面向大规模数据密集型应用的、可伸缩的分布式文件系统
爱X的味道·2023-04-06 12:00

gfs翻译

ABSTRACT我们已经设计和实现了GoogleFileSystem，一个适用于大规模分布式数据处理相关应用的，可扩展的分布式文件系统。
北落师门_Orz·2023-04-06 12:26

【Java实战篇】Day3.在线教育网课平台

文章目录一、媒资模块环境搭建1、网关gateway2、Nacos3、搭建gateway二、分布式文件系统2.1文件系统2.2分布式文件系统2.3MinIO四、上传图片4.1需求分析4.2数据模型与环境配置
-代号9527·2023-04-06 11:41

GlusterFS/GFS 分布式文件系统--理论详解

文章目录一、文件系统简介1.组成2.作用3.文件系统的挂载使用二、GFS分布式文件系统概述1.GFS简介2.GFS的特点3.GFS专业术语4.模块化堆栈式架构5.GFS工作流程6.各服务器详解三、GFS
姜姜是美女·2023-04-06 09:15

GFS分布式文件系统(GlusterFS)

目录引言一、文件系统1、组件2、作用3、文件系统的挂载使用二、GlusterFS概述1、GFS简介组件2、GFS特点2.1扩展性和高性能2.2高可用性2.3全局统一命名空间2.4弹性卷管理2.5基于标准协议3、GFS专业术语3.1Brick（存储块）3.2Volume（逻辑卷）3.3FUSE3.4VFS（虚拟端口）3.5Glusterd（后台管理进程）4、模块化堆栈式架构GFS-client端网络
茉璃珞·2023-04-06 09:14

GFS(GlusterFS)分布式文件系统的构建

目录一:GlusterFS概述1.1:GlusterFS简介1.2:GlusterFS特点1.3:常用术语1.4:模块化堆栈式的结构二:GlusterFS工作原理及流程2.1:工作原理2.2:工作流程三：GlusterFS卷的类型及卷的创建方式3.1：分布式卷3.2：条带卷3.3：复制卷3.4：分布式条带卷3.5:分布式复制卷3.6:其它类型的卷四：GFS平台部署4.1：环境准备4.2：将添加的磁
我想喝橙汁儿~·2023-04-06 09:43

GFS 分布式文件系统

目录前言一、FS文件系统简介1.1文件系统的组成1.2文件系统的作用1.3文件系统的挂载使用二、GFS分布式文件系统2.1GFS简介2.2与传统分布式文件系统（如MFS）的区别2.3GlusterFS特点
醉凡尘￠ World1y·2023-04-06 08:48

GFS（GlusterFS）分布式文件系统

GFS（GlusterFS）分布式文件系统一.GlusterFS概述1.GliusterFS特点2.GFS组成3.GFS文件系统组成4.GFS术语5.GFS架构6.GlusterFS工作原理二.堆栈式架构
Don't complain ·2023-04-06 08:47

GFS分布式文件系统

文章目录GFS分布式文件系统一.GlusterFS简介二.GlusterFS特点三.GlusterFS术语四.GlusterFS的模块化堆栈式架构五.GlusterFS的工作流程六.后端存储如何定位文件七
好想睡懒觉qwq·2023-04-06 08:17

GlusterFS（GFS）分布式文件系统

目录一.文件系统简介1.文件系统的组成2.文件系统的作用3.文件系统的挂载使用二.GlusterFS概述1.GlusterFS是什么？2.GlusterFS的特点3.GlusterFS术语介绍3.1Brick（存储块）3.2Volume（逻辑卷）3.3FUSE3.4VFS（虚拟端口）3.5Glusterd（后台管理进程）4.GlusterFs采用架构二.GlusterFS的工作流程三.弹性HASH
小啄学习日记·2023-04-06 08:08

Hive的安装和配置

来源：千峰科技王从明老师第三节：Hive的简介3.1什么是HiveHive是一个数据仓库的工具，它可以将一个分布式文件系统上的有结构的文件映射成一张表，可以使用类sql语言进行对文件的查询、管理等操作。
如虎添·2023-04-06 06:33

GFS（GlusterFS）分布式文件系统（工作原理、部署步骤详解）

GFS（GlusterFS）分布式文件系统（工作原理、部署步骤详解）文章目录一、GlusterFS概述1.1GlusterFS简介与传统分布式相比的优点1.2GlusterFS的特点扩展性和高性能高可用性全局统一命名空间弹性卷管理基于标准协议
ChenWeiBlog·2023-04-05 23:41

GFS 分布式文件系统简述与Gluster群集部署

目录一、GFS概述1.1Gluster简介1.2Gluster常用术语1.3Gluster结构与工作原理1.4GlusterFS算法二、GlusterFS的卷类型2.1分布式卷2.2条带卷2.3复制卷2.4分布式条带卷2.5分布式复制卷三、Gluster群集部署3.1实验环境3.2实验准备工作3.3配置yum源安装Gluster3.4校验时间，添加gluster邻居3.5查看gluster节点3.
fantasy ~z·2023-04-05 23:39

GlusterFS（GFS）分布式文件系统

目录一：文件系统（FS）概述1.1文件系统的组成1.2文件系统的作用1.3文件系统的挂载使用二：GFS分布式文件系统2.1GFS简介2.2GFS和传统的分布式文件系统（MFS）的区别2.3GFS的特点2.3.1
糖醋·小排顾·2023-04-05 23:27

CentOS 7.6 GFS分布式文件系统部署

GFS分布式文件系统一、概述二、工作流程三、卷类型1、分布式卷2、条带卷3、复制卷4、分布式条带卷5、分布式复制卷四、部署GlusterFS群集1、环境准备2、yum安装glusterfs软件3、开启GlusterFS
把倒立的世界腾空·2023-04-05 23:55

GFS分布式文件系统+集群部署（图文超详细）

GFS分布式文件系统概述以及集群部署一、GlusterFS1、概述2、特点3、GlusterFS术语二、GlusterFS架构1、模块化、堆栈式的架构2、后端存储如何定位文件3、GFS支持的七种卷三、GFS
时代广场的蟋蟀·2023-04-05 23:24
上一页 21 22 23 24 25 26 27 28 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他