ftp+分布式文件系统

ceph分布式存储

特点：1.统一存储虽然ceph底层是一个分布式文件系统，但由于在上层开发了支持对象和块的接口。所以在开源存储软件中，能够一统江湖。至于能不能千秋万代，就不知了。2.高扩展性扩容方便、容量大。
欢愉的猫·2023-09-26 15:43

大数据分析的几种方法

适用于大数据的技术，包括大规模并行处理(MPP)数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。
中琛源科技·2023-09-26 08:57

Hadoop分布式文件系统

一、HadoopHadoop之父DougCuttingHadoop的发音[hædu:p]，Cutting儿子对玩具小象的昵称1、Hadoop发展简史2002年10月，DougCutting和MikeCafarella创建了开源网页爬虫项目Nutch。2003年10月，Google发表GoogleFileSystem论文。2004年7月，DougCutting和MikeCafarella在Nutch
杀神lwz·2023-09-26 05:08

FastDFS在Ubuntu18下的离线单机安装步骤和简单应用

简述FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。
小码农大叔叔·2023-09-26 00:04

GFS 分布式文件系统

GlusterFS简介GlusterFS是一个开源的分布式文件系统。由存储服务器、客户端以及NFS/Samba存储网关（可选，根据需要选择使用）组成。
Z在学习·2023-09-25 21:37

Hadoop初识及信息安全（大数据的分布式存储和计算平台）

Hadoop的广义和狭义区分：狭义的Hadoop:指的是一个框架，Hadoop是由三部分组成：HDFS：分布式文件系统--》存储；MapReduce:分布式离线计算框架--》计算；Yarn:资源调度框架
墨痕诉清风·2023-09-25 11:40

内部表和外部表的区别

存储位置：内部表的数据存储在数据库的数据文件中，而外部表的数据通常存储在独立的文件系统或外部数据源中，如操作系统的文件系统、分布式文件系统、Hado
鸡蛋灌饼侠·2023-09-25 06:08

GFS分布式文件系统

目录1、GFS理论1.1、概述1.2、GFS的基本概念和架构：1.2.1.基本概念1.2.2.架构：1.3、GFS的基本组成部分包括：1.4、GFS具有以下几个关键特点：1.5、GlusterFS特点1.6、GFS的术语1.7、GlusterFS采用模块化、堆栈式的架构。1.8、GlusterFS的工作流程1.9、TCP与IB的区别1.10、弹性HASH算法2、GFS的卷类型2.1、分布式卷2.1
微※风·2023-09-24 22:25

各类分布式文件系统的区别和概述 | HDFS、GFS、Ceph、TFS、Moosefs、IPFS等

文章目录参考分布式文件系统定义各类系统对比图各类文件系统简介shepdogshepdog基本架构CephFastDFSfastDFS介绍Trackerserver追踪服务器Storageserver储存服务器客户端
stone_fall·2023-09-23 23:56

分布式文件系统对比与选型参考

目录一、分布式文件系统1、数据的存储方式：2、数据的读取速率3、数据的安全机制二、主流分布式文件系统介绍1.GFS（GoogleFileSystem）2.HDFS（HadoopDistributedFileSystem
草莓不苦·2023-09-23 23:55

MiniIO详解 分布式文件系统 MiniIO 教程

分布式文件系统1.分布式文件系统的前生今世什么是对象存储？对象存储，官方的名词解释是：对象存储是基于对象的存储，是用来描述解决和处理离散单元的方法的通用术语，这些离散单元被称作对象。
邯郸彭于晏!·2023-09-23 23:23

使用MinIO构建分布式文件系统来一次分布式文件系统实战！

随着文件数据的越来越多，传统的文件存储方式通过tomcat或nginx虚拟化的静态资源文件在单一的服务器节点内已经无法满足系统需求，也不利于文件的管理和维护，这就需要一个系统来管理多台计算机节点上的文件数据，这就是分布式文件系统
Java_LingFeng·2023-09-23 23:52

minio分布式文件系统适用场景

1.架构主从模式，多主还是单主,还是无中心架构的.无中心架构2.快照是否支持，原理是如何实现的，是基于日志的读写还是基于内存的MinIO支持快照功能。通过使用MinIO的快照功能，您可以创建和管理对象存储桶中的数据快照。快照是一个只读副本，它捕获了特定时间点上存储桶中所有对象的状态。MinIO的快照功能是基于存储桶的元数据和数据副本来实现的，快照创建时，MinIO会创建一个只读副本，该副本包含存储
symop·2023-09-23 23:21

云原生,分布式与微服务

目前比较常用的分布式系统的设计，HDFS或者GFS（分布式文件系统）、Kafka和Pulsar（分布式消息队列），RedisCluster和Codis（分布式缓存），MySQL的分库分表（传统关系型数据库的分布式方案
宋song一·2023-09-23 11:15

微服务想用好，先把分布式和微服务之间的关系搞清楚

一、分布式和微服务架构的定义分布式应用场景涵盖的面非常广，我理解的部分：不同进程之间的互相通信，不同主机的分布式对象之间调用，用于大数据存储的分布式文件系统，用于网络之间相互识别的命名服务，集群中计算或存储的无中心对等模型
gman344·2023-09-23 11:44

GFS分布式文件系统

目录GlusterFS概述GlusterFS的特点GlusterFS术语GlusterFS工作原理编辑GlusterFS的卷类型分布式卷条带卷复制卷特点：卷中所有的服务器均保存一个完整的副本。分布式条带卷分布式复制卷部署群集环境1、准备环境（所有node节点上操作）2、安装、启动GlusterFS3、添加节点到存储信任池中（在一台操作即可）4、创建卷5、部署Gluster客户端GlusterFS概
ffdtj·2023-09-23 10:29

大数据分布式处理框架Hadoop

Hadoop核心组件HDFS（HadoopDistributedFileSystem分布式文件系统）：是Hadoop的存储层，将数据分布存储在多个节点上，提供高可用性和高容错性。MapReduc
真空零点能·2023-09-23 07:08

Linux：GlusterFS 集群

GlusterFS介绍1）Glusterfs是一个开源的分布式文件系统,是Scale存储的核心,能够处理千数量级的客户端.在传统的解决方案中Glusterfs能够灵活的结合物理的,虚拟的和云资源去体现高可用和企业级的性能存储
鲍海超-GNUBHCkalitarro·2023-09-22 18:55

Hadoop-HDFS

whatHadoopHDFS(HadoopDistributedFileSystem)是ApacheHadoop中的分布式文件系统。它是一个流行的分布式文件系统,适合运行在的集群上。
密斯特.张先生·2023-09-22 12:47

ceph分布式存储部署

特点1、统一存储虽然ceph底层是一个分布式文件系统，但由于在上层开发了支持对象和块的接口。所以在开源存储软件中，能够一统江湖。至于能不能千秋万代，就不知了。2、高扩展性扩容方便、容量大。
lsqaa·2023-09-22 07:55

ceph分布式存储

特点1.统一存储虽然ceph底层是一个分布式文件系统，但由于在上层开发
载雨舟·2023-09-22 04:44

换个视角深入理解GlusterFS，GlusterFS缺点分析

GlusterFS（GNUClusterFileSystem）是一个开源的分布式文件系统，它的历史可以追溯到2006年，最初的目标是代替Lustre和GPFS分布式文件系统。
苍山雪麓·2023-09-22 03:12

Hadoop集群之HDFS

HDFS简介HDFS全称HadoopDistributedFileSystem，是一个分布式文件系统，基于Google三大论文之一的GoogleFileSystem开发。
风起云端·2023-09-22 03:33

GFS 分布式文件系统

目录一、GlusterFS概述二、GlusterFS特点1、扩展性和高性能2、高可用性3、全局统一命名空间4、弹性卷管理5、基于标准协议三、GlusterFS术语1、Brick（存储块）2、Volume（逻辑卷）3、FUSE4、VFS5、Glusterd（后台管理进程）四、模块化堆栈式架构五、GlusterFS的工作流程六、弹性HASH算法1、弹性hash算法的概念2、弹性HASH算法的优点七、G
我叫yyy·2023-09-21 21:11

大数据存储与处理

以下是关于大数据存储与处理的一些关键概念和技术：1.数据存储：大数据通常需要高效的存储解决方案，包括分布式文件系统（如HadoopHDFS）和分布式数据库系统（如ApacheCassandra、HBase
猫一样的女子245·2023-09-21 19:39

GFS 分布式文件系统

GlusterFS概述1．GlusterFS简介GlusterFS是一个开源的分布式文件系统。由存储服务器、客户端以及NFS/Samba存储网关（可选，根据需要选择使用）组成。
奇迹也被称为侥幸与横祸·2023-09-21 12:46

什么是TFS-分布式文件系统

TFS（TeamFoundationServer）是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统，主要针对海量的非结构化数据，它构筑在普通的Linux机器集群上，可为外部提供高可靠和高并发的存储访问
入秋枫叶·2023-09-21 05:31

GFS 分布式文件系统

GlusterFS的工作流程弹性HASH算法GlusterFS的卷类型部署GlusterFS群集准备环境安装、启动GlusterFS创建卷部署Gluster客户端GlusterFS简介GlusterFS是一个开源的分布式文件系统
whtqwq·2023-09-21 00:10

从一到无穷大 #16 ByteSeries，思考内存时序数据库的必要性

但是如果换个思路，缓存即为内存时序数据库，长久存储为为其他（分布式文件系统，对象存储，基于磁盘的时序数据库）
李兆龙的博客·2023-09-20 19:37

GFS 分布式文件系统

---------------------GlusterFS概述----------------------------------------1．GlusterFS简介GlusterFS是一个开源的分布式文件系统
会失眠的床·2023-09-20 08:42

Ftp服务器、 Samba服务器、NFS服务器的区别

下面是三种服务器的对比情况：各个服务器的配置NFS服务器：NFS是SUNMicrosystem公司开发的网络文件系统，它是一种基于远程过程调用（RPC）的分布式文件系统架构
肆壹柒Z·2023-09-20 06:02

9月11-12日上课内容 第二章 GFS 分布式文件系统

本章结构前言存储块存储硬盘文件存储nfslvmraidext4ext3centos6xfscentos7对象存储GFSCephfastdfs云端OSS阿里云存储url链接S3亚马逊url链接switch一、GlusterFS概述文件进入硬盘里面，用什么东西来调用它？系统：用户态和内核态通过内核层面去调用硬件设备，协同各方，存储数据，文件系统在内核层面来调用用户态只做操作无元数据：保存数据的地方1．
m0_70766460·2023-09-19 15:02

GFS分布式文件系统

本章结构1、GFS概述2、GFS特点3、GFS术语4、GFS工作原理5、GFS的卷类型6、部署集群环境7、创建卷，部署客户端，测试文件系统8、其他维护命令一、GFS概述GlusterFS是一个开源的分布式文件系统
manyulanlanlu·2023-09-19 14:28

分布式文件系统ceph安装

介绍前面的文章中，我们讲到kubernetes想实现pod数据的持久化，也就是存储这块是比较难。当然在开源界已经有好几款比较成熟的产品，比如Ceph，GlusterFS,TFS,HDFS等。GlusterFS，ceph在最近几年发展火热。在选型方面，个人更加倾向于社区火热的项目，GlusterFS、Ceph都在考虑的范围之内，但是由于GlusterFS只提供对象存储和文件系统存储，而Ceph则提供
jerry的技术与思维·2023-09-19 10:22

GFS 分布式文件系统

1、GlusterFS概述1.1GlusterFS简介GlusterFS是一个开源的分布式文件系统。由存储服务器、客户端以及NFS/Samba存储网关（可选，根据需要选择使用）组成。
BryantLSY·2023-09-19 10:05

分布式文件系统 FastDFS

fr=aladdinFastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和
撸帝·2023-09-18 23:31

HBase 数据库介绍

Hadoop使用分布式文件系统，用于存储大数据，并使用MapReduce分布式计算来处理。Hadoop擅长于存储各种格式的庞大的数据，任意的格式甚至非
.道不虚行·2023-09-18 18:09

MapReduce & YARN 的部署

1、部署说明HadoopHDFS分布式文件系统，我们会启动：NameNode进程作为管理节点DataNode进程作为工作节点SecondaryNamenode作为辅助同理，HadoopYARN分布式资源调度
新征程，再出发·2023-09-18 03:30

GFS 分布式文件系统

目录1、GlusterFS概述1.1GlusterFS简介1.2GlusterFS特点1.3GlusterFS术语1.4模块化堆栈式架构1.5GlusterFS的工作流程1.6弹性HASH算法1.7GlusterFS的卷类型2、部署GlusterFS群集2.1关闭防火墙2.2磁盘分区，并挂载2.3修改主机名，配置/etc/hosts文件2.4安装、启动GlusterFS（所有node节点上操作）2
曦雨天梦·2023-09-18 03:19

GFS 分布式文件系统

目录一、GlusterFS概述二、GlusterFS特点1、扩展性和高性能2、高可用性3、全局统一命名空间4、弹性卷管理三、GlusterFS术语1、Brick（存储块）2、Volume（逻辑卷）3、FUSE4、VFS5、Glusterd（后台管理进程）四、模块化堆栈式架构五、GlusterFS的工作流程六、弹性HASH算法1、弹性hash算法的概念2、弹性HASH算法的优点七、GFS卷的类型1、
云开朗·2023-09-18 02:04

分布式文件系统 FastDFS 5.0.5 & Linux CentOS 7 安装配置

前言项目中用到文件服务器，有朋友推荐用fastdfs，所以就了解学习了一番，感觉确实颇为强大，在此再次感谢淘宝资深架构师余庆大神开源了如此优秀的轻量级分布式文件系统，本篇blog就记录一下fastdfs
小灯光环·2023-09-17 21:05

php 删除fastdfs文件名,浅析FastDFS及所遇问题集锦

一、FastDFS简介FastDFS(最新版本v3.04)是一个开源的轻量级分布式文件系统，它用纯C语言实现，支持Linux、FreeBSD、AIX等UNIX系统。
舟舟州·2023-09-17 19:06

FastDFS是什么

FastDFS是什么FastDFS是使用c语言编写的开源高性能分布式文件系统是由淘宝开发平台部资深架构师余庆开发，FastDFS孵化平台板块他对文件进行管理，功能包括文件存储，文件同步，文件访问等，解决了大容量存储和负载均衡的问题特别适合文件载体的在线服务
洁癖汪·2023-09-17 07:46

基于Docker搭建分布式文件系统FastDfs

FastDFS是一个开源的分布式文件系统，它对文件进行管理，功能包括：文件
我们都很努力着·2023-09-16 16:15

什么是存储计算分离架构？

1.背景首先我们谈谈Hadoop的背景，说到Hadoop起源，就离不开Google的三辆马车：GoogleFileSystem、MapReduce和BigTable，分别说了分布式文件系统、分布式计算MR
中关村_周某·2023-09-16 12:12

GFS 分布式文件系统

1．GlusterFS简介GlusterFS是一个开源的分布式文件系统。由存储服务器、客户端以及NFS/Samba存储网关（可选，根据需要选择使用）组成。
- joke·2023-09-16 09:51

FastDFS安装及配置

FastDFS安装及配置1.FastDFS简介FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理。FastDFS架构包括Trackerserver和Storageserver。
69循环·2023-09-16 09:43

ubuntu系统安装hadoop

Hadoop分布式计算平台，核心是分布式文件系统HDFSubantu下安装jdkwgethttps://repo.huaweicloud.com/openjdk/18.0.1.1/openjdk-18.0.1.1
shigen01·2023-09-16 02:30

【程序猿包邮送书：第四期】《分布式统一大数据虚拟文件系统——Alluxio原理、技术与实践》

欢迎来到爱书不爱输的程序猿的博客,本博客致力于知识分享，与更多的人进行学习交流爱书不爱输的程序猿：送书第三期点击直达福利前言一、分布式文件系统元数据的常见类型1.1文件（inode）元数据1.2数据块（
爱书不爱输的程序猿·2023-09-15 18:44

实现分布式架构与云原生的操作流程--干货分享

3、分布式数据存储：采用分布式数据库或分布式文件系统来存储数据，避免单点故障。4、负载均衡和容错：采用负载均衡和容错机制，使得
奔向理想的星辰大海·2023-09-15 17:58
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他