ftp+分布式文件系统

一文带你了解HDFS的shell命令

1准备知识HDFS：hadoop集群分布式文件系统，用来存储海量数据。
大数据超哥·2020-11-13 11:56

Flink__Flink1.10.0Basic API Concepts__Overview

数据处理结果通过Sink，写出到分布式文件系统，标准输出等。Flink
guyuetftb·2020-11-08 15:08

GFS分布式文件系统、结合实验分析各种存储卷的特点。深入刨析分布式存储的方式。

GFS分布式文件系统一、GFS（GlusterFS）概述二、GlusterFS的卷类型分1、布式卷2、条带卷3、复制卷4、分布式条带卷5、分布式复制卷三、实例搭建GFS实验1、实验规划图2、实验详细配置过程
wulimingde·2020-10-30 23:33

GFS分布式文件系统——理论加实例

GlusterFS的卷类型3.1分布式卷3.2条带卷3.3复制卷3.4分布式条带卷3.5分布式复制卷四、GlusterFS部署实例五、测试结果（现象详解）一、GlusterFS概述■GlusterFS简介开源的分布式文件系统有存储服务器
寻找散落的微光·2020-10-30 20:24

理论+实验——GFS分布式文件系统

文章目录一、GlusterFS概述1.1GlusterFS简介1.2GlusterFS的特点1.3GlusterFS术语1.4模块化堆栈式架构二、GlusterFS工作原理2.1GlusterFS工作流程2.2弹性HASH算法三、GlusterFS的卷类型3.1分布式卷3.2条带卷3.3复制卷3.4分布式条带卷3.5分布式复制卷四、实验：GlusterFS部署4.1开局4.2glusterd的yu
Jessica丶唯·2020-10-29 17:46

分布式文件系统FastDFS

为什么要使用分布式文件系统呢？嗯，这个问题问的好，使用了它对我们有哪些好处？
爱情小傻蛋·2020-10-28 00:22

理论+实验 详解GFS分布式文件系统

目录一GlusterFS概述1.1GlusterFS简介1.2GlusterFS特点1.3模块化堆栈式架构二GlusterFS工作原理2.1GLusterFS工作流程2.2弹性HASH算法三GlusterFS的卷类型3.1分布式卷3.1.1分布式卷3.1.2分布式卷的特点3.1.3创建分布式卷3.2条带卷3.2.1条带卷3.2.2条带卷的特点3.2.3创建条带卷3.3复制卷3.3.1复制卷3.3.
Mr_ChenWJ·2020-10-27 21:37

FASTDFS轻量级分布式文件系统快速上手(提供工具栏全套代码配置)

百度百科介绍FastDFS是一个C语言编写的开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡(https://baike.baidu.com
名字是乱打的_闭关写项目中·2020-10-26 19:00

分布式文件系统FastDFS安装使用及原理介绍_wenjin文瑾

FastDFS使用流程及原理介绍一.FastDFS的原理介绍问题1：什么是分布式文件系统分布式文件系统（DistributedFileSystem）是指文件系统管理的物理存储资源不一定直接连接在本地节点上
千俞文瑾·2020-10-25 17:10

HDFS概述（背景、优缺点、架构、块大小）

于是就迫切的需要一种系统来管理多台机器上的文件，这就是分布式文件系统，HDFS即hadoopdistributedfilesystem，是分布式文件管理系统中的一种。  
Emeraki·2020-10-25 16:30

理论+实验：Linux部署GFS分布式文件系统

目录一、GlusterFS概述1.1GlusterFS概述-11.2GlusterFS概述-21.3GlusterFS概述-3二、GlusterFS工作原理三、GlusterFS的卷类型3.1分布式卷3.2条带卷-13.3条带卷-23.4复制卷-13.5复制卷-23.6分布式条带卷-13.7分布式条带卷-23.8分布式复制卷四、GlusterFS部署步骤4.1GlusterFS部署-14.2Glu
0 day　·2020-10-24 15:06

20道大数据常见面试题

三个核心：hdfs，mapreduce和yarnHadfs：分布式文件系统，mapreduce:分布
liyawu337·2020-10-19 20:59

HDFS读流程

HDFS一个分布式文件系统，是Hadoop核心的一部分。HDFS采用主从结构模型，一个HDFS集群是由一个NameNode和若干个DataNode组成的。
nil_ddea·2020-10-19 00:47

畅购商城(十四)：秒杀系统「下」

好好学习，天天向上本文已收录至我的Github仓库DayDayUP：github.com/RobodLee/DayDayUP，欢迎Star畅购商城(一)：环境搭建畅购商城(二)：分布式文件系统FastDFS
Robod·2020-10-18 11:25

MooseFS在Ubuntu16下的安装

MooseFSMooseFS是一个优秀的分布式文件系统，挂载后和读写本地磁盘上的文件无异，是替代NFS的理想选择。
waynedeng·2020-10-11 15:41

ceph分布式存储

Ceph是一个开源的分布式文件系统。因为它还支持块存储、对象存储，所以很自然的被用做云计算框架openstack或cloudstack整个存储后端。
幸福~眼泪·2020-10-11 15:00

Hadoop大数据平台架构与实践-基础篇

一、Hadoop两大核心组成1.HDFS分布式文件系统：存储2.MapReduce:并行计算二、HDFS基本概念block块：固定大小为64M的逻辑单元，HDFS的文件被分成块进行存储NameNode：
Derrick_Xu·2020-10-11 12:24

第五周周报 - 草稿

HDFS分布式文件系统Hadoop文件系统使用分布式文件系统设计开发。它是运行在普通硬件。不像其他的分布式系统，HDFS是高度容错以及使用低成本的硬件设计。
john_jiang·2020-10-11 00:00

fastdfs+nginx集群搭建的实现

一.简介fastdfs1.什么是fastdfsfastdfs是一个轻量级的开源分布式文件系统；fastdfs主要解决了大容量的文件存储和高并发访问的问题，文件存取时实现了负载均衡；fastdfs实现了软件方式的
·2020-10-10 12:13

FastDFS单节点部署

FastDFS是由淘宝的余庆先生所开发，是一个轻量级、高性能的开源分布式文件系统，用纯C语言开发，包括文件存储、文件同步、文件访问（上传、下载）、存取负载均衡、在线扩容、相同内容只存储一份等功能，适合有大容量存储需求的应用或系统
Java_Explorer·2020-10-10 09:57

实时备份工具——云灾备

云备份是通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储备份和业务访问的功能服务。
UCache云灾备·2020-10-09 17:10

分布式文件系统--清华陈康

fromArray=search_result分布式系统的思考方法：以分布式文件系统为例(计算未来云讲坛：大咖来啦)https://www.xuetangx.com/live/live20200325005
持续努力·2020-10-09 17:18

Hadoop_HDFS之数据读取、写入详解，存放机制 周期

NameNode的作用DataNode的作用HDFS写入数据的流程HDFS读取数据的流程数据校验DataNode节点丢失周期HDFS全称HadoopDistributeFileSystem：Hadoop分布式文件系统主要作用
qq_45798620·2020-10-09 15:36

HDFS学习笔记

一、概述HDFS是一种适合运行在商用硬件(commodityhardware)上的分布式文件系统。和其他的分布式文件系统相比较，它有如下特点：1、适合存储超大文件2、适合一次写入，
我是老薛·2020-10-09 14:20

Hadoop框架：HDFS简介与Shell管理命令

HDFS(Hadoop-Distributed-File-System)，它是一个分布式文件系统，用于存储文件，通过目录树来定位文件;设计初衷是管理数成百上千的服务器与磁盘，让应用程序像使
知了一笑·2020-10-09 13:59

FastDFS 分布式文件系统详解

什么是文件系统文件系统是操作系统用于在磁盘或分区上组织文件的方法和数据结构。磁盘空间是什么样的我们并不清楚，但文件系统可以给我们呈现一个非常清晰的表象，我们可以创建、删除、修改和复制这些文件，而实现这些功能的软件就是文件系统。操作系统中负责管理和存储文件信息的软件被称为文件管理系统，简称文件系统。文件系统是操作系统的一个重要组成部分，通过对操作系统所管理的存储空间的抽象，向用户提供统一的、对象化的
哈喽沃德先生·2020-10-09 10:36

Hadoop组成

HadoopHDFS：一个高可靠、高吞吐量的分布式文件系统，对海量数据的存储。HadoopMapReduce：一个分布式的资源调度和离线并行计算框架。
代码包工头·2020-10-08 18:16

需要搭建一个高性能的文件系统？我推荐你试试它

前言今天给大家介绍的是FastDFS，一个开源的分布式文件系统，也是入职之后接触到的一个技术，由于公司项目业务需求，服务器里存了上亿量级的文件，所以使用了这么一项技术来存储这些文件，我也就随之开始了解这项技术
wx5d30212829a35·2020-10-08 15:23

Hadoop学习笔记（1）

谷歌提出了GFS分布式文件系统，将文件切片分别存在不同的服务器，每个切片保存多个供容错使用的副本。待客户端调用时，将切片整合，并提供给用户。  相应的开源实现为HDFS。如何提升计算效率？  
丶苍炎战神丶·2020-10-07 09:47

Hadoop离线_HDFS详细介绍

文章目录1分布式文件系统设计思路以及文件系统的基本介绍1.1设计思路1.2文件系统的基本介绍2hdfs文件系统的设计目标3hdfs的来源以及hdfs的架构图和副本机制以及block块存储3.1来源3.2
_WeiA·2020-10-05 20:01

FastDFS 分布式文件系统详解

什么是文件系统文件系统是操作系统用于在磁盘或分区上组织文件的方法和数据结构。磁盘空间是什么样的我们并不清楚，但文件系统可以给我们呈现一个非常清晰的表象，我们可以创建、删除、修改和复制这些文件，而实现这些功能的软件就是文件系统。操作系统中负责管理和存储文件信息的软件被称为文件管理系统，简称文件系统。文件系统是操作系统的一个重要组成部分，通过对操作系统所管理的存储空间的抽象，向用户提供统一的、对象化的
哈喽沃德先生·2020-09-30 09:49

Hadoop框架：HDFS简介与Shell管理命令

HDFS(Hadoop-Distributed-File-System)，它是一个分布式文件系统，用于存储文件，通过目录树来定位文件;设计初衷是管理数成百上千的服务器与磁盘，让应用程序像使
知了一笑·2020-09-29 15:35

Hadoop框架：HDFS简介与Shell管理命令

HDFS(Hadoop-Distributed-File-System)，它是一个分布式文件系统，用于存储文件，通过目录树来定位文件;设计初衷是管理数成百上千的服务器与磁盘，让应用程序像使
知了一笑·2020-09-29 15:00

大数据平台Hadoop集群搭建

HDFS是一个分布式文件系统，类似mogilefs，但又不同于mogilefs，hdfs由存放文件元数据信息的namenode和存放数据的服务器datanode组成；hdfs它不同于mogilefs，hdfs
Linux-1874·2020-09-28 01:00

GFS分布式文件系统

GFS分布式文件系统一、GlusterFS概述二、GlusterFS特点三、GlusterFS术语四、GlusterFS工作原理五、GlusterFS的卷类型1、分布式卷2、条带卷3、复制卷4、分布式条带卷
daxiongbaobei·2020-09-20 16:18

分布式文件系统之FastDFS安装部署

前面我们了解了分布式文件系统mogilefs的框架以及安装部署和简单使用，回顾请参考https://www.cnblogs.com/qiuhom-1874/tag/MogileFS/；今天我们来了解下FastDFS
Linux-1874·2020-09-19 19:00

Nginx反代MogileFS集群

上一篇博文我们主要聊了下分布式文件系统MogileFS的组件以及部署使用，回顾请参考https://www.cnblogs.com/qiuhom-1874/p/13677279.html；今天我们主要来聊一下
Linux-1874·2020-09-17 23:00

部署Hadoop-3.0-高性能集群

HDFS分布式文件系统为海量的数据提供了存储，则MapReduce为海量的数据提供了计算。网方网站：http://hadoop.apache.org/H
weixin_30748995·2020-09-17 09:29

【Linux云计算架构：第三阶段-Linux高级运维架构】第12章——•部署Hadoop3.0高性能集群

HDFS分布式文件系统为海量的数据提供了存储，则MapReduce为海量的数据提供了计算。网方网站：http://hadoop.apache.org/Had
就叫一片白纸·2020-09-17 09:21

分布式文件系统 IPFS 与 FileCoin

分布式文件系统IPFS与FileCoin在这篇文章中，我想聊一聊最近比较热门的IPFS（InterPlanetaryFileSystem），一个点对点的分布式文件系统；从HTTP协议出现到今天已经过去了半个多世纪
超级太空人·2020-09-17 07:11

TP框架-storage类分析

namespaceThink;//分布式文件存储类classStorage{/***操作句柄*@varstring*@accessprotected*/staticprotected$handler;/***连接分布式文件系统
只会打野怪我咯·2020-09-17 02:06

GFS分布式文件系统

GlusterFS的卷类型3.1分布式卷3.2条带卷3.3复制卷3.4分布式条带卷3.5分布式复制卷3.6访问控制四、Gluster群集部署一、GlusterFS概述1.1GlusterFS简介开源的分布式文件系统由存储服务器
琴酒3·2020-09-16 23:09

分布式文件系统之MogileFS的安装使用

一、简介MogileFS是一个开源的分布式文件存储系统，由LiveJournal旗下的DangaInteractive公司开发；它主要由三部分组成，第一部分是server端，server端主要包括mogilefsd和mogstored两个应用程序。mogilefsd实现的是tracker，它通过数据库来保存元数据信息，包括站点domain、class、host等；mogstored是存储节点(st
Linux-1874·2020-09-16 23:00

性能最高提升300%！阿里云数据库HBase版上线

点击查看全文阿里云正式推出云数据库HBase版（ApsaraDBforHBase），100%兼容HBase协议的分布式数据库，基于HDFS分布式文件系统，支持高达10PB的存储空间，满足最高5000WQPS
Mc顽固份子·2020-09-16 17:25

HBase极简入门

其使用分布式文件系统来存储大数据，而MapReduce来处理它。Hadoop擅长存储和处理各种格式的巨大数据，如任意，半或甚至非结构化。Hadoop只能执行批处理，而数据只能按顺序访
wolfcode_cn·2020-09-16 17:59

hadoop学习笔记2---hadoop的三种运行模式

没有分布式文件系统，直接读写本地操作系统的文件系统。
weixin_34014555·2020-09-16 13:42

谷歌三大核心技术（一）The Google File System中文版

/blog.csdn.net/jiangjunshowTheGoogleFileSystem中文版译者：alex摘要我们设计并实现了GoogleGFS文件系统，一个面向大规模数据密集型应用的、可伸缩的分布式文件系统
我为AI领域做了奉献·2020-09-16 12:56

理论+实验·GFS分布式文件系统

GFS分布式文件系统文章目录GFS分布式文件系统一、GlusterFS概述GlusterFS简介GlusterFS特点GlusterFS术语模块化堆栈式架构二、GlusterFS工作原理GlusterFS
weixin_47153668·2020-09-16 08:53

FastDFS安装、启动与文件访问设置

目录1、分布式文件系统概述2、FastDFS简介3、FastDFS安装前准备：3.1、检查Linux上是否安装了gcc、libevent、libevent-devel，执行如下yum命令检查：3.2、安装
蓝关故人·2020-09-16 07:05

IPFS 使用全记录

IPFS是什么IPFS(InterPlanetaryFileSystem)是一个内容寻址、版本化、点对点的分布式文件系统。
weixin_33737134·2020-09-16 04:15
上一页 31 32 33 34 35 36 37 38 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他