E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
fastDFS分布式文件系统
Linux搭建
FastDFS
文件服务器并实现springboot上传文件到
FastDFS
服务器
www.myblogs.cn/
fastDFS
二,搭建
FastDFS
文件服务器1,首先需要安装需要的依赖yum-yinstallgcc-c++yum-yinstalllibevent2,然后使用xftp把需要的压缩包上传到
本少爷来了
·
2021-04-12 23:30
FIL挖矿的收益你知道几种?
Filecoin星际文件系统(IPFS)是一种点对点的
分布式文件系统
,旨在连接所有具有相同文件系统的计算机设备。
IPFS-星云
·
2021-04-10 09:13
区块链
ipfs
Hadoop HDFS API 操作图文详解及参数解读
HDFS是Hadoop的
分布式文件系统
,负责海量数据的存取HDFS系列文章请参考:一、HDFS概述|优缺点|组成架构|文件块大小二、HDFS常用Shell命令|图文详解三、HDFS搭建客户端API环境|
lesileqin
·
2021-04-08 15:30
大数据学习笔记
Hadoop
java
大数据
hdfs
hadoop
api
Hadoop HDFS 搭建客户端 API 环境 | 图文详解 | 提供依赖下载连接
HDFS是Hadoop的
分布式文件系统
,负责海量数据的存取HDFS系列文章请参考:一、HDFS概述|优缺点|组成架构|文件块大小二、HDFS常用Shell命令|图文详解三、HDFS搭建客户端API环境|
lesileqin
·
2021-04-07 15:06
大数据学习笔记
Hadoop
maven
大数据
log4j
hadoop
hdfs
Hadoop HDFS 常用Shell命令 | 图文详解
HDFS是Hadoop的
分布式文件系统
,负责海量数据的存取HDFS系列文章请参考:一、HDFS概述|优缺点|组成架构|文件块大小二、HDFS常用Shell命令|图文详解三、HDFS搭建客户端API环境|
lesileqin
·
2021-04-05 17:24
大数据学习笔记
Hadoop
linux
hadoop
大数据
hdfs
命令
2021年 全网最细大数据学习笔记(一):初识 Hadoop
大数据的特点3、大数据行业应用4、Hadoop与大数据5、其他大数据处理平台6、大数据人才二、什么是Hadoop1、Hadoop简介2、Hadoop的发展历史3、Hadoop的特点三、Hadoop核心1、
分布式文件系统
Amo Xiang
·
2021-04-04 21:58
大数据开发
大数据
分布式
hadoop
docker 安装minio及实现文件上传、删除、下载
docker安装minio及实现文件上传、删除、下载要搭建一个分布式文件存储系统,听说
fastDFS
能实现,于是我搜了一下
fastDFS
,结果半路杀出一个minio考虑到拓展性、开发api文档完善度、部署效率等原因我选择了
宏辉
·
2021-04-02 23:26
Docker
docker
fastdfs
centos
java
upload
GlusterFs-1-分布式存储文件系统
参考glusterfs
分布式文件系统
详细原理参考glusterfs架构和原理参考GlusterFS安装及配置1分布式存储系统分布式存储,如谷歌的
分布式文件系统
GFS、分布式表格系统googleBigtable
皮皮冰燃
·
2021-04-02 14:46
分布式存储
跟我学丨如何用鲲鹏服务器搭建Hadoop全分布式集群
使用本地文件系统,而不是
分布式文件系统
·
2021-03-31 15:58
跟我学丨如何用鲲鹏服务器搭建Hadoop全分布式集群
使用本地文件系统,而不是
分布式文件系统
·
2021-03-31 15:58
hadoop大数据平台搭建(一)
适用于大数据的技术,包括大规模并行处理(MPP)数据库、数据挖掘、
分布式文件系统
、分布式数据库、云计算平台、互联网和可扩展的存储系
卫魔王
·
2021-03-28 15:33
hadoop搭建
hadoop
hdfs
spark
zookeeper
大数据
FastDFS
theme:hydrogenhighlight:agate头图来自:https://www.zcool.com.cn/u/14...
FastDFS
一、
FastDFS
基本了解1、
FastDFS
概念
FastDFS
·
2021-03-23 01:15
javafastdfs
FastDFS
theme:hydrogenhighlight:agate头图来自:https://www.zcool.com.cn/u/14...
FastDFS
一、
FastDFS
基本了解1、
FastDFS
概念
FastDFS
·
2021-03-23 01:30
javafastdfs
龙芯3A2000移植Hadoop指南
龙芯3A2000上运行Hadoophadoop实现了一个
分布式文件系统
(hadoopDistributedFileSystem),简称HDFS。
·
2021-03-22 14:58
hadoop应用安全移植龙芯
新年上班第一天生产环境
分布式文件系统
崩了!!
写在前面说来也怪,早不崩晚不崩,偏偏在上班第一天的时候,生产环境
分布式文件系统
崩了。
·
2021-03-21 11:07
程序员fastdfs数据存储
云服务器Ubuntu系统安装搭建
FastDFS
百度云盘下载:链接:https://pan.baidu.com/s/1LCBukP5BbdRvZyFnTmjJPw提取码:7gxy2、创建好tracker和storage文件夹mkdir-p/home/mm/
fastdfs
安易学车
·
2021-03-20 09:36
Centos7.x 搭建
FastDFS
并通过Nginx配置http或https访问
FastDFS
及其架构的简介:
FastDFS
:是一个开源的
分布式文件系统
,用C语言实现,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题
dev_winner
·
2021-03-19 22:33
大数据学习总结(2021版)---Hadoop(入门)
这里写目录标题第1章Hadoop概述1.1大数据部门业务流程分析、部门组织结构(重点)1.2Hadoop组成(面试重点)1.2.1HDFS架构:
分布式文件系统
1.2.2YARN:Hadoop的资源管理器
亿钱君
·
2021-03-19 15:52
#
1:
Hadoopd
Hadoop ,Mapreduce,Spark的区别
Hadoop,Mapreduce,Spark的区别1.Hadoop是一种用于处理和存储海量数据的分布式系统开源软件,核心部分为:HDFS,YARN,MapreduceHDFS是
分布式文件系统
,HDFS通过数据备份
高级cv算法设计师
·
2021-03-12 00:35
hadoop
spark
hdfs
mapreduce
GFS
分布式文件系统
、集群
GFS
分布式文件系统
、集群一、GlusterFS简介二、GlusterFS特点三、GlusterFS术语四、GlusterFS构成五、GFS支持的卷六、GFS部署1、环境准备2、更改节点名称3、节点磁盘挂载
17_yyang
·
2021-03-11 15:54
gfs
分布式
Hadoop的学习路线图
第一类,是我已经掌握的第二类,是TODO准备继续学习的一句话产品介绍:Apache Hadoop:是Apache开源组织的一个分布式计算开源框架,提供了一个
分布式文件系统
子项目(HDFS)和支
栀子花_ef39
·
2021-03-11 09:49
NewSQL分布式数据库,例如TIDB用K/V的底层逻辑
内容参考对分布式对定义参考这篇文章:微服务都想用,先把分布式和微服务之间的关系说清楚对分布式架构中心或无中心对比参考这篇文章:分布式存储单主、多主和无中心架构的特征与趋势对HDFS对内部机制参考这篇文章:Hadoop
分布式文件系统
·
2021-03-11 08:48
微服务想用好,先把分布式和微服务之间的关系搞清楚
一、分布式和微服务架构的定义分布式应用场景涵盖的面非常广,我理解的部分:不同进程之间的互相通信,不同主机的分布式对象之间调用,用于大数据存储的
分布式文件系统
,用于网络之间相互识别的命名服务,集群中计算或存储的无中心对等模型
·
2021-03-11 08:42
分布式存储单主、多主和无中心架构的特征与趋势
分布式对象存储和
分布式文件系统
具有很强烈的对比性分布式对象存储是key/value的存储模式,以restful访问方式为主,几乎处于扁平化的存储形式,通过地址作为主键,访问、更新的文件对象作为值。
·
2021-03-11 08:36
NewSQL分布式数据库,例如TIDB用K/V的底层逻辑
内容参考对分布式对定义参考这篇文章:微服务都想用,先把分布式和微服务之间的关系说清楚对分布式架构中心或无中心对比参考这篇文章:分布式存储单主、多主和无中心架构的特征与趋势对HDFS对内部机制参考这篇文章:Hadoop
分布式文件系统
·
2021-03-11 08:30
ubantu16.x上搭建hadoop分布式环境
一、vm虚拟机的安装二、vm虚拟机上安装ubuntuserver三、ubuntuserver上搭建hadoop集群四、hadoop生态系统1.hdfs
分布式文件系统
2.MapReduce分布式计算3.Hbase
A_Zhong20
·
2021-03-10 22:22
大数据
UCache灾备云功能
云备份是通过集群应用、网格技术或
分布式文件系统
等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储备份和业务访问的功能服务。
北京数据中心机房
·
2021-03-10 12:24
微服务想用好,先把分布式和微服务之间的关系搞清楚
一、分布式和微服务架构的定义分布式应用场景涵盖的面非常广,我理解的部分:不同进程之间的互相通信,不同主机的分布式对象之间调用,用于大数据存储的
分布式文件系统
,用于网络之间相互识别的命名服务,集群中计算或存储的无中心对等模型
·
2021-03-09 22:31
分布式存储单主、多主和无中心架构的特征与趋势
分布式对象存储和
分布式文件系统
具有很强烈的对比性分布式对象存储是key/value的存储模式,以restful访问方式为主,几乎处于扁平化的存储形式,通过地址作为主键,访问、更新的文件对象作为值。
·
2021-03-09 22:28
Docker安装
FastDFS
的方法步骤
拉取镜像dockerpullseason/
fastdfs
:1.2启动Trackerdockerrun-ti-d--nametrakcer-v/opt/
fastdfs
/tracker_data:/
fastdfs
·
2021-03-09 21:39
springboot上传图片后访问图片的几种方式
springboot上传图片后访问图片的几种方式图片存储在本地磁盘,实现WebMvcConfigurer接口添加本地静态资源访问过滤图片存储在本地磁盘,nginx动静分离
分布式文件系统
minio(对象存储
qq_250056868
·
2021-03-08 22:45
springboot
java
spring
GFS
分布式文件系统
(理论+实验)
GFS一、GlusterFS1.1GlusterFS的概念1.2GlusterFS的特点1.3GlusterFS术语1.4GlusterFS的工作流程1.5后端存储如何定位文件1.6GFS支持的七种卷二、模拟实验——部署GlusterFS群集2.1环境准备2.2安装、启动GlusterFS(所有node节点)2.3添加节点到存储信任池中(node1节点)2.4根据规划创建卷分布式卷条带卷复制卷分布
有吃不错咯
·
2021-03-07 22:11
分布式
linux
gfs
Hadoop之HDFS:Hadoop
分布式文件系统
--具体知识点
HDFS:Hadoop
分布式文件系统
下面是HDFS的具体知识点,个人学习笔记戳这文章目录HDFS:Hadoop
分布式文件系统
一、学习准备二、课堂主题三、课堂目标四、知识要点1.hadoop的发展历史2.
是我,Zack
·
2021-03-01 22:23
#
Hadoop
hadoop
hdfs
大数据
GFS
分布式文件系统
(理论+实操)
三)、常用术语(四)、GFS的结构(五)、弹性HASH算法(六)、GlusterFS工作原理(工作流程)(七)、GFS卷类型1、分布式卷:2、条带卷3、复制卷4、分布式条带卷5、分布式复制卷二、GFS
分布式文件系统
部署步骤
贩卖阳光
·
2021-03-01 19:06
运维
gfs
分布式
运维
云端大数据
分布式文件系统
成本优化秘笈
一、CHDFS介绍CHDFS(云HDFS)是腾讯云一种提供标准HDFS访问协议和分层命名空间的高性能
分布式文件系统
,主要解决大数据场景下海量数据存储和数据分析,为实现计算与存储分离提供解决方案。
·
2021-02-26 15:57
云存储hdfs分布式系统
Docker安装
FastDFS
拉取镜像dockerpullseason/
fastdfs
:1.2启动Trackerdockerrun-ti-d--nametrakcer-v/opt/
fastdfs
/tracker_data:/
fastdfs
·
2021-02-25 22:02
容器docker
HDFS 监控背后那些事儿,构建 Hadoop 监控共同体
运维开源最佳实践Hadoop
分布式文件系统
(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的
分布式文件系统
。
0x8g1T9E
·
2021-02-24 14:55
BIG
DATA
Project
Manager
Centos7搭建
FastDFS
+Nginx文件服务器
根据学习视频链接进行搭建。1.系统环境和文件准备a.virturalbox创建的centos7虚拟机虚拟机创建需要使用桥接模式(根据需要选择),桥接模式类似同一个局域网内的其他计算机,会单独再分配一个IP,同局域网可访问,主机与虚拟机可互ping;NAT模式则在同一个局域网内无法访问到,虚拟机仅能通过主机与外界进行通信;主机模式则只能是主机与虚拟机通信。另外需安装openssl服务,用于xshel
又起风了
·
2021-02-21 21:07
centos
计算机基础
SpringBoot使用阿里OSS实现文件云存储的方法
一些比较大的互联网公司可能会使用一些
分布式文件系统
来达到存储文件的目的,但这种方式门槛过高。如何找到一个合适且性价比高的文件存储方
·
2021-02-19 16:27
解决Maven中关于依赖导入不进的问题
在repository中我们新建一个com\github\tobato\
fastdfs
-client\1.26.7先是groupid->artifactId->version(-SNAPASHOT省略)
·
2021-02-19 12:13
图说HDFS基本原理
英文原版作者:ManeeshVarshney,
[email protected]
是现在最受欢迎和被人们说熟知的
分布式文件系统
。
__豆约翰__
·
2021-02-17 16:41
2021-02-16
docker安装
fastdfs
拉取镜像dockerpulldelron/
fastdfs
启动tracker服务dockerrun-d--network=host--nametracker-v/root/
fastdfs
吕小医
·
2021-02-16 14:53
linux
HDFS和Hbase和MapReduce科普
目录一:HDFS1.1
分布式文件系统
的结构1.2分布式系统的目标1.3HDFS主要组件及功能1.4HDFS体系结构1.5HDFS读数据过程1.6HDFS写数据过程二:Hbase2.1Hbase介绍2.2Hbase
斑马!
·
2021-02-15 19:43
大数据
Spring Boot 2.x 整合 MinIO 8.x
SpringBoot2.x整合MinIO8.xMinIO概要MinIO&
FastDFS
对比思路附件信息表数据库表结构设计参考talkischeap->showmethecode(核心代码)MinIO概要
小学君
·
2021-02-12 14:47
java
【史上最全】Hadoop 核心 - HDFS
分布式文件系统
详解(上万字建议收藏)
首要的基础功能就是文件系统,在Hadoop中使用FileSystem这个抽象类来表示我们的文件系统,这个抽象类下面有很多子实现类,究竟使用哪一种,需要看我们具体的实现类,在我们实际工作中,用到的最多的就是HDFS(
分布式文件系统
·
2021-02-08 20:38
hadoop大数据
【史上最全】Hadoop 核心 - HDFS
分布式文件系统
详解(上万字建议收藏)
首要的基础功能就是文件系统,在Hadoop中使用FileSystem这个抽象类来表示我们的文件系统,这个抽象类下面有很多子实现类,究竟使用哪一种,需要看我们具体的实现类,在我们实际工作中,用到的最多的就是HDFS(
分布式文件系统
·
2021-02-08 20:45
hadoop大数据
【史上最全】Hadoop 核心 - HDFS
分布式文件系统
详解(上万字建议收藏)
首要的基础功能就是文件系统,在Hadoop中使用FileSystem这个抽象类来表示我们的文件系统,这个抽象类下面有很多子实现类,究竟使用哪一种,需要看我们具体的实现类,在我们实际工作中,用到的最多的就是HDFS(
分布式文件系统
五分钟学大数据
·
2021-02-08 20:29
大数据
hadoop
大数据
hadoop
分布式文件系统
FastDFS
安装教程1(安装、配置、部署、防盗链、nginx、图片压缩)
相关链接:SpringBoot项目中
Fastdfs
配置及使用2环境准备使用的系统软件名称说明centos7.xlibfatscommon
FastDFS
分离出的一些公用函数包
FastDFS
FastDFS
本体
Youth丶夏夏
·
2021-02-07 09:09
搭建
fastdfs
服务,及单机redis服务,springboot实现h5与
fastdfs
之间的断点续传,大文件上传,秒传文件和批量上传
前言搭建单机redis服务,结合
fastdfs
,springboot实现h5与
fastdfs
之间的断点续传,大文件上传,秒传。
阿啄debugIT
·
2021-02-06 19:46
Java
redis
工具
搭建fastdfs服务
搭建单机redis服务
java实现文件断点传输
java大文件上传
fdfs秒传文件和批量上传
部署ceph集群架构+Dashboard出图
概述Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、
分布式文件系统
。Ceph是一个开源的
分布式文件系统
。
HYXR
·
2021-02-05 11:44
linux
分布式
ceph
上一页
39
40
41
42
43
44
45
46
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他