E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式文件
从一到无穷大 #16 ByteSeries,思考内存时序数据库的必要性
但是如果换个思路,缓存即为内存时序数据库,长久存储为为其他(
分布式文件
系统,对象存储,基于磁盘的时序数据库)
李兆龙的博客
·
2023-09-20 19:37
从一到无穷大
时序数据库
数据库
GFS
分布式文件
系统
---------------------GlusterFS概述----------------------------------------1.GlusterFS简介GlusterFS是一个开源的
分布式文件
系统
会失眠的床
·
2023-09-20 08:42
linux
Ftp服务器、 Samba服务器、NFS服务器的区别
下面是三种服务器的对比情况:各个服务器的配置NFS服务器:NFS是SUNMicrosystem公司开发的网络文件系统,它是一种基于远程过程调用(RPC)的
分布式文件
系统架构
肆壹柒Z
·
2023-09-20 06:02
开发语言
网络
分布式文件
存储系统hdfs
hdfs基础知识hadoop当中的文件系统是一个抽象类,里面有很多的子实现类,例如hdfs,file:///,ftp等文件系统。block块缓存hadoop可以将我们的block块缓存到内存当中,我们在执行一些MapReduce计算的时候,可以直接从内存当中获取数据,比较快,特别适用于一些小表join大表的情况。hdfs的权限验证采用的是和Linux类似的权限校验机制,防止好人做错事,不能阻止坏人
康俊1024
·
2023-09-19 21:36
互联网架构演进方向
目录1业务架构1.1单体模式1.2中台战略1.2.1概述1.2.2背景1.2.3案例1.3总结与思考2数据架构2.1单数据库2.2主从读写2.3分库分表2.4高速缓存2.5数据多样化2.5.1
分布式文件
赵广陆
·
2023-09-19 19:45
architect
架构
9月11-12日上课内容 第二章 GFS
分布式文件
系统
本章结构前言存储块存储硬盘文件存储nfslvmraidext4ext3centos6xfscentos7对象存储GFSCephfastdfs云端OSS阿里云存储url链接S3亚马逊url链接switch一、GlusterFS概述文件进入硬盘里面,用什么东西来调用它?系统:用户态和内核态通过内核层面去调用硬件设备,协同各方,存储数据,文件系统在内核层面来调用用户态只做操作无元数据:保存数据的地方1.
m0_70766460
·
2023-09-19 15:02
服务器
运维
分布式
GlusterFS
GFS
分布式文件
系统
本章结构1、GFS概述2、GFS特点3、GFS术语4、GFS工作原理5、GFS的卷类型6、部署集群环境7、创建卷,部署客户端,测试文件系统8、其他维护命令一、GFS概述GlusterFS是一个开源的
分布式文件
系统
manyulanlanlu
·
2023-09-19 14:28
服务器
数据库
大数据
分布式文件
系统ceph安装
介绍前面的文章中,我们讲到kubernetes想实现pod数据的持久化,也就是存储这块是比较难。当然在开源界已经有好几款比较成熟的产品,比如Ceph,GlusterFS,TFS,HDFS等。GlusterFS,ceph在最近几年发展火热。在选型方面,个人更加倾向于社区火热的项目,GlusterFS、Ceph都在考虑的范围之内,但是由于GlusterFS只提供对象存储和文件系统存储,而Ceph则提供
jerry的技术与思维
·
2023-09-19 10:22
GFS
分布式文件
系统
1、GlusterFS概述1.1GlusterFS简介GlusterFS是一个开源的
分布式文件
系统。由存储服务器、客户端以及NFS/Samba存储网关(可选,根据需要选择使用)组成。
BryantLSY
·
2023-09-19 10:05
mysql
分布式文件
系统 FastDFS
fr=aladdinFastDFS是一个开源的轻量级
分布式文件
系统,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和
撸帝
·
2023-09-18 23:31
HBase 数据库介绍
Hadoop使用
分布式文件
系统,用于存储大数据,并使用MapReduce分布式计算来处理。Hadoop擅长于存储各种格式的庞大的数据,任意的格式甚至非
.道不虚行
·
2023-09-18 18:09
hadoop
大数据
hbase
Mongodb+NodeJS实现服务端架构
Robomongo的使用4.如何使用NodeJS指挥Mongodb二、安装Mongodb1、Mongodb简介官网:https://www.mongodb.com/源于百度中的一段话:MongoDB是一个基于
分布式文件
存储的数据库
zyk_520
·
2023-09-18 09:29
Node
mongodb
数据库
node.js
MapReduce & YARN 的部署
1、部署说明HadoopHDFS
分布式文件
系统,我们会启动:NameNode进程作为管理节点DataNode进程作为工作节点SecondaryNamenode作为辅助同理,HadoopYARN分布式资源调度
新征程,再出发
·
2023-09-18 03:30
大数据
mapreduce
大数据
yarn
hdfs
GFS
分布式文件
系统
目录1、GlusterFS概述1.1GlusterFS简介1.2GlusterFS特点1.3GlusterFS术语1.4模块化堆栈式架构1.5GlusterFS的工作流程1.6弹性HASH算法1.7GlusterFS的卷类型2、部署GlusterFS群集2.1关闭防火墙2.2磁盘分区,并挂载2.3修改主机名,配置/etc/hosts文件2.4安装、启动GlusterFS(所有node节点上操作)2
曦雨天梦
·
2023-09-18 03:19
GFS
GFS
分布式文件
系统
目录一、GlusterFS概述二、GlusterFS特点1、扩展性和高性能2、高可用性3、全局统一命名空间4、弹性卷管理三、GlusterFS术语1、Brick(存储块)2、Volume(逻辑卷)3、FUSE4、VFS5、Glusterd(后台管理进程)四、模块化堆栈式架构五、GlusterFS的工作流程六、弹性HASH算法1、弹性hash算法的概念2、弹性HASH算法的优点七、GFS卷的类型1、
云开朗
·
2023-09-18 02:04
大数据
分布式文件
系统 FastDFS 5.0.5 & Linux CentOS 7 安装配置
前言项目中用到文件服务器,有朋友推荐用fastdfs,所以就了解学习了一番,感觉确实颇为强大,在此再次感谢淘宝资深架构师余庆大神开源了如此优秀的轻量级
分布式文件
系统,本篇blog就记录一下fastdfs
小灯光环
·
2023-09-17 21:05
Linux
文件服务器
fastdfs
分布式文件系统
centos7
php 删除fastdfs文件名,浅析FastDFS及所遇问题集锦
一、FastDFS简介FastDFS(最新版本v3.04)是一个开源的轻量级
分布式文件
系统,它用纯C语言实现,支持Linux、FreeBSD、AIX等UNIX系统。
舟舟州
·
2023-09-17 19:06
php
删除fastdfs文件名
Spring Boot MongoDB 简单入门
概述MongoDB是一个基于
分布式文件
存储的数据库,由C++语言编写。旨在为Web应用提供可拓展的高性能数据存储解决方案。
君子坐而论道
·
2023-09-17 19:54
HDFS的存储原理
1、存储原理1.1、HDFS
分布式文件
存储将文件分为集群节点的部分数,分别存入每个节点中。
新征程,再出发
·
2023-09-17 09:55
大数据
hdfs
hadoop
大数据
hdfs存储原理
FastDFS是什么
FastDFS是什么FastDFS是使用c语言编写的开源高性能
分布式文件
系统是由淘宝开发平台部资深架构师余庆开发,FastDFS孵化平台板块他对文件进行管理,功能包括文件存储,文件同步,文件访问等,解决了大容量存储和负载均衡的问题特别适合文件载体的在线服务
洁癖汪
·
2023-09-17 07:46
基于Docker搭建
分布式文件
系统FastDfs
FastDFS是一个开源的
分布式文件
系统,它对文件进行管理,功能包括:文件
我们都很努力着
·
2023-09-16 16:15
分布式文件
存储服务器之Minio对象存储技术参考指南
Minio对象存储技术MinIO是一种高性能对象存储解决方案,原生支持Kubernetes部署。MinIO提供与AmazonWebServicesS3兼容的API并支持所有核心S3功能。MinIO是在GNUAffero通用公共许可证v3.0下发布的。也许提起对象存储技术,我们都经历过Fastdfs长时间的拉锯战,即使现在大部分都在使用云服务厂商提供的OSS对象存储服务,但是其所花费的经济成本也是递
marklin
·
2023-09-16 15:30
Minio
对象存储
OSS
分布式对象存储
什么是存储计算分离架构?
1.背景首先我们谈谈Hadoop的背景,说到Hadoop起源,就离不开Google的三辆马车:GoogleFileSystem、MapReduce和BigTable,分别说了
分布式文件
系统、分布式计算MR
中关村_周某
·
2023-09-16 12:12
大数据
大数据
分布式
2019-08-07
MongoDB是由C++语言编写的,是一个基于
分布式文件
存储的开源数据库系统。在高负载的情况下,添加更多的节点,可以保证服务器性能。MongoDB旨在为WEB应用提供可扩展的高性能数据存储解决方案。
炮炮_06ac
·
2023-09-16 11:29
GFS
分布式文件
系统
1.GlusterFS简介GlusterFS是一个开源的
分布式文件
系统。由存储服务器、客户端以及NFS/Samba存储网关(可选,根据需要选择使用)组成。
- joke
·
2023-09-16 09:51
支持向量机
FastDFS安装及配置
FastDFS安装及配置1.FastDFS简介FastDFS是一个开源的轻量级
分布式文件
系统,它对文件进行管理。FastDFS架构包括Trackerserver和Storageserver。
69循环
·
2023-09-16 09:43
笔记
fastdfs
ubuntu系统安装hadoop
Hadoop分布式计算平台,核心是
分布式文件
系统HDFSubantu下安装jdkwgethttps://repo.huaweicloud.com/openjdk/18.0.1.1/openjdk-18.0.1.1
shigen01
·
2023-09-16 02:30
大数据
ubuntu
hadoop
linux
大数据
【程序猿包邮送书:第四期】《分布式统一大数据虚拟文件系统——Alluxio原理、技术与实践》
欢迎来到爱书不爱输的程序猿的博客,本博客致力于知识分享,与更多的人进行学习交流爱书不爱输的程序猿:送书第三期点击直达福利前言一、
分布式文件
系统元数据的常见类型1.1文件(inode)元数据1.2数据块(
爱书不爱输的程序猿
·
2023-09-15 18:44
分布式
大数据
实现分布式架构与云原生的操作流程--干货分享
3、分布式数据存储:采用分布式数据库或
分布式文件
系统来存储数据,避免单点故障。4、负载均衡和容错:采用负载均衡和容错机制,使得
奔向理想的星辰大海
·
2023-09-15 17:58
Docker
分布式存储
技术工具
分布式
架构
云原生
GFS
分布式文件
系统
目录一、GlusterFS简介二、GlusterFS特点三、GlusterFS专业术语四、GFS的工作原理2、分布式gfs服务器存储五、GlusterFS的卷类型1、分布式卷2、条带卷3、复制卷4、分布式条带卷5、分布式复制卷六、部署GlusterFS集群实验1、准备环境(所有node节点上操作)2、安装、启动GlusterFS(所有node节点上操作)3、添加节点到存储信任池中(在node1节点
@_Orange—
·
2023-09-15 10:52
数据库
《十小时入门大数据》学习笔记之初识Hadoop
笔记内容概括Hadoop概述1.1Hadoop名字的由来1.2Hadoop介绍1.3Hadoop能做什么Hadoop核心组件2.1HDFS(
分布式文件
系统)2.2YARN(资源调度系统)2.3MapReduce
腊月的梅花
·
2023-09-15 08:36
SpringBoot整合minio
分布式文件
系统
如果SpringBoot搭建还有问题,可以参考我的文章:https://blog.csdn.net/m0_51510236/article/details/113967278minio官方网站:https://min.io/程序包可以官网下载,本次演示的版本下载:https://download.csdn.net/download/m0_51510236/46165373运行步骤linux:#!/
XiaoHH Superme
·
2023-09-15 07:30
框架
文件系统
spring
boot
spring
2019年JAVA培训领军机构:黑马程序员--IDEA版本2018Java基础+就业课程-大牛编程吧
点我下载权限解决方案(Shiro、SpringSecurity)-报表解决方案-GIS解决方案(百度地图)-分布式开发解决方案(Dubbox)-
分布式文件
存储解决方案(FastDFS)-缓存解决方案(Redis
不用好
·
2023-09-14 20:37
Hadoop下载安装及HDFS配置教程
Hadoop实现了一个
分布式文件
系统(HadoopDistributedFileSystem),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供
Mekeater
·
2023-09-14 19:16
大数据
hadoop下载安装
hadoop配置
hdfs配置
hadoop单机版集群配置
hadoop安装教程
GFS
分布式文件
系统
1、GlusterFS简介GlusterFS(GFS)是一个开源的
分布式文件
系统由存储服务器、客户端以及NFS/Samba存储网关(可选,根据需要选择使用)组成。
Mo_nor
·
2023-09-14 18:49
数据库
大数据上机基础—HDFS文件操作
本文为在校学习大数据课程期间,对厦门大学林子雨老师大数据技术原理与应用第三章
分布式文件
系统HDFS学习指南一文进行的整理,方便自己学习查看原文地址为大数据技术原理与应用第三章
分布式文件
系统HDFS学习指南操作系统为
Lucky-Niu
·
2023-09-14 17:14
hdfs
big
data
hadoop
实现fastdfs防盗链功能
1、背景我们可以通过fastdfs实现一个
分布式文件
系统,如果我们的fastdfs部署在外网,那么任何一个人知道了我们的上传接口,那么它就可以文件的上传和访问。
huan1993
·
2023-09-14 11:56
什么是Ulord的分布式存储?
Ulord网络中的所有节点构成一个面向全球的、点对点的
分布式文件
系统,将所有具有相同文件系统的计算设备连接在一起。每个文件及其中的所有分块都被赋予一个称为加密散列的唯一指纹。
yinyuanlin
·
2023-09-14 04:43
MongoDB-1入门介绍
弱点:1、数据库事务一致性需求2、数据库的写实时性和读实时性需求3、对复杂的SQL查询,特别是多表关联查询的需求简介MongoDB是由C++语言编写的,是一个基于
分布式文件
存储的开源数据库系统。
AugustRed
·
2023-09-14 03:30
数据库
mongodb
数据库
UBUNTU下MONGODB的安装和使用
一、MongoDB介绍MongoDB是一个是一个基于
分布式文件
存储的数据库,介于关系数据库和非关系数据库之间,是非关系数据库当中功能最丰富,最像关系数据库的。
svg onload=alert(1)
·
2023-09-14 02:13
mongodb
Java中的分布式计算框架有哪些?
它包括Hadoop
分布式文件
系统(HDFS)和MapReduce计算模型。ApacheSpark:一个快速、通用的大规模数据处理框架。它支持内存计算,可以在磁盘和内存中同时进行数
玥沐春风
·
2023-09-13 23:54
java
开发语言
揭秘
分布式文件
系统大规模元数据管理机制——以Alluxio文件系统为例
揭秘
分布式文件
系统大规模元数据管理机制1.
分布式文件
系统元数据的常见类型1.1文件(inode)元数据1.2数据块(block)元数据1.3MountTable1.4Worker元数据2.
分布式文件
系统元数据的存储模式
辭七七
·
2023-09-13 21:21
七七的闲谈
运维
网络
云原生
分布式
数据库管理员
SpringBoot 基于 MongoTemplate 的工具类
一、什么是MongoDBMongoDB基于
分布式文件
存储的数据库。由C++语言编写。MongoDB是一个高性能,开源,无模式的文档型数据库,是当前NoSql数据库中比较热门的一种。
张志翔的博客
·
2023-09-13 18:23
SpringBoot
spring
boot
后端
java
GFS分布式存储
glusterFS简介GFS是一个
分布式文件
系统,只在扩展存储容量,提高性能,并且通过多个互联网络的存储节点的数据进行冗余,以确保数据的可用性和一致性GFS由三个部分组成:存储服务器客户端以及FNS/Samba
dkvhr
·
2023-09-13 13:55
分布式
GFS
分布式文件
系统
GlusterFS概述:1.GlusterFS简介GlusterFS(GFS)是一个开源的
分布式文件
系统。由存储服务器、客户端以及NFS/Samba存储网关(可选,根据需要选择使用)组成。
M上去学习
·
2023-09-13 13:53
linux
Hadoop
Hadoop主要由HDFS(HadoopDistributedFileSystemHadoop
分布式文件
系统)、MapReduce和HBase组成Hadoop的初衷是为解决Nutch的海量数据爬取和存储的需要
凤舞飘伶
·
2023-09-12 23:16
Go
hadoop
K8S部署MinIo
_是潮汕的灿灿展吖的博客-CSDN博客_k8s部署minio文章目录一、前言二、Minio三、k8s容器化部署一、前言
分布式文件
存储系统,作为一个码农,多多少少会听说大名鼎鼎hadoop的文件系统HDFS
zhangjunli
·
2023-09-12 15:45
MinIo
Docker
K8S
docker
k8s
minio
HDFS常用命令操作
HDFS(HadoopDistributedFileSystem)是一种
分布式文件
系统,它具有高容错的特点,并且可以部署在廉价的通用硬件上,提高吞吐率的数据访问,适合那些需要处理海量数据集的应用程序。
lizb
·
2023-09-12 09:13
Hadoop的安装和使用,Windows使用shell命令简单操作HDFS
,2,
分布式文件
系统HDFS2,
分布式文件
系统HDFS1.HDFS简介Hadoop
分布式文件
系统(HadoopDistributedFileSystem,HD
星星失眠️
·
2023-09-12 08:16
大数据采集与预处理
hdfs
hadoop
大数据
Hadoop生态概述及常见报错
它包含两个模块,一个是MapReduce,另外一个是Hadoop
分布式文件
系统(HDFS)。MapReduce:它是一种并行编程模型在大型集群普通硬件可用于处理大型结构化,半结构化和非结构化数据。
WilenWu
·
2023-09-12 08:43
数据分析(Data
Analysis)
上一页
11
12
13
14
15
16
17
18
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他