E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
GFS分布式文件系统
VMware虚拟机设置共享文件夹丢失问题
最近在用VMware,装了几个虚拟机后,发现第一次设置好共享文件夹,是可以用的,虚拟机里/mnt/h
gfs
/目录下有共享文件夹挂载。
caz28
·
2023-08-02 18:02
Linux
问题解决
linux
VMware
share
mount
【分布式应用】
GFS
分布式文件系统
目录前言一、GlusterFS概述1.1GlusterFS简介1.2GlusterFS特点●扩展性和高性能●高可用性●全局统一命名空间●弹性卷管理●基于标准协议1.3GlusterFS术语●Brick(存储块):●Volume(逻辑卷):●FUSE:●VFS:●Glusterd(后台管理进程):1.4模块化堆栈式架构1.5GlusterFS的工作流程1.6弹性HASH算法二、GlusterFS的卷
Utopia_dower
·
2023-08-02 16:23
云计算
第六篇:Ceph集群常见问题处理方法
wron
gfs
typemount:wron
gfs
type,badoption,badsuperblockon11.154.211.212:6789:/,missingcodepageorhelperprogram
godleft90
·
2023-08-02 13:26
分布式对象存储框架:Ceph
ceph
分布式存储
cephfs
GFS
分布式文件系统
GFS
分布式文件系统
1.
gfs
简介2.
gfs
特点3.
gfs
术语brick(存储块)volume(逻辑卷)fusevfs4.
gfs
工作流程(重点)5.
gfs
卷类型分布式卷条带卷(数据不完整,会报错)复制卷分布式条带卷分布式复制卷总结
xiaowei0403
·
2023-08-02 08:19
分布式
qkfile重要落地应用“闪电盘”即将火爆上线
“闪电盘”是基于qkfile
分布式文件系统
,旨在为用户创造全新体验而打造的分布式云存储。“闪电盘”定位于中小文件的快捷分享,无需客户端,因其下载速度快如闪电而得名。
少年已不年少201901
·
2023-08-02 03:40
GFS
分布式文件系统
文章目录一.GlusterFS概述1.GlusterFS简介2.GlusterFS特点3.GlusterFS术语4.模块化堆栈式架构5.GlusterFS的工作流程5.1GlusterFS的工作原理5.2GlusterFS的工作流程图示5.3弹性HASH算法5.3.1弹性HASH算法的优点6.GlusterFS的卷类型6.1分布式卷(Distributevolume)6.1.1分布式卷概念6.1.
赵烧鸡腿饭。
·
2023-08-02 01:42
redis
数据库
分布式应用:
GFS
分布式文件系统
目录一、理论1.GlusterFS2.GlusterFS卷类型3.GlusterFS与RAID汇总4.部署GlusterFS群集5.部署Gluster集群环境(所有node节点操作)6.创建卷7.部署Gluster客户端8.测试Gluster文件系统9.其他的维护命令二、实验1.部署Gluster集群环境(所有node节点操作)2.创建卷3.部署Gluster客户端4.测试Gluster文件系统5
cronaldo91
·
2023-08-01 22:22
分布式
GFS
分布式文件系统
目录一、GlusterFS简介二、GlusterFS特点1.扩展性和高性能2.高可用性3.全局统一命名空间4.弹性卷管理5.基于标准协议三、GlusterFS术语1.Brick(存储块)2.Volume(逻辑卷)3.FUSE4.VFS5.Glusterd(后台管理进程)四、GlusterFS的工作流程五、弹性HASH算法六、GlusterFS的卷类型1.分布式卷(Distributevolume)
深情的冷少
·
2023-08-01 20:35
运维
分布式处理框架Hadoop的安装与使用
Hadoop实现了一个
分布式文件系统
(HadoopDistributedFileSystem),简称HDFS。
与李_han
·
2023-08-01 15:28
vmware安装linux共享文件夹重启失效的解决办法
open-vm-tools[-desktop]只有设置变化时自动挂载共享文件夹的功能,没有系统启动时自动挂载共享文件夹的功能open-vm-tools未来可能修复这个问题:vmtoolsddoesnotrunvmh
gfs
-fuseonboot
defrag257
·
2023-08-01 07:43
linux
运维
服务器
一分钟带你了解
分布式文件系统
(NFS)
文章首发地址NFS(NetworkFileSystem)是一种基于网络的
分布式文件系统
协议,允许网络中的主机通过网络共享文件和目录,并使得文件可以在不同主机之间共享和访问。
Walter Sun
·
2023-07-31 22:42
分布式文件系统
大数据计算技术架构解析
3.1.1.1建模3.1.1.1.1概念模型3.1.1.1.2逻辑模型3.1.1.1.3物理模型(存储)3.1.2数据存储架构3.1.3数据仓库和数据服务3.1.4统一数据接口3.2层次单元3.2.1
分布式文件系统
风吹海洋浪
·
2023-07-31 17:40
大数据
big
data
架构
云计算
大数据部分总结
HadoopHADOOP是apache旗下的一套开源软件平台提供的功能:利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理HADOOP的核心组件有HDFS(
分布式文件系统
)ARN(运算资源调度系统
DHRJFH
·
2023-07-31 09:14
大数据
hadoop
big
data
hadoop
程序从源代码到可执行程序
,静态库))CC++javaC#objective-c等等脚本语言源代码就是可执行程序文件shelljavascriptpython等超文本语言HTMLUbuntu共享文件夹的默认位置cd/mnt/h
gfs
石小浪♪
·
2023-07-31 08:08
Linux
ubuntu
linux
面试笔记(02)
2、FastDFS(1)开源的
分布式文件系统
,主要对文件进行存储、同步、上传、下载,有自己的容灾备份、负载均衡、线性扩容机制。(2)FastD
DKPT
·
2023-07-30 08:02
Java面试题
数据库
java
mysql
字符串
mount: wrong fs type, bad option, bad superblock报错 ubuntu
问题描述mount:wron
gfs
type,badoption,badsuperblockUbuntu无法挂载磁盘。原因很大概率是你的硬盘是NTFS。
Frank(Zhiyang-Dou)
·
2023-07-29 18:36
ubuntu
linux
运维
磁盘
挂载
hadoop集群
一、hadoop动物管理员Hadoop“平台”包括Hadoop内核、MapReduce、Hadoop
分布式文件系统
(HDFS)以及一些相关项目。
莫待花无空折枝
·
2023-07-29 14:26
大数据
Ftrace debu
gfs
接口使用说明(内核文档 ftrace.rst)
===============================》内核新视界文章汇总《===============================文章目录Ftracedebu
gfs
接口使用说明(内核文档
内核新视界
·
2023-07-29 05:56
linux
linux
kernel
操作系统
内核新视界文章汇总
linux系统调试Ftracedebu
gfs
接口使用说明(内核文档ftrace.rst)linuxarm64架构ARM64启动过程分析Linux下ARM64内核空间分布及页表查询linux内核技术分析总结
内核新视界
·
2023-07-29 05:56
文章汇总
linux
git
c语言
rust
libcomposite: Unknown symbol config_group_init (err 0)
原因&解决方法有一个依赖叫confi
gfs
.ko的驱动没有安装。可以从内核代码的fs/confi
gfs
/confi
gfs
.ko中找到这个驱动。
JasonComing
·
2023-07-29 00:33
问题收集
驱动开发
linux
《大数据技术原理与应用》(第三章 HDFS 课后答案)
第三章
分布式文件系统
HDFS参考资料1.林子雨_大数据技术原理与应用课后习题_NPU_阿夏的博客-CSDN博客2.林子雨编著《大数据技术原理与应用(第3版)》教材官网_厦门大学数据库实验室3.大数据技术原理与应用
S_h_a_
·
2023-07-28 15:41
计算机本科课程
hdfs
hadoop
big
data
大数据
【Go语言】Golang保姆级入门教程 Go初学者介绍chapter1
Golang的学习方向区块链研发工程师:去中心化虚拟货币金融Go服务器端、游戏软件工程师:CC++处理日志数据打包文件系统数据处理很厉害处理大并发Golang分布式、云计算软件工程师:盛大云cdn京东消息推送
分布式文件系统
小胡的博客号Aoife艺馨
·
2023-07-28 01:02
golang
开发语言
后端
hadoop cdh s3
一.背景对于目前用户产生的数据量激增,尤其是最近几年,这些数据产生后一般都是存储在hdfs
分布式文件系统
中,随着数据量越来越大,使用hdfs的磁盘空间也也会越来越多,机器规模一旦上去了之后,就会面临这机器使用费用问题
JenneyAes
·
2023-07-27 19:15
存算分离
hadoop
big
data
HDFS详解
1.简介HDFS是Hadoop生态下的
分布式文件系统
,专门存储超大数据文件,为整个Hadoop生态圈提供来基础带存储服务。1)由
GFS
发展而来。
weixin_39767869
·
2023-07-27 11:57
大数据
mapreduce
hdfs
spark
hadoop
hdfs是nas_hdfs 存储空间
HDFS文件读写流程一、HDFS体系结构HDFS作为
分布式文件系统
,使用的是master/slave体系结构,角色有三种:NameNode:为HDFS提供元数据服务,NameNode可以控制所有文件的操作
weixin_39849239
·
2023-07-27 11:57
hdfs是nas
HDFS核心技术详解
hadoop的核心子项目——HDFS(
分布式文件系统
),下面将从HDFS的背景、基本概念开始,步步深入了解HDFS的设计目标、HDFS的基本结构以及HDFS的相关操作等核心知识!
your_blue_sky
·
2023-07-27 11:24
大数据-HDFS
HDFS
核心技术详解
大数据课程D2——hadoop的概述
的定义和特点;⚪掌握hadoop的基础结构;⚪掌握hadoop的常见命令;⚪了解hadoop的执行流程;一、简介1.概述1.HDFS(HadoopDistributedFileSystem-Hadoop
分布式文件系统
伟雄
·
2023-07-27 05:44
大数据
hadoop
分布式
交叉编译libssh
www.openssl.org/sourcezlibhttp://www.zlib.net/libssh版本0.8.0openssl版本1.0.0szlib版本1.2.11配置zlibprefix=/mnt/h
gfs
习惯就好zz
·
2023-07-27 03:40
工作技术笔记
libssh
交叉编译
cmake
搭建基于 HDFS 碎片文件存储服务
实验内容HDFS是Hadoop的
分布式文件系统
,HDFS中的文件在物理上是分块(block)存储的,块的大小可以通过配置参数(dfs.blocksize)来规定。
无良人斜杆人生
·
2023-07-27 03:26
linux系统用户态与内核态接口
procfsnetlink文件io读写ioctldebu
gfs
sysfsprocfs:在Linux系统中,procfs是一种伪文件系统,它提供了一种以文件的形式访问内核数据结构和系统信息的接口。
istan1ey
·
2023-07-26 22:55
linux内核
gnu
linux
HDFS 常用命令
HDFS(HadoopDistributedFileSystem)是Hadoop
分布式文件系统
,以下是一些HDFS常用命令:以下命令中的hadoopfs在高版本的Hadoop中可以使用hdfsdfs替换其它参数不变
李昊哲小课
·
2023-07-26 20:50
大数据
人工智能
数据分析
hdfs
hadoop
大数据
数据分析
大数据发展史,你都了解吗?
我们现在常说的大数据技术,其实起源于Google在2004年前后发表的三篇论文,也就是我们经常提到的“三驾马车”,分别是:
分布式文件系统
GFS
(Goog
金光闪闪耶
·
2023-07-26 14:38
开源主流
分布式文件系统
简单介绍
文章目录一、
分布式文件系统
简介1.特点2.主要指标及分类对比3.AFS与NFS二、开源
分布式文件系统
1.
GFS
(1)
GFS
与NFS,AFS的区别(2)BigTable(3)Chubby(4)特点12.HDFS
wmnmtm
·
2023-07-26 12:02
分布式文件系统
分布式存储
hadoop笔记(三)HDSF原理
1.hdfsHDFS是
分布式文件系统
,当然当前市面上
分布式文件系统
不止hdfs这么一个。适合一次写入,多次查询场景。
一般的斑鸠
·
2023-07-26 10:58
Hadoop教程_编程入门自学教程_菜鸟教程-免费教程分享
Hadoop实现了一个
分布式文件系统
(DistributedFileSystem),其中一个组件是HDFS(HadoopDistributedFileSystem)。
IT民工爱搬砖
·
2023-07-26 07:31
笔记
深“扒”云原生高性能
分布式文件系统
JuiceFS
JuiceFS是一款面向云原生设计的高性能
分布式文件系统
,在Apache2.0开源协议下发布。
力哥讲技术
·
2023-07-26 05:36
云原生
大数据
linux
云原生
hdfs
云计算
分布式
大数据开发:Hadoop生态的分布式数据库
Hadoop作为分布式基础架构,有
分布式文件系统
HDFS进行存储划分,而落实到最终的存储上,还需要分布式数据库的配合,其中Hadoop原生的Hbase就是典型的分布式数据库。
成都加米谷大数据
·
2023-07-26 03:52
-Ddfs.checksum.combine.mode=COMPOSITE_CRC参数解析
Ddfs.checksum.combine.mode=COMPOSITE_CRC-Ddfs.checksum.combine.mode=COMPOSITE_CRC是一个Hadoop配置参数,用于指定HDFS(Hadoop
分布式文件系统
墨卿风竹
·
2023-07-26 02:28
hadoop
distcp
openeuler--hadoop single node setup
环境变量拷至bashrchadoop安装dfs下载hadoop创建input、output目录修改配置文件尝试ssh连接创建key格式化文件系统启动浏览web接口创建需要的hdfs目录复制input文件到
分布式文件系统
运行一些提供
青铜念诗
·
2023-07-25 23:35
hadoop
hdfs
大数据
Hadoop生态体系-HDFS
核心组件有:HDFS(
分布式文件系统
)
海星?海欣!
·
2023-07-25 17:17
大数据开发
hadoop
hdfs
大数据
Hadoop (一) Hadoop学习
1.1单独的Hadoop软件Hadoop是Apache软件基金会开源的一款开源Java软件,用户编写简单的编程模型实现跨机器对海量数据分布式计算处理的框架Hadoop的核心组件有HadoopHDFS:
分布式文件系统
大数据存储
C0oOder
·
2023-07-25 07:52
大数据之路
hadoop
mapreduce
大数据
攻防世界-wp-PWN-新手区-7-C
Gfs
b
题目来源:CGCTF题目描述:菜鸡面对着pringf发愁,他不知道prinf除了输出还有什么作用题目场景:111.200.241.244:40185题目附件:e41a0f684d0e497f87bb309f91737e4d题目思路:格式化字符串漏洞视频讲解,printf格式化字符串漏洞原理与利用构造payload,在格式化字符串中包含想要写入的地址,此时该地址会随格式化字符串放在栈上,然后用格式化
Scorpio-m7
·
2023-07-25 03:17
pwn
安全
一天一道ctf之攻防世界-C
Gfs
b
暑假笼统地学了Pwn,听的迷迷糊糊的,现在拾起来从头学。开始做题了,拿到程序扔进IDA。int__cdeclmain(intargc,constchar**argv,constchar**envp){intbuf;//[esp+1Eh][ebp-7Eh]intv5;//[esp+22h][ebp-7Ah]__int16v6;//[esp+26h][ebp-76h]chars;//[esp+28h]
qq_42728977
·
2023-07-25 03:47
ctf-pwn
CTF PWN-攻防世界C
Gfs
b格式化字符串漏洞
文章目录前言格式化字符串漏洞格式化字符串漏洞基本原理简单典型案例漏洞的危害与利用拒绝服务攻击内存数据读取内存数据覆盖攻防世界:C
Gfs
g题目思路简析任意地址覆写总结前言距离2021年年底短暂接触学习CTFPWN
Tr0e
·
2023-07-25 03:13
CTF之路
PWN
格式化字符串
分布式文件存储与数据缓存 FastDFS
一、FastDFS概述1.1什么是
分布式文件系统
单机时代初创时期由于时间紧迫,在各种资源有限的情况下,通常就直接在项目目录下建立静态文件夹,用于用户存放项目中的文件资源。
拉一次撑死狗
·
2023-07-24 15:09
java后端
分布式
spring
boot
linux
运维
centos
Hadoop笔记
Hadoop概念Hadoop是一个软件,这个软件包含三个模块HDFS:Hadoop
分布式文件系统
MapReduce:分布式计算系统Yarn:分布式资源调度系统资源网址apache的资源包下载https:
NQ31
·
2023-07-24 12:54
大数据
hadoop
笔记
大数据
Hadoop-
分布式文件系统
HDFS
HDFS特点HDFS相关概念1.块2.名称节点和数据节点HDFS体系结构1.HDFS体系结构概述2.HDFS命名空间管理3.通信协议4.HDFS体系结构的局限性HDFS常用的shell命令HDFS简介
分布式文件系统
Eureka_MAN
·
2023-07-23 14:43
BigData
hadoop
hdfs
大数据
big
data
Hadoop技术之HDFS
分布式文件系统
基础
Hadoop离线是大数据生态圈的核心与基石,是整个大数据开发的入门。本次分享内容让初学者能高效、快捷掌握Hadoop必备知识,大大缩短Hadoop离线阶段学习时间,下面一起开始今天的学习!▼往期内容汇总:大数据导论Linux操作系统概述VMwareWorkstation虚拟机使用Linux常用基础命令、系统命令ApacheHadoop概述ApacheHadoop集群搭建目录一、文件系统、分布式文件
黑马程序员官方
·
2023-07-23 14:13
hadoop
hdfs
大数据
Hadoop
分布式文件系统
——HDFS原理及示例(全)
文章目录1、HDFS简介1.1设计目标1.2HDFS的历史1.3HDFS的架构1.4HDFS文件副本和Block块存储1.4.1引入块机制的好处1.4.2块缓存1.4.3.HDFS文件权限验证1.5HDFS的元信息和SecondaryNameNode1.5.1FsImage和Edits详解1.5.2fsimage中的文件信息查看1.5.3edits中的文件信息查看1.5.4SecondaryNam
qqxhb
·
2023-07-23 14:13
数据库
hadoop
HDFS
JAVA
API
04Hadoop
分布式文件系统
HDFS(入门)
第1章Hadoop概述1.1Hadoop是什么1.2Hadoop发展历史(了解)1.3Hadoop三大发行版本(了解)Hadoop三大发行版本:Apache、Cloudera、Hortonworks。Apache版本最原始(最基础)的版本,对于入门学习最好。2006Cloudera内部集成了很多大数据框架,对应产品CDH。2008Hortonworks文档较好,对应产品HDP。2011Horton
香帅_WQW
·
2023-07-23 14:13
大数据
HIVE
hdfs
hadoop
big
data
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他