E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
filesystem
day31-磁盘相关命令和磁盘故障
磁盘空间不足block空间满了原因:文件内容过大排错流程1.df-h:查看整体情况[root@yuyingqian~]#df-h
Filesystem
SizeUsedAvailUse%Mountedon/
loginnnnnn
·
2023-03-22 12:35
linux系统初识
文件系统cacheI/O内存管理调度中断处理2.linux支持多用户、多任务3.内核结构app1app2app3clibrarysystemcallprocessmana\memorymanagement、
filesystem
保尔柯察杨
·
2023-03-22 12:00
linux和openwrt
linux
操作系统
namenode启动过程简要分析
1、HadoopDistributed
FileSystem
整体架构image.png1)主从架构,单个namenode,多个datanode;2)原始数据都被分成固定大小(最后一个block除外)的block
紫苓
·
2023-03-22 10:50
Linux目录/文件结构
FHS(英文:
Filesystem
HierarchyStandard中文:文件系统层次结构标准),多数Linux版本采用这种文件组织形式,FHS定义了系统中每个区域的用途、所需要的最小构成的文件和目录同时还给出了例外处理与矛盾处理
c0338fe173f7
·
2023-03-22 04:01
JAVA API连接HDFS HA的几种方式
hadoop版本:2.7.3使用场景:线上服务写hdfs,写过程中namenode的master节点发生HA切换,为保证写服务不因为连接中断而终止,需要在客户端以nameservices的方式初始化
FileSystem
zhangyaxu
·
2023-03-20 22:42
错误整体记录
sendingincrementalfilelist5.passwordfilemustnotbeother-accessibleNFS服务类1.Permissiondenied2.Read-only
filesystem
nginx
沽铭
·
2023-03-19 19:48
分布式FastDFS集群部署
FastDFSFastDFS的作者余庆在其GitHub上是这样描述的:“FastDFSisanopensourcehighperformancedistributed
filesystem
.It'smajorfunctionsinclude
周若谷
·
2023-03-19 15:29
Linux文件系统
FHS:
Filesystem
HierarchyStandard/bin:供所有用户可用的基本命令程序文件。
Elwyn
·
2023-03-18 13:48
SAA-C02技术点摘要
EFSAmazonElastic
FileSystem
(AmazonEFS)providesasimple,scalable,fullymanagedelasticNFS
filesystem
forusewithAWSCloudservicesandon-premisesresources.Itisbuilttoscaleondemandtopetabyteswithoutdisruptingappl
涣涣虚心0215
·
2023-03-18 10:59
003 Impala | 安装前性能配置
Impala的性能,需要在impala的配置项,如下几点,Short-CircuitReads开启HDFS短路读取HDFS也有短路读取的功能,因此在安装Impala之前开启次功能,这样Impala可以直接从
filesystem
__destory__
·
2023-03-18 02:11
Hive入门学习记录
(HDFS:HadoopDistributed
FileSystem
是大数据的底层系统)数据仓库本质上就是一个数据库,但和数据库还有一些区别。
一只疯兔的迭代记录
·
2023-03-18 01:38
大数据Hadoop原理介绍+安装+实战操作(HDFS+YARN+MapReduce)
一、Hadoop概述Hadoop是Apache软件基金会下一个开源分布式计算平台,以HDFS(HadoopDistributed
FileSystem
)、MapReduce(Hadoop2.0加入了YARN
大数据老司机
·
2023-03-17 20:38
Linux 内核调试 八:qemu使用initramfs文件系统
https://blog.csdn.net/song_lee/article/details/106027410一、介绍initramfs即initram
filesystem
,翻译成中文意思就是初始ram
lqonlylove
·
2023-03-17 13:03
Linux内核调试
linux
qemu
fstab文件各字段的含义
CentOS7中/etc/fstab文件的内容如下:##/etc/fstab#CreatedbyanacondaonSatOct2723:41:242018##Accessible
filesystem
s
beeworkshop
·
2023-03-17 09:22
Mac升级到big sur之后,根目录无法写入文件如何解决?
MAC在根目录创建文件,由于系统版本原因,会出现Read-only
filesystem
错误mac@catalina系统方案一:关闭mac的SIP机制,但是重启后会失效方案二:使用软件连接方式可以解决(1
五城十九洲
·
2023-03-17 03:06
docker registry:2 删除镜像
catconfig.ymlversion:0.1log:fields:service:registrystorage:delete:enabled:truecache:blobdescriptor:inmemory
filesystem
不关风月
·
2023-03-16 17:41
文件系统管理
文件系统分类日志型文件系统:ext3,ext4,xfs,...非日志型文件系统:ext2,vfat查看目前支持的文件系统:cat/proc/
filesystem
s创建文件系统mkfsmkfs.FS_TYPE
毛利卷卷发
·
2023-03-16 06:27
K8S 生态周报| Docker v19.03.9 发布
在之前的「K8S生态周报」中,我曾介绍过,自Dockerv19.03.7开始,其Backing
Filesystem
的检查逻辑
TaoBeier
·
2023-03-16 05:42
年薪60万大数据架构师教你Hadoop如何安装!还不快来看!
Hadoop实现了一个分布式文件系统(HadoopDistributed
FileSystem
),简称HDFS。
大数据学习05
·
2023-03-15 20:10
facl
FACL:
Filesystem
AccessControlList利用文件扩展保存额外的访问控制权限[tom@mysqltmp]$lltom.txt-rw-rw-r--1tomtom0Sep1318:58tom.txttom.txt
马月半
·
2023-03-15 18:26
中创算力|明白分布式存储,只需2分钟
各位好,我是中创算力的小创,今天我们来使用大白话让您轻松快速明白IPFS也就是分布式存储IPFS的全称为“InterPlanetary
FileSystem
”,中文叫“星际文件系统”,IPFS是一种去中心化分布式存储的网络协议
中创算力
·
2023-03-15 05:10
区块链
人工智能
ipfs
Hadoop3.x纠删码(Erasure Coding)
Hadoop3中的HDFS(HadoopDistributed
FileSystem
)使用了纠删码来提高数据的可靠性和容错性。具体来说,Hadoop3中引入了一种新的纠删码实现,称为Er
一抹鱼肚白
·
2023-03-14 22:58
大数据
hadoop
大数据
hdfs
HDFS工作流程(工作机制)解析
分布式文件系统在这篇文章参考了尚硅谷以及Github上的相关文章1HDFS的数据流1.1HDFS写数据流程1.1.1剖析文件写入(1)客户端(这里的客户端指的是上传文件的机器)通过Distributed
FileSystem
- Xu1Aan!
·
2023-03-14 22:43
Hadoop
大数据
hadoop
hdfs
Hadoop 之 HDFS 详解
二、定义:HDFS(HadoopDistributed
FileSystem
),它是一个文件系统,用来存储文件,通过目录树来定位文件,其次,它是分布式的,由很多服务器联合
普通网友
·
2023-03-14 22:08
java
hadoop
hdfs
大数据
zookeeper
后端
Linux 学习重点记录之二
文件和目录被诅咒成一个单根倒置树结构;文件系统从根目录下开始,用“/”表示;根文件系统:root
filesystem
;标准Linux文件系统,文件名称大小写敏感;以.开头的文件为隐藏文件;路径分隔的/;
大道至简so
·
2023-03-14 16:29
Leetcode—71.Simplify Path
mediumGivenanabsolutepathforafile(Unix-style),simplifyit.Orinotherwords,convertittothecanonicalpath.InaUNIX-style
filesystem
萌小熙喵
·
2023-03-14 13:41
linux下创建windows10启动盘
10_consumer_editions_version_1809_updated_dec_2018_x64_dvd_51713eef.iso命令行下使用命令:->sudowoeusb--target-
filesystem
NTFS
downstreamfish
·
2023-03-14 11:05
Flink实战之Flink必须依赖Hadoop2.7+?
背景最近在用
filesystem
connector来写hdfs,底层是通过StreamFileSink实现的。
〇白衣卿相〇
·
2023-03-14 03:58
2019-08-02 Boot Legacy/UEFI
Legacy+Ubuntu18+syslinux()=failedimage.pngimage.pngforHardDiskError:unknown
filesystem
image.pngforUDiskimage.png2
七点水Plus
·
2023-03-13 19:40
hadoop学习心得20-09-08
一、HDFS1、HDFS简介HDFS(HadoopDistributed
FileSystem
),是一个分布式文件系统,用于存储文件,通过目录树来定位文件。
airleaya
·
2023-03-13 16:20
大数据学习笔记
大数据
hdfs
java
linux
【Spring】资源操作管理:Resource、ResourceLoader、ResourceLoaderAware;
个人主页:.29.的博客学习社区:进去逛一逛~资源操作:SpringResources一、Resource接口Resource接口实现类:⚪UrlResource⚪ClassPathResource⚪
FileSystem
Resource
.29.
·
2023-03-13 10:20
Spring
spring
java
后端
在cygwin下编译boost库
在Boost.
Filesystem
中,Boost将cygwin视为Windows平台,所以它使用WindowsAPI而非PosixAPI来操作文件,这导致无法访问到cygwin模拟的一些文件路径。
xfan1024
·
2023-03-12 13:34
boost
cygwin
c++
编译
HDFS知识点总结
1.HDFS:HDFS:HadoopDistributed
FileSystem
Hadoop分布式文件系统优点:存储海量数据:HDFS可横向扩展,其存储的文件可以支持PB级数据容错性高:数据保存多个副本,
longLiveData
·
2023-03-12 07:50
Z77PD3制作OZMOSIS教程,吃上10.14.4
1.删除
FileSystem
模块,如果你只需要Mac系统,可以放心删除这玩意,因为之后插入的模块也有支持相应功能的
FileSystem
蔡吉
·
2023-03-12 01:43
Linux学习笔记(二)文件操作命令
touchstatcatmorelessheadtaillntouch英文原意:changefiletimestamps功能:修改文件的时间戳语法:touch文件名访问空文件,如果文件不存在,则会创建新文件stat英文原意:displayfileor
filesystem
status
LRainner
·
2023-03-12 00:05
大数据开发-分布式文件系统HDFS
HDFS,全称HadoopDistributed
FileSystem
,意思是分布式文件系统。
jason_syf
·
2023-03-11 15:59
71. Simplify Path-LeetCode-Python
SimplifyPathGivenanabsolutepathforafile(Unix-style),simplifyit.Orinotherwords,convertittothecanonicalpath.InaUNIX-style
filesystem
云外雁行斜丶
·
2023-03-10 16:48
mount: /n_home: 未知的文件系统类型“LVM2_member”. 问题解决
mount挂载硬盘设备时,提示mount:unknown
filesystem
type'LVM2_member'[root@localhost/]#mount/dev/sda3/n_homemount:/
lucky_fd_
·
2023-03-10 14:07
openEuler欧拉系统
服务器
linux
centos
Ubuntu Server 磁盘如何扩容
:Ubuntu20.04.3-live-server问题描述:Ubuntu20.04.3-live-server磁盘如何扩容,磁盘空间有500G,新安装的系统默认只分配200G1.查看磁盘信息df-h
Filesystem
SizeUsedAvailUse
blueboyggh
·
2023-03-10 14:20
MySQL乱码问题
character_set_connection:表示客户端连接到数据库后传输使用的字符集character_set_database:默认数据库的字符集,如果创建数据库时没有指定字符集,则使用该默认字符集character_set_
filesystem
笑笑东风
·
2023-03-10 14:12
hadoop安装与配置
一、Hadoop核心组件1.分布式文件存储系统HDFS(HadoopDistributed
FileSystem
)2.资源管理系统YARN(YetAnotherResourceNegotiator)3.分布式计算框架
木杉_君
·
2023-03-10 10:49
Hadoop工作原理
文件系统的读写原理2.1、HDFS架构2.2、HDFS写入过程:2.3、HDFS读取过程三、mapreduce工作原理四、HDFS操作命令一、hadoop三大核心组件HDFS(HadoopDistribute
FileSystem
Xiayebuliang
·
2023-03-10 09:20
hadoop
大数据
hdfs
docker-容器数据卷
Permissiondenied解决办法:在挂载目录后多加一个--privileged=true参数即可;一、介绍卷就是目录或文件,存在于一个或多个容器中,由docker挂载到容器,但不属于联合文件系统,因此能绕过Union
FileSystem
weixin_43956692
·
2023-03-10 04:30
docker
容器
运维
hdfs file system shell的简单使用
1、背景此处我们通过命令行,简单的学习一下hdfs
filesystem
shell的一些操作。
huan1993
·
2023-03-09 17:45
大数据框架之Hadoop:HDFS(四)HDFS的数据流(面试重点)
1)客户端通过Distributed
FileSystem
模块向NameNode请求上传文件,NameNode检查目标文件是否已存在,父目录是否存在。2)NameNode返回是否可以上传。
yiluohan0307
·
2023-03-09 07:13
大数据框架之Hadoop
hadoop
hdfs
大数据
Hadoop三大组件之——HDFS概述
HDFS的概述HDFS产生背景HDFS(HadoopDistributed
FileSystem
分布式文件系统),源自于Goole于2003年10月发表的GFS论文,是GFS的克隆版,具有如下特点:(1)
渐行渐近的岁月
·
2023-03-09 07:06
Hadoop
分布式文件系统
HDFS
Hadoop组件
Hadoop分布式文件系统——HDFS
一、介绍HDFS(HadoopDistributed
FileSystem
)是Hadoop下的分布式文件系统,具有高容错、高吞吐量等特性,可以部署在低成本的硬件上。
Cynicism_Kevin
·
2023-03-09 07:05
hadoop
hdfs
大数据
Hadoop三大框架之HDFS
HDFS定义HDFS(HadoopDistributed
FileSystem
)是一个文件系统,用于存储文件,通过目录树来定位为文件。它是分
five小点心
·
2023-03-09 07:59
大数据
hadoop
hdfs
大数据
二、大数据组件之HDFS
HDFS全称是HadoopDistributed
FileSystem
,也就是Hadoop分布式文件系统,是一种在硬件上运行的分布式文件系统。它与现有的分布式文件系统有许多相似之处。
阿靖哦
·
2023-03-09 06:30
访问hfds报错AccessControlException
org.apache.hadoop.security.AccessControlException:Permissiondeniedimportorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.
FileSystem
weixin_45068675
·
2023-03-08 22:01
上一页
35
36
37
38
39
40
41
42
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他