HDFS文件系统

操作 Docker 存储卷的常用指令汇总

存储卷就是将宿主机的本地文件系统中存在的某个目录直接与容器内部的文件系统上的某一目录建立绑定关系。
会飞的阿喵·2024-02-19 23:12

Docker 在window 2024版笔记 下载 安装 操作 配置

Docker在容器的基础上，进行了进一步的封装，从文件系统、网络互联到进程隔离等等，极大的简化了容器的创建和维护。使得Docker技术比虚拟机技术更为轻便、快捷。
PieroPc·2024-02-19 22:12

linux 磁盘占满查找大文件、挂载磁盘

type为disk），sda又分区为sda1sda2,sdb分区为sdb1sdb2，sda2又分区，能看到centos-home分区对应绑定的目录是/home,sdb1分区绑定的目录是/data查看当前文件系统使用的磁盘使用量即对应目录
科氏加速度·2024-02-19 22:09

Rust之包，箱和模块管理(三)：引用模块树中项目的路径

Windows10Rust1.62.1VSCode1.69.2项目工程这里继续沿用上次工程rust-demo引用模块树中项目的路径为了显示在模块树中何处可以找到一个项目，我们使用了一个路径，就像我们在导航文件系统时使用路径一样
枫★曦·2024-02-19 21:03

马士兵 day4_Yarn和Map/Reduce配置启动和原理讲解

分布式计算原则：移动计算，而不是移动数据hadoop默认包含了hdfs、yarn、mapReduce三个组件yarn（YetAnotherResourceNegotiater）是资源调度系统，yarn调配的是内存和
PC_Repair·2024-02-19 20:28

ClickHouse--07--Integration 系列表引擎

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录Integration系列表引擎1HDFS1.1语法1.2示例：2MySQL2.1语法2.2示例：3Kafka3.1语法3.2示例
知行合一。。。·2024-02-19 20:33

嵌入式学习记录18

Linux软件编程:1.Linux:操作系统的内核1.管理CPU2.管理内存3.管理硬件设备4.管理文件系统5.任务调度2.Shell:1.保护Linux内核(用户和Linux内核不直接操作,通过操作Shell
挽梦422·2024-02-19 20:03

GlusterFS：开源分布式文件系统的深度解析与应用场景实践

GlusterFS作为一款开源的、高度可扩展的分布式文件系统，以其独特的无中心元数据设计和灵活的卷管理机制，在众多场景中脱颖而出，为解决大规模数据存储难题提供了强有力的支持。
超逮虾户·2024-02-19 19:20

QEMU-KVM虚拟化：存储

Raw是一种非常简单的格式，它将文件系统中的字节逐字节存储在文
昕友软件·2024-02-19 19:19

[嵌入式系统-26]：RT-Thread -13- 内核组件编程接口 - 文件系统

目录一、RT-Thread文件系统1.1概述1.2如何配置文件系统1.3支持哪些文件系统1.4不同文件系统的比较二、文件系统编程接口2.1概述2.2两种文件系统接口的比较三、POSIX文件操作函数3.1
文火冰糖的硅基工坊·2024-02-19 19:43

学习笔记-磁盘存储管理

2）磁盘分区磁盘在系统中使用都必须先进行分区，然后建立文件系统，才可以存储数据。分区也有助于更有效地使用磁盘空间。每一个分区在逻辑上都可以视为一个磁盘。3）高级格式化磁盘分区在作为系统使用之前还需
他҈姓҈林҈·2024-02-19 19:36

kerberos 合并keytab文件 ktutil

非交互式：printf"%b""rkt/root/keytab/hdfs.keytab\nrkt/root/keytab/hive.keytab\nwkt/root/keytab/merged.keytab
brandblue·2024-02-19 19:51

操作系统-环境搭建

Linux环境搭建网络设置ssh命令下载简介本文将搭建Linux虚拟机,并且使用主机在终端利用ssh命令去远程连接Linux虚拟机搭建Linux虚拟机软件:virtualBox(免费)文件:Linux映像文件系统
JACK SUBWAY·2024-02-19 19:21

【JavaEE】_文件与IO

目录1.文件概述1.1文件的概念1.2文件的存储1.3文件的分类1.4目录结构1.5文件操作1.5.1文件系统操作1.5.2文件内容操作2.Java文件系统操作2.1File类所处的包2.2构造方法2.3
_周游·2024-02-19 18:34

docker （五）-docker存储-数据持久化

存储方式volume卷卷存储在主机文件系统分配一块专有存储区域，由Docker（在Linux上）管理，并且与主机的核心功能隔离。非Docker进程不能修改文件系统的这一部分。
小关暗器·2024-02-19 18:02

Linux系统中 uboot、内核与文件系统之间的关系

前言：最近正在学习Linux，总结了一下Linux系统中uboot、内核与文件系统之间的关系Linux初学者首先要搞清楚的三个文件:引导程序(bootoader):uboot.bin/uboot.imxLinux
玄奕子·2024-02-19 18:39

K8s进阶之路-Pod(创建过程)/Pause/Replicas

基于容器组管理容器（建议一个pod创建一个应用程序容器必须是紧耦合实例放在一起）pause容器：实现容器与容器之间的共享（在容器创建之前，底层都要先创建一个容器叫pause，用来实现对内的网络及ip、文件系统
是芸晗ya·2024-02-19 16:55

c# B树

B树是一种自平衡的树数据结构，通常用于数据库和文件系统等需要大量数据插入、删除和搜索操作的场景。在C#中实现B树可以帮助实现高效的数据存储和检索功能。
彭小彭~·2024-02-19 16:52

c# B+树

B+树是一种自平衡的树数据结构，通常用于数据库和文件系统等需要大量数据插入、删除和搜索操作的场景。与B树不同的是，B+树的内部节点不存储数据，只用作索引，所有的数据都存储在叶子节点上。
彭小彭~·2024-02-19 16:52

2018-06-29

Linux文件系统EXT4的前世今生在GitHub上对编程语言与软件质量的一个大规模研究玩转Elasticsearch的SQL功能多层数据结构，一对多关系，如何用一个查询查询所有的数据？
baitu·2024-02-19 13:50

云计算基础-快照与克隆

快照保存的是状态，备份保存的是副本)快照优点速度快，占用空间小快照工作原理在了解快照原理前，首先需要知道两个概念：索引/数据和差分盘索引和数据（indexnode/datablock）首先要了解，每一个文件系统都是有两部分组成的
比特微联·2024-02-19 13:28

云计算基础-存储基础

存储的特性：数据临时或长期驻留的物理介质需要保证数据能够及时的被读取或者保存需要保证数据完整安全有效什么是文件系统：文件系统是操作系统用于明确存储设备（常见的是磁盘，也有基于NANDFlash的固态硬盘
比特微联·2024-02-19 13:27

linux卸载提示target is busy，使用fuser命令解决

filesystem或者sockets的进程信息参数-a：显示命令行中指定的所有文件；-k：杀死访问指定文件的所有进程；-i：杀死进程前需要用户进行确认；-l：列出所有已知信号名；-m：指定一个被加载的文件系统或一个被加载的块设备
无敌锅包肉·2024-02-19 13:14

hadoop硬件配置 高可用 datanode namenode硬件配置

每个分布式文件系统分块在NameNode的内存中大小约为250个字节，此外还要加上文件和目录所需的250字节空间。
xcagy·2024-02-19 13:07

波奇学Linux:文件系统打开文件

从文件系统来看打开文件计算机系统和磁盘交互的大小是4kb物理内存的4kb，磁盘的4kb文件叫做页帧磁盘数据块的以4kb为单位。
社交达人波奇酱·2024-02-19 12:43

File类与IO流

文章目录计算机I/O体系常见的I/O设备计算机的存储体系软件方面认识OS+文件系统（FileSystem)统一管理文件File类1.1概述1.2判断功能的方法1.3创建删除文件\文件夹方法1.4目录的遍历
库里不会投三分·2024-02-19 12:09

精彩回顾 I DatenLord Hackathon 2023圆满结束！

达坦科技基于其跨云分布式文件系统DatenLord项目，结合AI大模型时代背景，搭建了擂台。我们邀请参赛者为DatenLord的极端场景设计并实现缓存p2p传输和同步模块。
·2024-02-19 12:34

【2019-04-28】Hadoop分布式文件系统

Hadoop自带HDFS(hadoopdistributefilesystem)。HDFS默认数据块128M。
BigBigFlower·2024-02-19 11:56

Hadoop搭建之 start-yarn.sh 报错

在搭建伪分布式的Hadoop集群环境时，在配置基础环境了并成功开启了HDFS组件后，jps查看已运行的名称节点和数据节点进程，[hadoop@masterhadoop]$jps8994NameNode10396Jps9087DataNode9279SecondaryNameNode
万里长江雪·2024-02-19 11:58

U盘变成RAW格式怎么修复？U盘数据如何恢复？

U盘文件系统类型变成RAW怎么办？U盘打不开变成RAW不要慌，按照本文的方法可以轻松恢复U盘数据并且修复RAW错误。U盘文件系统类型是RAW怎么办？U盘类型是RAW是什么意思？
qq_39571617·2024-02-19 11:37

分布式文件系统 SpringBoot+FastDFS+Vue.js【四】

分布式文件系统SpringBoot+FastDFS+Vue.js【四】八、文件的下载和删除功能8.1.FastDFSClient.java8.2.FileServerController.java8.3
良辰美景好时光·2024-02-19 10:21

分布式文件系统 SpringBoot+FastDFS+Vue.js【二】

分布式文件系统SpringBoot+FastDFS+Vue.js【二】六、实现上传功能并展示数据6.1.创建数据库6.2.创建springboot项目fastDFS-java6.3.引入依赖6.3.fastdfs-client
良辰美景好时光·2024-02-19 10:20

分布式文件系统 SpringBoot+FastDFS+Vue.js【三】

分布式文件系统SpringBoot+FastDFS+Vue.js【三】七、创建后台--分角色管理7.1.创建后台数据库表7.2.创建实体类7.2.1.Admin7.2.2.Menu7.2.3.MenuBean7.2.4
良辰美景好时光·2024-02-19 10:20

Linux之autofs自动挂载服务

autofs是Linux系统中一种自动挂载服务，它可以在需要时自动挂载文件系统，而在不需要时自动卸载。这种机制可以提高系统资源的利用率，减少管理员的工作量。
·2024-02-19 10:33

解决/dev/mapper/centos-root 占用了过高问题

centos-root占用了过高问题1.查看其他分区占用情况df-hlimage.png2.扩容根目录的思路如下：如图片中的例子：/home的内存空间比较大，可以分给其他的根目录，将/home文件夹备份，删除/home文件系统所在的逻辑卷
小鬼客·2024-02-15 10:01

配置hive on spark

配置hiveonspark1、上传Spark纯净版jar包到HDFS：hdfsdfs-mkdir/spark-jarshdfsdfs-put/opt/spark/jars/*/spark-jars2、修改
空白格2519·2024-02-15 10:51

hive on spark配置经验

常规配置配置完，开启hadoop，开启spark（如果在hdfs上上传了纯净版的spark则不需要开启），开启hive注：当前节点一定要是namenode的active节点，因为hadoop长时间不用namenode
小五冲冲冲·2024-02-15 10:21

分布式文件系统 SpringBoot+FastDFS+Vue.js

分布式文件系统SpringBoot+FastDFS+Vue.js一、分布式文件系统1.1.文件系统1.2.什么是分布式文件系统1.3.分布式文件系统的出现1.3.主流的分布式文件系统1.4.分布式文件服务提供商
良辰美景好时光·2024-02-15 05:20

考考你，这些嵌入式相关名词你知道几个？

操作系统需要处理管理与配置内存、决定系统资源供需的优先次序、控制输入与输出设备、操作网络与管理文件系统等基本事务。操作系统也提供一个让用户与系统交互的操作界面。2.shell：它是
Risehuxyc·2024-02-15 04:07

Linux系统入门与实践：一篇详细的教程和指南【持续更新】

目录导航前言1.Linux介绍和发展2.Linux内核和发行版3.虚拟机安装Linux系统4.Linux桌面版和服务器版5.Linux的文件系统6.Linux常用命令7.在Windows安装WSL28.
郏帅北·2024-02-15 02:11

Mac命令行

参考MAC命令行大全MacOS的文件系统1.MacOS采用的Unix文件系统，所有文件都挂在根目录/下面，所以不再有Windows下的盘符概念。
内心强大的Jim·2024-02-15 02:32

Linux基本命令-02（文件操作）

1，Linux的文件系统（1）Ext：Linux中最早的文件系统，由于在性能和兼容性上具有很多缺陷，现在已经很少使用。
晓之以理的喵·2024-02-15 02:39

大数据集群环境启动总结

hadoop启动与停止单个节点逐一启动在主节点上使用以下命令启动HDFSNameNode：hadoop-daemon.shstartnamenode在每个从节点上使用以下命令启动HDFSDataNode
我还不够强·2024-02-14 23:04

Java类加载

Java类加载机制是Java虚拟机（JVM）的一个核心组成部分，它负责将Java类从不同的数据源（如本地文件系统、网络等）加载到JVM中，并为之生成对应的java.lang.Class对象。
我就是胖着玩玩的·2024-02-14 21:43

HDFS用户及权限配置

HDFS用户及权限配置使用linux用户bruce，格式化hadoop的namenode，那么bruce成为hdfs的超级用户在bruce用户下运行命令：#创建/user/hadoop目录hadoopfs-mkdir-p
wpheternal·2024-02-14 21:42

Hadoop(HDFS)的超级用户

Hadoop(HDFS)的超级用户超级用户超级用户即运行namenode进程的用户。宽泛的讲，如果你启动了namenode，你就是超级用户。超级用户干任何事情，因为超级用户能够通过所有的权限检查。
zinger.wang·2024-02-14 21:12

0564-6.1.0-HDFS超级用户(Superuser)和HDFS管理员(Administrator)的区别

1文档编写目的在前面的文章《0550-6.1-如何将普通用户增加到HDFS的超级用户组supergroup》中Fayson介绍过如何将普通用户设置为HDFS的超级用户，从而可以让普通用户也可以执行如dfsadmin
Hadoop_SC·2024-02-14 21:41

HDFS的超级用户

一.解释原因HDFS(HadoopDistributedFileSystem)和linux文件系统管理一样，也是存在权限控制的。
重剑DS·2024-02-14 21:41

《Linux 简易速速上手小册》第6章: 磁盘管理与文件系统（2024 最新版）

文章目录6.1磁盘分区与格式化6.1.1重点基础知识6.1.2重点案例：为新硬盘配置分区和文件系统6.1.3拓展案例1：创建交换分区6.1.4拓展案例2：使用LVM管理分区6.2挂载与卸载文件系统6.2.1
江帅帅·2024-02-14 21:07

hive中的Load data 和 insert的区别

INPATH'filepath'[OVERWRITE]INTOTABLEtablename[PARTITION(partcol1=val1,partcol2=val2...)]local关键字：有，表示从本地文件系统中导入没有
日写BUG八百行·2024-02-14 19:10
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他