Hadoop文件系统

《Linux设备驱动开发详解》读书笔记

《Linux设备驱动开发详解》读书笔记本书主要介绍linux设备驱动开发的方法，共有21章：linux设备驱动概述及开发环境搭建驱动设计的硬件基础linux内核及内核编程linux内核模块linux文件系统与设备文件字符设备驱动
江洋之道·2024-01-25 08:02

大数据平台组件日常运维操作说明（Hadoop/Zookeeper/Kafa/ES/Mysql/Spark/Flume/Logstash/Tomcat）

Hadoop日常运维操作说明hdfs生产环境hadoop为30台服务器组成的集群，统一安装配置，版本号为2.7.7部署路径：/opt/hadoop启动用户：hadoop配置文件：/opt/hadoop/
love6a6·2024-01-25 07:12

基于CentOS7 Hadoop-2.7.2伪分布式部署

1、基本环境Linux版本：CentOS7.0JDK版本：jdk-7u79-linux-x64.tar.gzHadoop版本：hadoop-2.7.2.tar.gzjdk以及Hadoop安装在/usr目录下
程序员小H·2024-01-25 07:23

Hadoop HDFS 实现原理图文详解

一、HDFS体系结构1.1HDFS简介Hadoop分布式文件系统(HDFS)是运行在通用硬件(commodityhardware)上的分布式文件系统（DistributedFileSystem）。
禅与计算机程序设计艺术·2024-01-25 07:49

查看磁盘的使用、分区、挂载

：添加一个分区这时候会提示要添加一个主分区还是扩展分区，（一个磁盘可以有四个主分区，一个主分区可以有四个扩展分区），再接下来设置起止扇区号（一个扇区512B，根据个人需要设置分区大小）（如果磁盘原来有文件系统
勤劳的小仓鼠·2024-01-25 06:22

Hive运行机制与使用

hive介绍hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。
小猪Harry·2024-01-25 05:09

Linux vs Windows：有什么区别?

image[TOC]文件系统在MicrosoftWindows中，文件存储在不同数据驱动器上的文件夹中，如C：D：E：但是，在Linux中，文件以从根目录开始的树结构排序。该根目录可以被视
程序员will·2024-01-25 05:54

实现报表的可控缓存

【摘要】使用缓存可以提升报表性能是不争的事实，一般高端报表工具都会提供报表缓存功能，可将整个报表计算结果缓存在文件系统中，以便用户下次访问相同参数的报表时可以快速读取缓存结果进行展现。
小黄鸭呀·2024-01-25 05:03

ios中URLConnection和URLSession的区别

NSURLConnection大部分可以互相替代.NSURLSession支持后台网络操作,除非用户强行关闭.NSURLSession提供的功能:1.通过URL将数据下载到内存;通过URL将数据下载到文件系统
MiniCoder·2024-01-25 05:28

使用WAF防御网络上的隐蔽威胁之目录穿越

这种攻击允许攻击者访问存储在Web服务器文件系统上的文件和目录，这些文件和目录原本不应该对用户可见或可访问。
Peggy·Elizabeth·2024-01-25 04:10

Linux-LVM逻磁盘管理

logicalvolume，LV）4.PE5.LE三、LVM常用命令四、物理卷PV管理五、卷组VG管理六、逻辑卷LV管理一、概述LVM是Linux下对磁盘分区进行管理的一种工具，适合管理大存储设备，并允许用户动态扩容文件系统
刘某的Cloud·2024-01-25 04:52

linux下的挂载点和分区是什么关系（详解挂载点）

百度定义：挂载点实际上就是linux中的磁盘文件系统的入口目录，类似于windows中的用来访问不同分区的C:、D:、E:等盘符。
modi000·2024-01-25 03:10

Linux稀碎知识点 -- 挂载点和分区

挂载点实际上就是linux中的磁盘文件系统的入口目录，类似于windows中的用来访问不同分区的C:、D:、E:等盘符。
Jizhi_Zhang·2024-01-25 03:09

ubuntu-base（arm64与riscv64） 根文件系统

ubuntu-base（arm64与riscv64）根文件系统有个小需求，是在arm64和riscv64上都跑起来speccpu2017首先在Qemu上跑起来，需要考虑需要的【Linux内核、根文件系统
京雨·2024-01-25 03:13

十二、为什么mysql的索引要使用B+树

在计算机中，磁盘存储数据最小单元是扇区，一个扇区的大小是512字节，而文件系统（例
那钱有着落吗·2024-01-25 02:14

Linux—文件系统与文件目录基本操作

1、Windows上的分区与文件系统新机器分区、格式化（选择文件系统NTFS），隐藏文件系统结构数据文件系统的理解。
咖啡加剁椒..·2024-01-25 01:23

你了解快速排序的使用场景吗？

文件系统排
魏泽川·2024-01-25 00:49

网络文件共享ftp

StorageAreaNetwork，简称SAN（可以使用空间，管理也是你来管理）网络附加存储：Network-AttachedStorage，简称NAS（存储和管理空间都在远程）理解为百度云盘只能下载存储，不能管理文件系统
玉米侠爱吃玉米·2024-01-24 22:23

Docker数据管理-容器数据卷

Docker数据管理-容器数据卷文章目录Docker数据管理-容器数据卷什么是容器数据卷使用数据卷安装mysql具名挂载和匿名挂载什么是容器数据卷数据卷是一个可供容器使用的特殊目录，它绕过文件系统，可以提供很多专用的特性
拉霍拉卡·2024-01-24 21:32

docker面试题（一）

每个容器都具有自己的文件系统、网络和进程空间，但与主机和其他容器相互隔离。问题2：Docker的组成包含哪几大部分？答案2：Docker的组成包括以下几个
你曾经是少年·2024-01-24 21:31

IO、存储、硬盘、文件系统

1.输入/输出（IO）IO是计算机与外部设备之间进行数据交换的过程。输入是将数据从外部设备传输到计算机，如键盘、鼠标等。输出是将数据从计算机传输到外部设备，如显示器、打印机等。2.存储存储是指计算机中用于保存数据的介质，可以分为主存储器（内存）和辅助存储器（硬盘、SSD、光盘等）。主存储器是计算机中直接与CPU进行数据交换的部分，速度较快但容量较小。辅助存储器主要用于长期存储数据，容量较大但速度相
Ting-yu·2024-01-24 21:56

标杆班级-MySQL-lesson05-存储引擎

1、简介相当于Linux文件系统，只不过比文件系统强大2、功能了解数据读写数据安全和一致性提高性能热备份自动故障恢复高可用方面支持等.3、存储引擎种类（笔试）3.1介绍(OracleMySQL)InnoDBMyISAMMEMORYARCHIVEFEDERATEDEXAMPLEBLACKHOLEMERGENDBCLUSTERCSV3.2
zwb_jianshu·2024-01-24 21:36

Docker 魔法解密：探索 UnionFS 与 OverlayFS

1.概述UnionFileSystemUnionFileSystem，简称UnionFS是一种为LinuxFreeBSDNetBSD操作系统设计的，把其他文件系统联合到一个联合挂载点的文件系统服务。
液态不合群·2024-01-24 20:48

Spark基本架构及原理

Hadoop和Spark的关系Spark运算比Hadoop的MapReduce框架快的原因是因为Hadoop在一次MapReduce运算之后,会将数据的运算结果从内存写入到磁盘中,第二次Mapredue
李飞_fd28·2024-01-24 20:50

LV.13 D12 Linux内核调试及rootfs移植 学习笔记

一、根文件系统1.1根文件系统根文件系统是内核启动后挂载的第一个文件系统系统引导程序会在根文件系统挂载后从中把一些基本的初始化脚本和服务等加载到内存中去运行1.2根文件系统内容binshell命令(elf
djjyy·2024-01-24 20:12

Docker数据持久化与数据共享

数据存储方式Docker提供了以下几种存储方式：volume卷：这种方式是在宿主机文件系统分配一块专有
xdpcxq1029·2024-01-24 19:37

Docker数据卷操作 Docker挂载Nginx、MySQL数据卷

数据卷（volume）是一个虚拟目录，指向宿主机文件系统中的某个目录。将容器与数据分离，解耦合，方便操作容器内数据，保证数据安全。一旦完成数据卷挂载，对容器的一切操作都会作用在数据卷对应的宿主机目录
VincentHu_·2024-01-24 19:06

LINUX基础培训十四之系统参数介绍

Linux的内核参数是可以按照它们的功能进行分类，大体分类为：网络层面，文件系统层面，内存层面，内核层面。需要注意的是，Linux系统默认是使用最低的内核参数，就像CPU一样
有莘不破呀·2024-01-24 19:36

软考笔记--操作系统-内存管理

文件系统是操作系统进行信息管理的基本单位，对软件资源的管理是通过文件系统来实现的。
赤露水·2024-01-24 19:21

系统移植(系统移植环境搭建及简单概念)

linux系统=linux内核+根文件系统;根文件系统=库(/lib和/usr/lib)+命令(/bin和/usr/bin)+配置文件(/etc)+GUI(图形化界面，如:QT)1、为什么学习系统移植为后边学习
°嘟嘟嘟嘟·2024-01-24 19:38

Day1.复习Linux系统移植的内容，将内核启动流程根文件系统的制作过程整理一下。

答：1）复习Linux系统移植：1.1系统移植就是给开发板搭建Linux操作系统。学习这门课程目的是为后面Linux驱动开发做准备，然后是驱动开发工程师必备技能。1.2系统移植前，需要我们先搭建好移植环境，知道一些gnu二进制工具集，然后会分析Makefile1.3进入正式的移植过程中，我们需要安装tftp服务器（基于UDP协议完成的简单文本文件传输。作用：通过网线下载程序到开发板上）安装nfs服
m0_69078052·2024-01-24 19:05

LV.10 系统移植

D1嵌入式系统移植导学Day1-1系统移植课程导学嵌入式系统分层Linux功能进程管理内存管理网络协议文件系统硬件设备应用层开发，只要是Linux系统就行底层开发，因为不同处理语言对应不同汇编的独特性，
AlterEgo(●ˇ∀ˇ●)·2024-01-24 19:34

华清远见嵌入式学习day27——编译工具和环境搭建

0、系统移植四天课程安排1.编译工具，环境搭建2.bootloader3.kernel4.文件系统1、嵌入式系统的应用领域1.军事2.医疗3.移动设备4.家电5.工控2、什么是嵌入式系统一般的定义：以计算机技术为基础
FranklinLudwig·2024-01-24 19:04

系统移植 day1 tftp简单文件传输协议和nfs网络文件系统的环境搭建

一.系统移植1.嵌入式系统的特点三低：功耗低成本低体积小两高：可靠性高安全性高2.通用嵌入式系统硬件一般由一下部分组成微控制器:cpu晶振:提供时钟内存（如：SRAM，SDRAM）:运行程序存储器（如：ROM，FLASH，SD，微硬盘）:存储程序其他外围设备接口:输入、输出接口:3.嵌入式系统软件组成部分1)有os（操作系统）的软件组成APPkernel驱动层硬件层2)无os的软件组成APP驱动层
Wexcill·2024-01-24 19:32

2019-05-15

主流程1.关闭防火墙2.机器间实现免密3.zk部署4.hadoop部署实现流程2.免密登录ssh-keygen回车一直到最后（有3次）生成本机秘钥后，同步到自己机器和其他机器ssh-copy-idhostxshell
泡泡_bbb9·2024-01-24 15:54

探索文件与交互：使用PyQt5构建一个高级文件选择器

关键功能文件浏览：使用QColumnView和QFileSystemModel展示文件系统。图片预览：选中图片
babybin·2024-01-24 15:45

系统引导程序 Boot Loader——学习笔记

基于嵌入式Linux的完整系统软件由三个部分组成：系统引导程序、Linux操作系统内核和文件系统。
aFakeProgramer·2024-01-24 15:40

xfs_repair命令详解

1.现状目前网上出现大量的主机输入输出错误，原因是由于主机文件系统损坏。
root_10·2024-01-24 14:26

c++遍历文件夹下指定后缀的文件

dirent.hdirent.h是一个头文件，它包含了在文件系统中进行目录操作的函数和数据结构的声明。
chen_znn·2024-01-24 14:12

通过hadoop jar命令运行提交MapReduce到YARN中

实现Wordcount大概流程：给定数据输入的路径，给定结果输出的路径；将输入路径内的数据中的单词进行计数，将结果写到输出路径如下：在hadoop下找hadoop-mapreduce-examples-
%HelloWorld%·2024-01-24 13:28

MapReduce配置 & YARN集群部署

1：编辑mapred-env.sh；添加如下配置#设置jdk路径exportJAVA_HOME=/opt/module/jdk#设置JobHistoryServer进程内存为1GexportHADOOP_JOB_HISTORYSERVER_HEAPSIZE
%HelloWorld%·2024-01-24 13:28

部署Hadoop集群

在node1节点执行，以root身份1：在VMware虚拟机集群上部署HDFS集群1）准备好hadoop安装包；目前最新3.3.4；了解：2）上传解压hadoop①：上传hadoop到node1节点；②
%HelloWorld%·2024-01-24 13:27

Hive在VMware中部署

会在日志文件中生成root用户的一个随机密码，使用下面命令查看密码：如果你想设置简单密码，需要设置mysql密码安全级别：(进入mysql中实行)然后就可以简单密码了：(进入mysql中实行)步骤二：配置hadoop
%HelloWorld%·2024-01-24 13:27

基于Ubuntu Base构建根文件系统

1.什么是UbuntuBaseUbuntu针对不同的CPU架构提供相应的ubuntubase根文件系统，目前提供的架构有amd64、arm64、armhf、i386、s390x、ppc64el、riscv642
牛角上的男孩·2024-01-24 13:47

chroot: failed to run command ‘/bin/bash’: No such file or directory

busybox的环境下，执行cdrootfschroot.报错如下：chroot:failedtoruncommand‘/bin/bash’:Nosuchfileordirectory根据报错应该rootfs文件系统中缺少
牛角上的男孩·2024-01-24 13:46

完美调试android-goldfish(linux kernel) aarch64的方法

环境要求Macm1Macm1中虚拟机安装aarch64ubuntu22.02Macm1安装OrbStack，并在其中安装ubuntu20.04（x86_64）构建文件系统在虚拟机aarch64ubuntu22.02
goodcat666·2024-01-24 12:30

Kafka集群的安装与配置（二）

2.2.2生产者命令行操作1）查看操作生产者命令参数[atguigu@hadoop102kafka]$bin/kafka-console-producer.sh2）发送消息[atguigu@hadoop102kafka
ole_triangle_java·2024-01-24 12:59

学习git笔记

一、Git1、版本控制工具应该具备的功能①协同修改：多人并行不悖的修改服务器端的同一个文件②数据备份：不仅保存目录和文件的当前状态，还能保存每个提交过的历史状态③版本管理：不保存重复内容，Git采取了文件系统快照的方式
低格调.·2024-01-24 12:54

2.docker client

会先去寻找image文件，然后执行run指令Override默认指令#dockerrundockerrunbusyboxechohellodockerrunbusyboxechobye查看busybox的文件系统快照
程序媛9688·2024-01-24 12:51

【Android】细数Linux和Android系统中的伪文件系统

文章目录前言Linux伪文件系统cgroupfsLinux的cgroupsAndroid的cgroupsdebugfsfunctionfs(/dev/usb-ffs/adb)functionfs的引入sysfs
Shujie_L·2024-01-24 11:24
上一页 28 29 30 31 32 33 34 35 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他