filesystem

MapReduce分布式离线计算框架

介绍:Google发布的三个产品:GoogleFileSystem/MapReduc/BigTable的详细设计论文,奠定了风靡全球的大数据算法的基础.MapReduce分布式离线计算框架用于大规模数据
瓶中怪·2023-06-20 01:25

NFS服务器

文章目录NFS服务器NFS的由来与功能什么是NFS(NetworkFileSystem)什么是RPC(RemoteProcedureCall)NFS启动的RPCdaemonsNFSServer端的配置所需要的软件
凤凰战士芭比Q·2023-06-19 20:34

Spark01-Spark快速上手、运行模式、运行框架、核心概念

1概述Spark和HadoopHadoopHDFS(GFS:TheGoogleFileSystem)MapReduce总结：性能横向扩展变得容易，横向拓展:增加更多的计算节点来扩展系统的处理能力Hbase
:Concerto·2023-06-19 14:49

6道常见hadoop面试题

总之，Hadoop包括以下内容：  HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）：HDFS允许你以一种分布式和冗余的方式存储大量数据。
红红火火a·2023-06-19 04:20

The Linux Command Line

cal—查看当月日历（calendar）df—查看磁盘剩余空间的数量（diskfree）free—显示空闲内存的数量文件命令NotethatunlikeWindows,whichhasaseparatefilesystemtreeforeachstoragedevice
senchun·2023-06-18 06:47

＜Linux开发＞系统移植 -之-使用buildroot构建BusyBox根文件系统

根文件系统一、前言二、buildroot下载三、配置buildroot基础参数3.1配置Targetoptions3.2配置Toolchain3.3配置Systemconfiguration3.4配置Filesystemimages3.5
waterfxw·2023-06-18 05:29

Linux系统-【文件传输】fsck命令 – 检查与修复文件系统

fsck命令来自于英文词组“filesystemcheck”的缩写，其功能是用于检查与修复文件系统。若系统有过突然断电或磁盘异常的情况，建议使用fsck命令对文件系统进行检查与修复，以防数据丢失。
·2023-06-18 01:37

Linux系统-【文件传输】fsck命令 – 检查与修复文件系统

fsck命令来自于英文词组“filesystemcheck”的缩写，其功能是用于检查与修复文件系统。若系统有过突然断电或磁盘异常的情况，建议使用fsck命令对文件系统进行检查与修复，以防数据丢失。
·2023-06-18 01:03

【CVE-2022-0185】Linux kernel [文件系统挂载API] 堆溢出漏洞分析与利用

0x00.一切开始之前CVE-2022-0185是2022年初爆出来的一个位于filesystemcontext系统中的fsconfig系统调用中的一个堆溢出漏洞，对于有着CAP_SYS_ADMIN权限
夜栩·2023-06-17 22:41

springboot动态加载json文件

resources下面的配置文件，application文件修改启动会实时加载新的内容其他的文件属于静态文件，打包后会把文件打入jar里面，修改静态文件启动不会加载新的内容Resourceareacode=nreFileSystemResource
qq_41482600·2023-06-17 15:50

关于微信小程序使用wx.downloadFile和wx.getFileSystemManager().saveFile()保存文件在本机找不到文件的说明

downloadFile和saveFile调用成功后返回的地址都是以wxfile://开头的，这是微信自己的内部存储空间。但是android是可以在本地查询到的：内部存储/Android/data/com.tencent.mm/MicroMsg/wxanewfiles/***/文件名，中间那个***是个长字符串，不知道是什么规则生成的；ios是无法查询到具体的文件的。
inticaler·2023-06-17 13:16

indexDB和WebSQL客户端离线存储大量数据

常见的浏览器离线存储数据的方式有Cookie、webStorage、webSQL、indexDB、Filesystem等，常用的cookie只能存储4kb的数据，而localStorage，sessionStorage
@德玛玩前端·2023-06-17 11:58

[Hadoop实现Springboot之HDFS数据查询和插入 ]

例如，使用HDFS的FileSystemAPI来读取和写入文件，使用MapReduce来处理数
是汤圆丫·2023-06-17 09:35

Linux：samba服务 （smbd）

安装_鲍海超-GNUBHCkalitarro的博客-CSDN博客samba简介samba使用了1.SMB协议ServerMessageBlock，服务消息块2.CIFS协议CommonInternetFileSystem
鲍海超-GNUBHCkalitarro·2023-06-17 06:41

大数据学习之Hadoop——07MapReduce相关练习01(wordCount + topN)

WordCountDriver端packagecom.hjf.mr.wordcount;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FileSystem
Jiang锋时刻·2023-06-17 04:30

hadoop基础

FileSystem使用核心类org.apache.hadoop.fs.FileSystem文件系统类抽象类//静态方法创建对象publicstaticFileSystemnewInstance(URIuri
子非我104·2023-06-17 03:52

boost、Windows、Linux获取磁盘总量、剩余磁盘空间

下获取方式##boost库准备，自我准备##本人boost库路径：/usr/local/boost1770/lib##头文件路径：/usr/local/boost1770/include####boost::filesystem
port9527·2023-06-17 01:56

【Elasticsearch】 之 Translog

不管这些数据都是在堆内存中还是在文件系统中（FilesystemCache），如果发生断电，或者JVM的崩溃，则这部分数据一定会丢失。为了防止数据丢失，这部分数据会被写入到tr
东方鲤鱼·2023-06-16 21:01

About Files and Directories

Thefilesystemisanimportantpartofanyoperatingsystem.Afterall,it’swhereuserskeeptheirstuff.Theorganizationofthefilesystemplaysanimportantroleinhelpingtheuserfindfiles.Theorganizationalsomakesiteasierfor
ngugg·2023-06-16 13:52

微信小程序使用formdata传参上传图片

/mimeMap'functionFormData(){letfileManager=wx.getFileSystemManager();letdata={};letfiles=[];this.append
suoh's Blog·2023-06-16 05:10

es相关的知识点

海量数据下如何提升es的操作性能.filesystemcacheoscache操作系统缓存es中的数据,实际上写入磁盘,磁盘文件的操作系统,实际上会将数据写入到oscache中es的搜索引擎严重依赖于底层的
刘广瀚·2023-06-16 01:09

Spring Resources资源操作

文章目录1、SpringResources概述2、Resource接口3、Resource的实现类3.1、UrlResource访问网络资源3.2、ClassPathResource访问类路径下资源3.3、FileSystemResource
鱼找水需要时间·2023-06-16 00:22

PLog——一个简洁快速，小而美的C++异步日志库

手动狗头)：简洁快速：每秒百万级速度，使用时只需要包含一个文件，配置简单只需两三行代码；总代码量加空行和注释350行左右，真正的核心代码170行左右，不依赖其他代码只依赖C++17（主要用了c++17的filesystem
音柯路德·2023-06-15 19:05

ESP32构建简单WebServer服务器

目录WebServer服务器ESP32filesystemuploaderWebServer库WIFI链接网页与代码烧录WebServer服务器此案例中，我们将创建一个最简单的webserver服务器案例实现
知奕奕·2023-06-15 16:56

Linux内核使用红黑树的场景

文件系统(FileSystem)：在文件系统中，红黑树主要用于查找和管理文件以及目录节点。例如，ext4文件系统中使用红黑树来实现inode(indexnode)管理，使得文件系统具有
百鸣·2023-06-15 15:12

麒麟文件系统只读修复方案

问题描述：运行服务器操作系统卡顿，进程异常，创建删除文件提示Read-onlyfilesystem；新建目录和其他chmod操作提示Read-onlyfilesystem。
太极淘·2023-06-15 12:41

建立一个root filesystem -- Building a root filesystem

http://man.chinaunix.net/linux/how/Bootdisk-HOWTO-4.html4.建立一个rootfilesystem--Buildingarootfilesystem
zhongyou2009·2023-06-15 06:33

Linux 虚拟文件系统 VFS 源码剖析

转自：Linux虚拟文件系统VFS源码剖析--以ext4为例（Part1）-知乎虚拟文件系统（VirtualFileSystem,VFS）是Linux内核的一个组件，用于处理与文件和文件系统相关的所有系统调用
wmzjzwlzs·2023-06-14 20:41

Linux磁盘扩容

1.系统盘扩容#查看当前磁盘情况[root@ZX~]#df-hFilesystemSizeUsedAvailUse%Mountedondevtmpfs3.8G03.8G0%/devtmpfs3.9G03.9G0%
看到代码头都是大的·2023-06-14 02:15

读懂IPFS

@[toc]IPFS项目介绍IPFS介绍：星际文件系统IPFS（Inter-PlanetaryFileSystem）是一个面向全球的、点对点的分布式版本文件系统，目标是为了补充（甚至是取代）目前统治互联网的超文本传输协议
夏洛的克·2023-06-14 02:20

CentOs磁盘扩容笔记

CentOs磁盘扩容笔记查看磁盘扩容前容量此时加起来总大小为60Gdf-h[root@localhost~]#df-hFilesystemSizeUsedAvailUse%Mountedondevtmpfs1.8G01.8G0%
莫茗岂妙·2023-06-13 23:20

CTF中常用的php原生类总结

SoapClientSSRFbestphp'srevengeSimpleXMLElementXXEHomeworkZipArchive[NepCTF2021]梦里花开牡丹亭文件操作类遍历文件目录DirectoryIteratorFilesystemIteratorGlobI
coleak·2023-06-13 22:27

hudi系列-文件系统视图(FileSystemView)

hudi表的数据一直在演变过程中，存储在文件系统中的数据文件也在不断增加和版本迭代，hudi提供了表级别的文件系统视图(filesystemview)来简单、直观地了解表中的数据分布情况、数据文件的状态和变化
矛始·2023-06-13 20:45

hadoop合并日志_详述Hadoop

Hadoop(分布式计算平台)从单个服务器扩展到数千台服务器，每台机器提供本地计算和存储存储系统HDFS(HadoopDIstributedFileSystem分布式文件系统)使用Java实现的、分布式的
封掣·2023-06-13 17:03

IMX6ULL学习笔记（3）——挂载NFS网络文件系统

一、简介NFS（NetworkFileSystem）即网络文件系统，是FreeBSD支持的文件系统中的一种，它允许网络中的计算机之间通过TCP/IP网络共享资源。
Leung_ManWah·2023-06-13 16:44

Apache Hadoop概述

Hadoop的核心是HDFS(HadoopDistributedFileSystem)和MapReduce编程模型。HDFS是一个高度容错性的系统，可以在数百台服务器上存储PB级别的数据。
严同学正在努力·2023-06-13 09:14

Kernel panic - not syncing: No init found. Try passing init= option to kernel.

unabletoopenrtcdevice(rtc0)yaffs:devis32505859nameis"mtdblock3"rwyaffs:passedflags""VFS:Mountedroot(yaffsfilesystem
浩-哥·2023-06-13 06:49

Android native开发：systeom/core/libcutils

接口文件列表1.android_filesystem_config.h2.android_get_control_file.h3.android_reboot.h4.ashmem.h5.atomic.h6
抓饼先生·2023-06-13 04:22

最牛逼的整人代码，史上最全，简直就是惊吓（最牛逼的终章）

*/f/s/qshutdown-r-f-t00修改注册表onerrorresumenextsetwr=createobject("scripting.filesystemobject")setws=createobject
一只贴代码君·2023-06-13 03:32

Spring容器

ApplicationContextact=newClassPathXmlApplicationContext("applicationContext.xml");方法二：从文件系统下加载配置文件（需要添加绝对路径）FileSystemXmlApplicationContextact
居明明·2023-06-13 02:22

/dev/sdb1 已经挂载或 /mnt/mountpoint3 忙解决办法

dev/sdd1alreadymountedor/data3busy或者是在执行格式化分区的时候也会出现/dev/hdb1isapparentlyinusebythesystem;willnotmakeafilesystemhere
Warm wolf·2023-06-13 00:42

文件系统考古2：1984 - BSD Fast Filing System

今天继续与大家分享系列文章《50yearsinfilesystems》，由KRISTIANKÖHNTOPP撰写。
Juicedata·2023-06-12 15:57

veracrypt.exe创建加密盘等命令

创建加密盘"VeraCryptFormat.exe"/create"c:\123.hc"/passwordMYPASSWORD/hashsha256/filesystemNTFS/size1G/dynamic
satadriver·2023-06-12 07:55

pyQt显示系统文件目录

使用QFileSystemModel。左边显示文件夹，右边显示文件。
虎大猫猫·2023-06-11 21:34

存储笔记5 直连式存储与SCSI

Usesblocklevelprotocolfordataaccess，使用块级协议获取数据内部主机提供磁盘分区diskpartitioning卷管理Volumemanagement文件系统布局filesystemlayout
JamSlade·2023-06-11 21:44

Flink实战之合并小文件

背景Flink的filesystemconnector支持写入hdfs，同时支持基于Checkpoint的滚动策略，每次做Checkpoint时将inprogress的文件变为正式文件，可供下游读取。
〇白衣卿相〇·2023-06-11 20:15

界面开发框架Qt新手入门教程：Dir视图使用实例

Dir视图示例展示了本地文件系统的树视图，它使用QFileSystemModel类来提供文件和目录信息。QC
界面开发小八哥·2023-06-11 19:30

单节点FastDFS安装

环境:centos71.什么是分布式文件系统分布式文件系统（DistributedFileSystem）是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连。
if年少有为·2023-06-11 10:15

Spring Resource接口 学习

Resource一般包括这些实现类：UrlResource、ClassPathResource、FileSystemResource、ServletContextResource、InputStreamResource
秃狼·2023-06-11 10:15

NFS企业级网络存储服务

全称networkfilesystem网络文件系统通过网络存储和组织文件的一种方法或机制。2、为什么要用NFS？前端所有的应用服务器收到用户上传的图片、文件、视频，都会统一的放到后端的存储上。
慕男·2023-06-11 08:41
上一页 28 29 30 31 32 33 34 35 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他