ext4文件系统

数据采集与数据预处理（python）概述（一）

常见的数据存储方式包括：文件系统（FileSystem）：文本文档：TXT,DOC,PDF,XLS(Excel),CSV等
数学难·2024-09-10 23:56

千万级规模高性能、高并发的网络架构经验分享

沙龙时间：2015年11月21日下午地点：梦想加联合办公空间分享人：卫向军（毕业于北京邮电大学，现任微博平台架构师，先后在微软、金山云、新浪微博从事技术研发工作，专注于系统架构设计、音视频通讯系统、分布式文件系统和数据挖掘等领域
搬砖养女人·2024-09-10 20:35

深入解析HDFS：定义、架构、原理、应用场景及常用命令

引言Hadoop分布式文件系统（HDFS，HadoopDistributedFileSystem）是Hadoop框架的核心组件之一，它提供了高可靠性、高可用性和高吞吐量的大规模数据存储和管理能力。
CloudJourney·2024-09-10 12:39

Linux学习-inotify和rsync同步

Inotify是一个Linux特性，它监控文件系统操作，比如读取、写入和创建。Inotify反应灵敏，用法非常简单，并且比cron任务的繁忙轮询高效得多。
丢爸·2024-09-10 08:42

文件管理 和 vim 编辑器 网络配置

文件管理和vim编辑器网络配置linux中一切皆文件linux文件的四大类普通文件目录文件链接文件设备文件系统目录结构，（在Linux系统中一切从/开始）/表示根目录是整个文件系统的入口硬件磁盘分区需要挂在目录下才能使用包括光盘
小颖⸝⸝ ᷇࿀ ᷆⸝⸝·2024-09-10 08:12

详解 JuiceFS sync 新功能，选择性同步增强与多场景性能优化

JuiceFSsync是一个强大的数据同步工具，支持在多种存储系统之间进行并发同步或迁移数据，包括对象存储、JuiceFS、NFS、HDFS、本地文件系统等。
Juicedata·2024-09-10 05:51

性能、成本与 POSIX 兼容性比较： JuiceFS vs EFS vs FSx for Lustre

JuiceFS是一款为云环境设计的分布式高性能文件系统。AmazonEFS易于使用且可伸缩，适用于多种应用。AmazonFSxforLustre则是面向处理快速和大规模数据工作负载的高性能文件系统。
Juicedata·2024-09-10 05:21

二.Linux手动分区标准及建议：

分区格式：建议ext4，可按需求更改。2./boot/efi分区：一般200M左右作用：对于GPT分区表（UE
皆过客，揽星河·2024-09-10 05:50

存储课程学习笔记3_读写nvme磁盘（清除脏数据，struct nvme_user_io和ioctl进行读写，struct block_device内核提供接口读写）

上篇文章实现在内核模块下插入一个文件系统，实现对磁盘或者目录进行对应格式化（mount）绑定文件系统后，已经可以正常使用。接下来了解对nvme磁盘的控制。
yun6853992·2024-09-10 05:18

Swagger使用手册

总体目标是使客户端和文件系统作为服务器以同样的速度来更新。文件的方法，参数和模型紧密集成到服务器端的代码，允许API来始终保持同步。作用：1.接口的文档在线自动生成。2.功能测试。
纬一·2024-09-10 02:26

Hadoop HDFS中的NameNode、SecondaryNameNode和DataNode

HadoopHDFS中的NameNode、SecondaryNameNode和DataNode目录1.定义2.主要作用3.官方链接1.定义在HadoopHDFS（Hadoop分布式文件系统）中，有三个关键的组件
BigDataMLApplication·2024-09-10 00:38

600 条最强 Linux 命令总结

600条最强Linux命令总结1.基本命令2.关机3.文件和目录4.文件搜索5.挂载一个文件系统6.磁盘空间7.用户和群组8.文件的权限，使用“+”设置权限，使用“-”用于取消9.文件的特殊属性，使用“
素年槿夏·2024-09-09 19:34

Android开机流程-从Init进程启动到进入Android桌面

在Android系统启动过程中，ramdisk.img被内核直接解压到内存中并用作初始根文件系统。这一过程不是通过挂载块设备来实现的，而是通过解压cpio档案的内容到内存中的临时文件系统（tmpf
techfuture·2024-09-09 16:44

Docker学习笔记

文章目录Docker的基本概念容器的概念容器的特点容器与虚拟机的区别容器的三个核心概念Docker的底层隔离机制NameSpaceCgroupUnion文件系统Linux安装DockerCentOSUbuntuDocker
Hi，你好啊·2024-09-09 02:10

【python实用性】文件系统基本讲解及用法: “增删改查“

文章目录一.增：创建文件二.删：删除文件三.改：修改文件四.查：查看文件系统一.增：创建文件创建脚本文件（例如:.txt、.js、.json、.py等）使用withopen(file=‘’,mode=‘
黄小莫·2024-09-08 18:15

分布式文件系统FastDFS动态扩容

当用户量越来越大，则集群中某个group总会到达其极限，这时就得扩展集群的容量了。FastDFS的扩容分为对group纵向扩容和横向扩容纵向扩容指在同一个group组中增加服务器，实现数据冗余，数据备份。同一个group中最大容量取决于最小的storage的存储容量。因此如果还想继续使用此group，则需要对此group对应的所有服务器挂载同样容量的磁盘，指定store_path1……，但这样做的
欢醉·2024-09-08 18:38

HBase

ApacheHBase是一个基于Hadoop分布式文件系统（HDFS）构建的分布式、面向列的NoSQL数据库，主要用于处理大规模、稀疏的表结构数据。
傲雪凌霜，松柏长青·2024-09-08 17:07

Hive的优势与使用场景

以下是Hive的主要优势：1.与Hadoop生态系统的紧密集成Hive构建在Hadoop分布式文件系统(HDFS)之上，能够处理海量数据并进行分布式计算。
傲雪凌霜，松柏长青·2024-09-08 17:07

linux 磁盘分区 磁盘格式化 挂载磁盘

系统centos7.6磁盘分区先执行fdisk-l查看未分区的磁盘，比如有磁盘/dev/vdb磁盘未分区，执行下面命令分区：fdisk/dev/vdb磁盘格式化mkfs-text4/dev/vdb1挂载磁盘
whiletrue_aed4·2024-09-08 15:07

大数据面试题：说下为什么要使用Hive？Hive的优缺点？Hive的作用是什么？

Hive是Hadoop生态系统中比不可少的一个工具，它提供了一种SQL(结构化查询语言)方言，可以查询存储在Hadoop分布式文件系统（HDFS）中的数据或其他和Hadoop集成的文件系统，如MapR-FS
蓦然_·2024-09-08 15:50

Flask-Caching

Flask-Caching的主要特点多种缓存后端支持：Flask-Caching支持多种缓存后端，包括内存缓存（如SimpleCache）、文件系统缓存、Memcached缓存、Redis
Botiway·2024-09-08 13:07

python flink_《Flink官方文档》Python 编程指南测试版

操作执行的结果通过数据池以写入数据到(分布式)文件系统或标准输出(例如命令行终端)的形式返回。Flink程序可以运行在不同的环境中，既能够独立运行，也可以嵌入到其他程序中运行。
weixin_39846361·2024-09-08 08:04

Docker的前世今生

4.Docker相对于LXC所做的重大提升：容器管理工具、分层文件系统和镜像机制一、Docker开源项目背景Docker是基于Go语言实现的开源容器项目，诞生于2013年年初，最
weixin_30267697·2024-09-08 04:03

Linux 磁盘分区及挂载

目录查看分区情况查看磁盘查看哪块磁盘未加载和分区对未进行挂载的磁盘进行分区内核重新读取分区表再查看磁盘分区情况创建文件系统及格式化分区查看已经分区的磁盘文件系统格式化分区永久挂载至指定目录判断挂载是否正确查看文件系统
go_forever_happy·2024-09-08 02:53

linux 查看进程使用哪些文件

被打开的文件可以是1.普通的文件，2.目录3.网络文件系统的文件，4.字符设备文件5.
nit小星星·2024-09-07 14:21

df 磁盘整体使用量 /du 查看目录的大小

命令格式：df[option]-h以容易理解的格式(给人看的格式)输出文件系统分区使用情况，例如10kB、10MB、10GB等。-k以kB为单位输出文件系统分区使用情况。
数据萌新·2024-09-07 11:28

/var/lib/docker/overlay2 占用很大，清理Docker占用的磁盘空间

上图中看到的overlay分区是Docker的虚拟文件系统，其真实的文件系统是/dev/vda1。所以我们要找到是什么原因大量占据了/dev/vda1。一般有两种情况。
@小匠·2024-09-06 17:36

JuiceFS 社区版 v1.2 发布，新增企业级权限管理、平滑升级功能

JuiceFS是为云环境设计的分布式文件系统，支持超过10种元数据引擎和30种以上的数据存储引擎。
Juicedata·2024-09-06 01:24

linux基础之目录结构

目录1.简介2.linux的目录结构分类3.详细目录介绍4.总结1.简介Linux是一个基于Unix的开源操作系统，其文件系统具有层次化的目录结构，这种结构以根目录/作为起点，向下展开成一个倒置的树状结构
甜航一直在·2024-09-05 18:29

k8s - Volume 简介和HostPath的使用

Secret,configMap(之前的文章covered了)，hostPath,emptyDir等本文主要focusonhostPathHostPath的简介官方定义：hostPath卷能将主机节点文件系统上的文件或目录挂载
nvd11·2024-09-05 15:13

梧桐数据库（WuTongDB）：详解B树索引的原理和实现方法

B树索引的原理和实现方法**B树（BalancedTree）**是一种自平衡的树形数据结构，广泛应用于数据库和文件系统中，尤其用于实现索引。B树能够有效保持数据的有序性，支持高效的范围查询和等值查询。
鲁鲁517·2024-09-05 15:11

FFmpeg的入门实践系列七(滤镜)

望诸位能与在下多多交流，共同努力文章目录前期博客一、滤镜过滤器filter的简介FFmpeg编程的四大结构体1.滤镜AVFilter2.滤镜图AVFilterGraph3.滤镜实例AVFilterContext4
星海逐愿·2024-09-05 14:37

C# 中一个非常实用的类FileSystemWatcher，监视文件系统中文件或目录的更改

FileSystemWatcher类在C#中是一个非常实用的类，用于监视文件系统中文件或目录的更改，并可以触发事件来响应这些更改。这些更改包括文件或目录的创建、删除、更改以及重命名等。
AitTech·2024-09-05 10:06

71. 简化路径【 力扣(LeetCode) 】

在Unix风格的文件系统中，一个点（.）表示当前目录本身；此外，两个点（…）表示将目录切换到上一级（指向父目录）；两者都可以是复杂相对路径的组成部分。
理论最高的吻·2024-09-05 06:12

如何使用 TLS 保护 Docker 的 TCP 套接字

Docker的API默认情况下完全不受保护，除了其Unix套接字上的文件系统权限。您应该在通过TCP公开DockerAPI时设置TLS，以便Docker引擎和您的客户端可以验证彼此的身份。
mikes zhang·2024-09-05 04:30

第十一章、深入理解Linux文件系统与日志分析

第十一章、深入理解Linux文件系统与日志分析一、inode与block1、inode与block概述1.1文件数据包括元信息与实际数据1.2文件存储在硬盘上，硬盘最小存储单位是“扇区”，每个扇区存储512
知识不往脑子里进·2024-09-05 03:21

大数据学习｜理解和对比 Apache Hive 和 Apache Iceberg

文章目录数据模型与存储事务支持性能优化使用场景总结数据模型与存储Hive:Hive使用的是传统的关系型数据模型，数据存储在Hadoop分布式文件系统(HDFS)中，通常是以文本格式（如CSV或TSV）或者二进制格式
进击的小白菜·2024-09-04 16:50

剔除vg中的pv--xfs文件系统

xfs文件系统不支持缩小操作，如果要踢盘，那就必须把目录做备份，重做挂接点拷贝恢复了。
好记忆不如烂笔头abc·2024-09-04 16:50

linux docker镜像管理基础

docker镜像含有启动容器所需要的文件系统及其内容，因此，其用于创建并启动容器。
山客泛舟游Y·2024-09-03 11:11

Latex插入eps图片不显示报错not found解决方案

Latex插入eps图片不显示并报错：解决方案：首先确保.tex文件中添加包\usepackage{epstopdf}win+R输入cmd进入系统命令行进入.tex文件系统盘，代码：D:进入.tex所在文件夹
Cc小跟班·2024-09-03 08:53

ubuntu 常用指令笔记

目录：一.查看文件大小二.查看当前文件系统各分区的大小三.查看当前文件系统cpu，内存四.查看当前文件系统gpu五.清除回收站命令一.查看文件大小查看文件大小的命令：~$ls-lfilename会在终端输出
Kimx510·2024-09-03 03:41

数据库系统原理题-期末

一、单选题1、数据库系统和文件系统的主要区别是（B）。
渔jy·2024-09-02 21:14

java图片转pdf

前言图片文件转pdf如何将图片转pdf引入依赖com.lowagieitext4.2.1com.itextpdfitextpdf5.5.13.3转换工具importcom.itextpdf.text.Document
一路向北North·2024-09-02 20:36

哈工大-操作系统L31

目录与文件系统一.文件系统将整个磁盘按照一定的方式存放一定的信息最后形成这样一个文件系统,磁盘是一堆盘块，这一堆盘块要存放各种信息,这些信息经过操作系统读取维护之后形成这个样子的文件系统.用户给出使用接口的方式操作系统负责拿到这个方式
wwwwwgery·2024-09-02 17:22

2018-10-08

安装笔记（grub+mbr）分区#fdisk-l找到/dev，此时，可以清晰地看到分区列表，对应于自己要操作的硬盘，使用命令：#fdisk/dev/sdXn:新建分区w:写入硬盘信息格式化分区：#mkfs.ext4
may1051·2024-09-02 09:31

ubuntu / debian 根文件系统制作

一、前情提要在工作中，不可避免的需要制作各种客户需要的文件系统，常用的ubuntu、debian等主要需求有：带图形化界面不带图形化界面需提前打包一些应用依赖包进去需要提前内置一些文件或开机自启执行脚本等环境
mooncity0·2024-09-02 08:59

Nuxt3入门：路由系统（第4节）

Nuxt的一个核心功能是文件系统路由器，路由是根据文件自动注册的，Nuxt为在pages/目录下的每个Vue文件创建相应的路由（或URL）。
沐爸muba·2024-09-02 06:41

UNIX 文件操作，快速的把数据写入SD卡上

如果在程序中打开了文件但没有在使用完毕后关闭它，会导致一些潜在的问题，具体取决于操作系统和文件系统的行为，以及程序的执行情况。以下是可能的后果：资源泄漏：每个打开的文件都会占用系统资源，如文件描述符。
kunsir_·2024-09-02 05:08

文件操作（打开--操作--关闭）

文件操作文件内容的读取、写入（视为对文件输入输出操作，像流一样，称为文件流）；c语言采用“文件缓冲机制”，系统为文件创建“文件缓冲区”；文件的分类按存储方式划分：文本文件（ASCII文件）和二进制文件文件标识文件系统中
奋斗的小花生·2024-09-02 05:36

云计算实训09——rsync远程同步、自动化推取文件、对rsyncd服务进行加密操作、远程监控脚本

一、rsync远程同步1.rsync基本概述（1）sync同步（2）async异步（3）rsync远程同步2.rsync的特点可以镜像保存整个目录树和文件系统可以保留原有权限，owner,group,时间
是小赵鸭.·2024-09-02 04:30
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他