文件存储

Docker部署高性能分布式存储MinIO

文件存储系统，相比FastDFS使用MinIO易上手，可扩展，非常适合于存储大容量非结构化的数据，例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等，而一个对象文件可以是任意大小，从几kb到最大5T
抹香鲸之海·2024-01-20 21:27

如何在Docker下部署MinIO存储服务通过Buckets实现文件的远程上传

MinIO存储服务实现远程上传的文章，如果有什么需要改进的地方还请大佬指出⛺️作者简介：大家好，我是青衿☁️博客首页：CSDN主页放风讲故事每日一句：努力一点，优秀一点目录文章目录前言**目录**前言文件存储方式对比
放风讲故事·2024-01-20 21:55

MongoDB安装和使用（保姆级教程）

一.简介1MongoDB概述MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
Mangcun_tutu·2024-01-20 20:27

fdfs分布式文件存储----安装FastDFS（三十六）

一、FastDFS的介绍1、TrackerServer跟踪（调度）服务器，主要做调度工作，起到均衡的作用；负责管理所有的storageserver和group，每个storage在启动后会连接Tracker，告知自己所属group等信息，并保持周期性心跳。2、StorageServer存储服务器，主要提供容量和备份服务；以group为单位，每个group内可以有多台storageserver，数据
梦捷者·2024-01-20 14:31

FastDFS之快速入门、上手

文件存储的变迁：直连存储：直接连接与存储，扩展性、灵活性差。如Tomcat、nginx。中心化存储：网络互联。分布式存储：资源存储在多个服务器，这个存储资源构成一个虚拟的存储设备。
微风至夏·2024-01-20 12:03

Kafka的文件存储机制

在kafka中采用分区来存储数据，每个分区对应一个log文件，生产者每次生产的数据都追加到该文件之后，为了防止文件过大，在分区中又采用了分片索引机制，以提高数据定位的效率，每个个分片称为一个segment，没个segment中包含.index\.log\.timeindex文件，index文件中保存的是稀疏索引，大约没往log中写入4K左右的数据就会生成一条索引，offset采用相对offset以
有人打我·2024-01-20 08:25

3.1 Kafka 工作流程及文件存储机制

kafka学习目录：kafka目录文章目录3.1、Kafka工作流程及文件存储机制3.1.1、工作流程3.1.2、文件存储机制index文件和log文件详解：3.1、Kafka工作流程及文件存储机制3.1.1
悬浮海·2024-01-20 08:53

Kafka文件存储机制

文章目录概述Topic中文件存储方式Partiton中文件存储方式segment文件存储结构在partition中如何通过offset查找message文件存储流程集群partitions和replicas
Java技术债务·2024-01-20 08:22

四、Kafka 工作流程及文件存储机制

1.1、工作流程kafka整体工作流程图：通过这张图可以看出消费者消费生产者产生的消息，消费者有消费者组的概念，消息属于某一个主题topic，并且消息在产生的时候会进行消息的分区存放可以搭建集群，不同分区隶属于不同的节点。一个主题的某一个分区不会放在同一个节点，这是为了防止消息随着服务器的宕机丢失Kafka生产端发送消息的机制是Kafka高吞吐的基础，生产端的基本流程如下图所示：在kafka中，消
努力的布布·2024-01-20 08:51

kafka文件存储机制

不妨先来了解下kafka文件存储机制Topic是逻辑上的概念，而partition是物理上的概念，每个partition对应于一个log文件，该log文件中存储的就是Producer生产的数据；Producer
逆风飞翔的小叔·2024-01-20 08:19

Kafka（二）【文件存储机制 & 生产者】

目录一、Kafka文件存储机制二、Kafka生产者1、生产者消息发送流程1.1、发送原理2、异步发送API2.1、普通异步发送案例演示2.2、带回调函数的异步发送2.3、同步发送API3、生产者分区3.1
让线程再跑一会·2024-01-20 08:17

node.js 实现文件上传 和图片映射 文件下载(multer)

主要功能是将客户端上传的文件存储在服务器的本地文件系统中。它还添加了一个body对象以及file或files对象到express的请求对象中去。
小全upup·2024-01-20 07:59

MySQL之ibdata1删除后恢复，Error1146

data目录的数据库文件夹下ibd文件存储数据，frm文件存放表结构的定义，ibdata1是表空间数据，有关ibdata1的作用详见另一篇Blog，MySQL之表空间。
MyFreeIT·2024-01-20 00:34

Nginx架构设计

系统架构高并发Nginx七大核心应用场景：反向代理、虚拟主机、域名解析、负载均衡、防盗链、url重定向、https高性能web服务器，负载均衡大型服务器的流量网关，应用网关，日志服务器，文件存储服务器模块化扩展
浪里摸鱼·2024-01-19 22:37

深入理解LINUX文件系统与日志分析

block(块)2.inode(索引节点)2.1每一个inode表记录对应的保存了以下信息:2.2用stat命令可以查看某个文件的inode二.Linux系统文件三个主要的时间属性三.目录文件的结构四.文件存储小结
摆渡使者·2024-01-19 16:13

百度网盘超级会员购买优惠渠道 百度网盘SVIP怎么买最最划算

百度网盘超级会员购买优惠渠道，让你最划算地购买SVIP一、引言随着互联网的快速发展，百度网盘作为一款流行的云存储服务，被广泛应用于文件存储、分享和备份。
日常购物技巧呀·2024-01-19 11:05

MongoDB的简介

1MongoDB概述MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
小舟423·2024-01-19 09:29

我的博客网站

关于建站感谢开源的世界，这个博客的二级域名和文件存储都靠GitHub，这个博客的引擎靠的是Hexo，而这个博客的主题是开源的NexT，如果没有他们，我不可能搭建起这个博客。
hk_shao·2024-01-19 09:03

使用 Docker 部署 KodCloud 可道云网盘

KodCloud简介:::info**官网：**http://www.kodcloud.com:::KodCloud是可道云推出的企业级私有云存储解决方案，旨在为中小企业提供安全可控、可靠易用的一站式在线文件存储管理与协同办公平台
开源极客行·2024-01-19 08:28

Linux shell编程学习笔记40：stat命令

目录0前言1DOS、Windows、Linux中的文件存储1.1扇区1.2DOS、Windows：簇（Cluster）1.3Linux：块（block）和索引
紫郢剑侠·2024-01-19 07:52

[ceph] ceph之分布式存储

分布式存储的类型●块存储（例如硬盘，一般是一个存储被一个服务器挂载使用，适用于容器或虚拟机存储卷分配、日志存储、文件存储）就是一个裸设备，用于提供没有被组织过的存储空间，底层以分块的方式来存储数据●文件存储
为什么老是名字被占用·2024-01-19 04:15

游戏云服务器使用哪种存储方式比较好

游戏云服务器的存储方式主要有三种：块存储、对象存储和文件存储。每种存储方式都有其特点和适用场景。下面将对这三种存储方式进行详细的比较和分析，以帮助用户选择最适合自己游戏云服务器的存储方式。
恒创HengHost·2024-01-19 00:33

SharedPreferences存储数据

Android的存储方式使用SharedPreferences存储数据文件存储数据SQLite数据库存储数据使用ContentProvider存储数据网络存储数据SharedPreferences是一个采用
鴻9527·2024-01-18 11:37

【大数据】kafka

2.消息队列2.1使用消息队列的好处2.2消息队列的两种模式3.Kafka基础架构4.kafka使用4.1jar包下载(0.11.0.0版本)4.2部署5.Kafka架构深入5.1Kafka工作流程及文件存储机制
骑鱼过海的猫123·2024-01-18 09:34

【SpringBoot框架篇】24.集成FastDFS实现文件的分布式存储

pom.xml中添加fastDfs依赖包2.2.修改应用配置文件3.添加工具类4.测试接口编写5.测试5.1.上传图片5.2.下载图片5.3.删除图片6.项目配套代码1.简介如果应用是在集群部署,如果文件存储需要共享要通过
皓亮君·2024-01-18 03:10

Ceph分布式文件系统集群搭建详解

Ceph独一无二地在一个统一的系统中同时提供了对象、块、和文件存储功能。
蔚蓝色天空sky·2024-01-18 00:11

Pandas加载大数据集

pandas.pydata.org/docs/user_guide/scale.html#use-efficient-datatypes官方文档提供了4种方法：只加载需要的列、转化数据类型、使用chunking（转化文件存储格式
武小胖儿·2024-01-17 18:44

MongoDB面试系列-01

MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。再高负载的情况下，添加更多的节点，可以保证服务器性能。MongoDB旨在给Web应用提供可扩展的高性能数据存储解决方案。
梦睡了·2024-01-17 16:50

MongoDB 环境搭建及使用详解

、MongoDB概念数据库（DATABASE）文档（Document）集合元数据4、常用语法创建数据库删除数据库创建集合查看创建的集合删除集合文档CRUD5、数据备份还原MongoDB是一个基于分布式文件存储的数据库
程序员大佬超·2024-01-17 16:46

Linux网络文件共享服务

目录一.文件存储类型1.直连式存储：Direct-AttachedStorage，简称DAS2.存储区域网络：StorageAreaNetwork，简称SAN（可以使用空间，管理也是你来管理）3.网络附加存储
Linux糕手·2024-01-17 16:14

go env学习3

国内加速处理GOARCH="amd64"//运行架构GOBIN=""//GOCACHE="/root/.cache/go-build"GOENV="/root/.config/go/env"//修改版env文件存储
rosekissyou·2024-01-17 03:14

Ceph的介绍与部署

网络附加存储，是通过网络附加到当前主机文件系统之上的存储）SAN（存储区域网络）单机存储的问题存储处理能力不足存储空间能力不足单点故障问题商业存储解决方案分布式存储（软件定义的存储SDS）分布式存储的类型块存储文件存储对象存储
GnaW1nT·2024-01-16 19:58

解决由于虚拟机关机导致Mongodb异常关闭引起的数据库连接失败

--dbpath:数据库文档文件存储路径--logpa
涩芬·2024-01-16 08:50

探索FTP：原理、实践与安全优化

引言在正式开始讲解之前，首先来了解一下文件存储的类型有哪些。DAS、SAN和NAS是三种不同的存储架构，分别用于解决不同场景下的数据存储需求。
hy199707·2024-01-16 07:49

爬取豆瓣电影排行榜top250最新教程！经典爬虫案例

importrequests#引入请求模块importre#正则importcsv#csv文件存储模块importtime#时间模块#伪装请求头headers={"User-Agent":"Mozilla
不会爬虫的大仙·2024-01-15 10:54

一二三应用开发平台文件处理设计与实现系列之4——文件存储框架设计与实现

整体设计作为平台，需考虑支持多种文件存储方案，对于中小型系统，可以使用直接存储到磁盘这种简单实用的方式；对一中大型系统，能支持使用对象存储组件。
学海无涯，行者无疆·2024-01-15 09:22

【阿里云镜像】配置阿里云镜像—MongoDB 镜像

阿里巴巴开源镜像站(aliyun.com)centOs安装并使用mongodb【国内镜像版】SWEENEY_HE的博客-CSDN博客mongodb国内镜像二、MongoDB镜像简介MongoDB是一个基于分布式文件存储的数据库
宝耶需努力·2024-01-15 08:18

MongoDB学习笔记-20190423

MongoDB是一个基于分布式文件存储的数据库，是一个介于关系型数据库和非关系型数据库之间的产品，是非关系数据库当中功能最丰富、最像关系数据库的。
Loistein·2024-01-15 05:30

ESP8266闪存文件系统

esp8266总共有4MB的空间，其中程序存储1MB，用户可用文件存储Stringfile_n
vv是第一·2024-01-15 04:17

OSS实现文件上传

一、文件存储方式二、OSS阿里云对象存储服务（ObjectStorageService，简称OSS），是阿里云提供的海量、安全、低成本、高可靠的云存储服务。
星梦清河·2024-01-15 03:30

Python-CSV文件的存储

CSV文件存储  CSV其文件以纯文本形式存储表格数据。CSV文件是一个字符序列，可以由任意数目的记录组成，各种记录由某种换行符分隔开。
Jared Chen·2024-01-15 00:17

MongoDB安装与基本使用

一、简介1.1Mongodb是什么MongoDB是一个基于分布式文件存储的数据库，官方地址https://www.mongodb.com/1.2数据库是什么数据库（DataBase）是按照数据结构来组织
A-超·2024-01-14 23:23

直接访问二进制文件与将二进制文件存储于数据库再访问两种方案的优劣

目录1.直接访问存储较大的二进制文件2.将二进制文件存储于数据库再访问数据库存储二进制文件访问变慢的原因：3.若采用Redis数据库缓存二进制文件以提高文件访问速度。
_半夏曲·2024-01-14 08:33

恢复 iPhone 和 iPad 数据的 10 个好工具 - [苹果数据恢复]

许多人已经开始将重要文件存储在手机上，因为他们几乎可以在任何情况下随时随地轻松访问数据。不言而喻;您可以轻松访问您的电子邮件、共享图片、编辑和共享文档、支付账单等等，只需在您的手机上轻轻一按即可。
Geeker55·2024-01-14 06:16

点击链接浏览器下载文件

//首先根据请求，找到服务器端文件存储地址，并创建File文件Filefile=newFile(filePath);filename=newString(filePath.getBytes("iso8859
ldj2020·2024-01-13 23:12

Git LFS 大文件存储

Git碰到大文件的困境Git是业界流行的分布式版本控制工具，本地仓库与远端仓库同样保存了全量的文件和变更历史，这样让代码协作变得简单和高效。但也正因为如此，Git针对大型文件（例如图片、视频或其他二进制文件）的版本控制，也会存在一些问题，主要有两点：效率变慢：不管实际上用户是否使用到这些大文件的历史，都需要把每一个文件的每一个版本下载到本地仓库。毫无疑问，下载耗时的增加给用户带来了更多的等待时间。
RisunJan·2024-01-13 19:17

ES索引原理（3）（*）

Elasticsearch是一个建立在全文搜索引擎ApacheLucene™基础上的搜索引擎.当然Elasticsearch并不仅仅是Lucene那么简单，它不仅包括了全文搜索功能，还可以进行以下工作:（1）分布式实时文件存储
Firm陈·2024-01-13 02:27

Elasticsearch－基础介绍及索引原理分析

是一个分布式可扩展的实时搜索和分析引擎,一个建立在全文搜索引擎ApacheLucene™基础上的搜索引擎.当然Elasticsearch并不仅仅是Lucene那么简单，它不仅包括了全文搜索功能，还可以进行以下工作:分布式实时文件存储
m0_67403073·2024-01-13 02:56

文件系统与日志分析

一，文件系统（一）inode和block概述1，文件数据包括元信息与实际数据2，文件存储在硬盘上，硬盘最小存储单位是“扇区”，每个扇区存储512字节3，block(块)连续的八个扇区组成一个block是文件存取的最小单位
玉米侠爱吃玉米·2024-01-12 20:39

NVMe over TCP高性能文件存储，让未来照进现实，400us

你真的懂NVMe吗？在说NVMe之前，我们觉得有必要先聊一聊NVM（Non-VolatileMemory），即非易失性内存。从名字上看就知道，NVM是一种类内存式（访问及寻址方式类似）的设备，它必须具备高速读写数据的能力，但它和普通内存的区别在于Non-Volatile，即在关机后再打开电源也可以检索里边所存储的数据。这种非易失性内存NVM设备有很多种实现，我们常用于服务器的大容量NVM是一种闪存
大隐隐于野·2024-01-12 18:37
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他