gfs分布式文件存储系统

Hadoop Start(1) ——Google与Hadoop的前世今生

参考文档:《Hadoop权威指南(第4版)》网址:http://hadoop.apache.org/[1]HDFS：HadoopDistributionFileSystemHadoop分布式文件系统[2
bclz·2024-02-05 18:41

手写分布式存储系统v0.3版本

引言承接手写分布式存储系统v0.2版本，今天开始新的迭代开发。
林崇辉·2024-02-05 16:44

论文阅读-CARD：一种针对复制元数据服务器集群的拥塞感知请求调度方案

：CARD:ACongestion-AwareRequestDispatchingSchemeforReplicatedMetadataServerCluster摘要复制元数据服务器集群（RMSC）在分布式文件系统中非常高效
向来痴_·2024-02-05 14:54

Redis备忘录

0.redis简介简单介绍redis，redis是一种支持Key-Value等多种数据结构的存储系统。可用于缓存，事件发布或订阅，高速队列等场景。
董广明·2024-02-05 14:26

docker 安装minio

MinIO是一款高性能、分布式的对象存储系统.它是一款软件产品,可以100%的运行在标准硬件。即X86等低成本机器也能够很好的运行MinIO。
会飞的大鱼吃小鱼·2024-02-05 08:29

impala与kudu进行集成

概要Impala是一个开源的高效率的SQL查询引擎，用于查询存储在Hadoop分布式文件系统（HDFS）中的大规模数据集。它提供了一个类似于传统关系型数据库的SQL接口，允许用户使用SQL语言
shandongwill·2024-02-05 07:44

(二十四)ATP应用测试平台——springboot集成fastdfs上传与下载功能

fastdfs是一个轻量级的分布式文件系统，也是我们文件存储中常常使用的组件之一，主要包括文件存储、文件同步、文件访问，实现了文件存储和负载均衡的问题。
厉害哥哥吖·2024-02-05 07:07

1.0 Hadoop 教程

其核心部件包括分布式文件系统(HadoopDFS，HDFS)和Ma
二当家的素材网·2024-02-05 06:38

Day34课堂笔记

3、共享存储得种类单点存储系统就是NFS，中小型企业，阿里云服务的NAS服
Aza_Lxxx·2024-02-05 03:00

Redis入门笔记

数据存储方式：Redis：Redis是一种基于内存的键值存储系统，数据存储在内存中，读写速度非常快。它支持多种数据结构，如字符串、哈希表、列表、集合、有序集合
我真卷不动啦。。。·2024-02-05 01:32

MongoDB安装手册

1.MongoDB介绍MongoDB是一个基于分布式文件存储的数据库，用C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
小屁孩cmq·2024-02-04 23:24

Redis核心技术与实战【学习笔记】 - 21.Redis实现分布式锁

Redis本身可以被多个客户端共享访问，正好就是一个共享存储系统，可以用来保存分布式锁。而且Redis的读写
陈建111·2024-02-04 16:11

linux nas解决方案_NAS以及虚拟化技术浅谈

Linux与存储系统直接关联缺省Linux根文件系统Ext3正在逐渐成为过去，而Ext4还存在一些局限。
weixin_39824898·2024-02-04 13:27

SpringBoot 整合 Minio 上传文件

Minio上传文件如果不使用云服务的话,需要本地搭建,一般选择FastDFS但是FastDFS安装比较复杂,今天了解一款安装使用更简单的存储系统MinIOMinIO是一款高性能、分布式的对象存储系统.它是一款软件产品
Java码农·2024-02-04 12:53

深入探索Redis：Java开发者的关键指南

Redis(RemoteDictionaryServer)，作为一款高性能的Key/Value键值对存储系统，是一个使用C语言编写的高性能内存数据库，一般会用来做缓存，消息队列，分布式锁，同时还支持事务
南 阳·2024-02-04 11:13

springboot 文件下载

具体思路：a.确定项目中哪些资源可以被下载aa.txt用户须知.doc…b.将可以被下载资源放入服务器指定位置、文件上传服务器fastdfs(dfs分布式文件存储系统1000个节点冗余备份)c.项目中开发一个下载页面
忘忧记·2024-02-04 11:41

0202-2-存储器管理

第四章:存储器管理存储器的层次结构多层结构的存储系统存储器的多层结构CPU寄存器主存辅存可执行存储器寄存器和主存的总称访问速度快，进程可以在很少的时钟周期内用一条load或store指令完成存取。
武昌库里写JAVA·2024-02-04 02:09

ionic4 customer icon useless（自定义icon无法正常使用）

1.usage：(用法:)iconurl：(图标下载地址)data:image/svg+xml;base64,PD94bWwgdmVyc2lvbj0iMS4wIiBzdGFuZGFsb25lPSJubyI
anyangdp·2024-02-04 00:53

论文阅读-一种用于大规模分布式文件系统中基于深度强化学习的自适应元数据管理方案

名称：AnAdaptiveMetadataManagementSchemeBasedonDeepReinforcementLearningforLarge-ScaleDistributedFileSystemsI.引言如今，大型集群文件系统的规模已达到PB甚至EB级别，由此产生的数据呈指数级增长。系统架构师不断设计和优化技术和方法，以向用户提供理想的服务。在这种情况下，元数据管理在提高系统性能中扮
向来痴_·2024-02-03 17:59

2 Windows平台安装MongoDB教程

一、MongoDB简介MongoDB是一个基于分布式文件存储的数据库，由C++语言编写，旨在为WEB应用提供可扩展的高性能数据存储解决方案。
滔滔逐浪·2024-02-03 14:56

Hadoop：学习HDFS，看完这篇就够了！

HDFS（HadoopDistributedFileSystem）是ApacheHadoop生态系统中的分布式文件系统，用于存储和处理大规模数据集。
爱写代码的July·2024-02-03 08:09

计算机组成原理(三)存储系统

3.1存储系统基本概念3.1.1存储器的层次结构层序结构.png主存储器。
AdRainty·2024-02-03 03:20

手写分布式存储系统v0.1版本

引言这是手写分布式存储系统v0.1版本，只有一个目标就是支持通过tcp接收数据并落地到磁盘文件(单机模式)，那接下来就开始吧一、设计实现一个系统，设计是最过瘾的过程没有之一，类似你搭积木前在脑海设计构建一副大致的
林崇辉·2024-02-03 01:10

手写分布式存储系统v0.2版本

引言上回说到手写分布式存储系统v0.1版本，已经实现了通过监听TCP端口并将数据写到本地磁盘的功能，今天咱们就继续往上面添砖加瓦v0.2版本大致做以下功能实现滚动写文件代码优化一、滚动写文件实现由于咱们写文件是用的
林崇辉·2024-02-03 01:10

Hadopp未授权访问导致RCE

它基于Google的MapReduce算法和GoogleFileSystem（GFS）的论文，旨在提供一个可靠、可扩展、分布式存储和处理大规模数据的解决方案。
安鸾彭于晏·2024-02-02 22:27

软件系统架构黄金法则12：事务性数据存储架构法则

2.核心概念与联系2.1事务性数据存储事务性数据存储是一种用于处理数据读写操作的存储系统，它具有以下特点：支
禅与计算机程序设计艺术·2024-02-02 20:25

Redis为什么快？

Redis以其卓越的性能、简洁而强大的设计原则，成为众多开发者和企业首选的内存存储系统。
张万森的救赎·2024-02-02 19:44

MongoDB基础认识

MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，可以保证服务器性能。MongoDB旨在为WEB应用提供可扩展的高性能数据存储解决方案。
蓝白汤姆·2024-02-02 19:39

python中的可变与不可变、深拷贝和浅拷贝

如果存在于系统的话，硬盘应该在出厂的时候为系统设置一个存储系统字符集的地方。在安装系统的时候，把这个字符集放入约定的内存空间中。
不必介怀·2024-02-02 19:02

关于可变类型和不可变类型的探究

如果存在于系统的话，硬盘应该在出厂的时候为系统设置一个存储系统字符集的地方。在安装系统的时候，把这个字符集放入约定的内存空间中。
不必介怀·2024-02-02 19:02

分布式文件系统（DFS）-- 详解

1.了解分布式文件系统1.1了解什么是分布式文件系统分布式文件系统（DistributedFileSystem，DFS）是一种计算机文件系统，它将网络上不同计算机的文件系统集成在一起，使得用户就像在自己的本地机器上一样访问和操作文件
LtMamba·2024-02-02 18:23

fastdfs --详解

1.为什么会存在fastdfs参考链接–了解为什么有分布式参考链接–分布式文件系统详解FastDFS是一个开源的轻量级分布式文件系统，主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB[storageserverlist
LtMamba·2024-02-02 18:18

ETCD数据库入门小案例

一、ETCD介绍etcd一个高可用、强一致性的服务发现存储仓库，它是一个高可用，高度一致的分布式键值存储的Key/Value存储系统，内部采用raft协议作为一致性算法。
福海鑫森·2024-02-02 18:06

TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读

ATC2023Paper分布式元数据论文汇总问题Ceph是一个广泛部署的分布式存储系统，Ceph中的集群级去重设计，由于一些缺点难以在生产环境中使用：（1）去重唯一数据会导致过多的元数据消耗；（2）串行层次化机制对前台
妙BOOK言·2024-02-02 18:26

Hadoop原理

Hadoop框架分布式文件存储-HDFS即Hadoop内提供分布式数据存储的文件系统分布式计算框架-MapReduce即Hadoop内提供的进行分布式计算的组件分布式资源调度-YARN即Hadoop内提供的进行分布式资源调度的组件
我走之後·2024-02-02 14:25

【王道】计算机组成原理 知识点总结3——存储系统

3存储系统3.1存储器概述3.1.1存储器的分类按在计算机中的作用（层次）分类1）主存储器。
住在天上的云·2024-02-02 11:35

【Redis】理论基础 - 数据结构

Redis不仅是一个简单的键值存储系统，更是一个支持多样数据结构的内存数据库。这些灵活的数据结构赋予了Redis在不同应用场景中的广泛适用性，让我们一起去了解Redis支持的各种数据
好久不见的流星·2024-02-02 08:55

事件驱动架构：使用Flask实现MinIO事件通知Webhooks

事件通知是一个全面、高效的对象存储系统中的关键组件。Webhooks是我个人最喜欢的工具，用于与MinIO集成。它们在事件的世界中就像一把瑞士军刀，为各种挑战提供了一种通用的解决方案。
MinIO官方账号·2024-02-02 08:35

HBase详细安装指南

HBase–HadoopDatabase，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在
嘎嘎嘎啊哈·2024-02-02 06:59

Redis与MongoDB：技术优势与市场选择解析

技术特性与用户需求的深入剖析Redis的技术特性Redis（RemoteDictionaryServer），作为一个开源的键值存储系统，其优势主要体现在以下几个方面：高性能：Redis的数据完全存储在内存中
小郑说编程i·2024-02-02 06:25

Docker多节点部署Minio分布式文件系统并测试

文章目录一、前提准备二、文件配置1.`.env`2.`env/minio.env`3.`docker-compose-minio.yml`三、测试四、Java测试1.引入依赖2.增删改一、前提准备准备如下文件夹和文件./├──docker-compose-minio.yml├──.env├──env│├──minio.env├──minio│├──minio1││├──data1││└──data
木子dn·2024-02-02 01:07

NFS 网络文件系统

NFS协议是在分布式文件系统的基础上发展而来的，最早由SunMicrosystems开发，现已成为一个通用的文件共享协议，在UNIX和类UNIX系统中广泛使用。特点：
樂夢·2024-02-01 23:08

基于MongoDB实现聊天记录的存储

一、mongodb简介1.1mongodb简介MongoDB是一个基于分布式文件存储的数据库，使用C++语言编写。它旨在为WEB应用提供可扩展的高性能数据存储解决方案。
最后一支迷迭香·2024-02-01 21:20

1 初识Ceph

Ceph是加州大学SantaCruz分校的SageWeil专为博士论文设计的分布式文件系统，支持对象存储、块存储和文件存储。从2004年新建第一个文件夹至今，经历了多次迭代，目前已是分布式存储的首选。
DaemonXiao·2024-02-01 21:21

选择存储系统，万万不可片面

灵活性、扩展性、可靠性、安全性……存储系统的各项指标看得人眼花缭乱。挑选一台合适的存储系统，具体应该侧重哪些方面？你的存储系统选对了吗？
戴尔科技·2024-02-01 17:43

configfs配置usb gadget原理

configfs初始化usbgadgetconfigfs模块的初始化函数为gadget_cfs_init。
qxqxa·2024-02-01 16:57

VMware 安装 Manjaro 共享文件夹不能访问

VMware设置好共享目录共为目录添加好2.Manjaro默认是安装了open-vm-tools的，安装命令：sudopacman-Sopen-vm-tools3.创建共享文件夹：sudomkdir/mnt/hgfs4
诺可西·2024-02-01 14:20

深入理解Django与Redis的集成实践

而Redis，作为一个高性能的键值存储系统，常被用于缓存、会话管理等多种场景。我将详细介绍如何在Django项目中集成Redis，实现数据缓存和会话管理的功能。
qa浪涛·2024-02-01 13:10

【论文笔记】OSDI04 MapReduce: Simplified Data Processing on Large Clusters

MPrunonGFS.整个模型的输入是key/value对集合，输出也是若干的key/value对集合，以文件的形式保存。用户需要自定义两个函数，map和redu
qq_38420683·2024-02-01 12:03

经典论文研读：《Bigtable: A Distributed Storage System for Structured Data》

一概述BigTable是以大神JeffreyDean为首的Google团队在2006年公开的分布式存储系统，是Google“三驾马车”论文中（GFS、MapReduce、BigTable）中最后公开的。
WanderingScorpion·2024-02-01 12:02
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他