E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式文件存储系统
SpringBoot 整合 Minio 上传文件
Minio上传文件如果不使用云服务的话,需要本地搭建,一般选择FastDFS但是FastDFS安装比较复杂,今天了解一款安装使用更简单的
存储系统
MinIOMinIO是一款高性能、分布式的对象
存储系统
.它是一款软件产品
Java码农
·
2024-02-04 12:53
深入探索Redis:Java开发者的关键指南
Redis(RemoteDictionaryServer),作为一款高性能的Key/Value键值对
存储系统
,是一个使用C语言编写的高性能内存数据库,一般会用来做缓存,消息队列,分布式锁,同时还支持事务
南 阳
·
2024-02-04 11:13
Redis
redis
java
数据库
缓存
springboot 文件下载
具体思路:a.确定项目中哪些资源可以被下载aa.txt用户须知.doc…b.将可以被下载资源放入服务器指定位置、文件上传服务器fastdfs(dfs
分布式文件
存储系统
1000个节点冗余备份)c.项目中开发一个下载页面
忘忧记
·
2024-02-04 11:41
spring
boot
后端
java
0202-2-存储器管理
第四章:存储器管理存储器的层次结构多层结构的
存储系统
存储器的多层结构CPU寄存器主存辅存可执行存储器寄存器和主存的总称访问速度快,进程可以在很少的时钟周期内用一条load或store指令完成存取。
武昌库里写JAVA
·
2024-02-04 02:09
面试题汇总与解析
存储器
论文阅读-一种用于大规模
分布式文件
系统中基于深度强化学习的自适应元数据管理方案
名称:AnAdaptiveMetadataManagementSchemeBasedonDeepReinforcementLearningforLarge-ScaleDistributedFileSystemsI.引言如今,大型集群文件系统的规模已达到PB甚至EB级别,由此产生的数据呈指数级增长。系统架构师不断设计和优化技术和方法,以向用户提供理想的服务。在这种情况下,元数据管理在提高系统性能中扮
向来痴_
·
2024-02-03 17:59
论文阅读
2 Windows平台安装MongoDB教程
一、MongoDB简介MongoDB是一个基于
分布式文件
存储的数据库,由C++语言编写,旨在为WEB应用提供可扩展的高性能数据存储解决方案。
滔滔逐浪
·
2024-02-03 14:56
Hadoop:学习HDFS,看完这篇就够了!
HDFS(HadoopDistributedFileSystem)是ApacheHadoop生态系统中的
分布式文件
系统,用于存储和处理大规模数据集。
爱写代码的July
·
2024-02-03 08:09
大数据与云计算
hadoop
学习
hdfs
大数据
云计算
计算机组成原理(三)
存储系统
3.1
存储系统
基本概念3.1.1存储器的层次结构层序结构.png主存储器。
AdRainty
·
2024-02-03 03:20
手写分布式
存储系统
v0.1版本
引言这是手写分布式
存储系统
v0.1版本,只有一个目标就是支持通过tcp接收数据并落地到磁盘文件(单机模式),那接下来就开始吧一、设计实现一个系统,设计是最过瘾的过程没有之一,类似你搭积木前在脑海设计构建一副大致的
林崇辉
·
2024-02-03 01:10
分布式
分布式存储
java
手写分布式
存储系统
v0.2版本
引言上回说到手写分布式
存储系统
v0.1版本,已经实现了通过监听TCP端口并将数据写到本地磁盘的功能,今天咱们就继续往上面添砖加瓦v0.2版本大致做以下功能实现滚动写文件代码优化一、滚动写文件实现由于咱们写文件是用的
林崇辉
·
2024-02-03 01:10
分布式存储
Java写文件
Java
存储
手动实现
软件系统架构黄金法则12:事务性数据存储架构法则
2.核心概念与联系2.1事务性数据存储事务性数据存储是一种用于处理数据读写操作的
存储系统
,它具有以下特点:支
禅与计算机程序设计艺术
·
2024-02-02 20:25
AI大模型应用开发实战案例详解
大数据
人工智能
语言模型
AI
LLM
Java
Python
架构设计
Agent
RPA
Redis为什么快?
Redis以其卓越的性能、简洁而强大的设计原则,成为众多开发者和企业首选的内存
存储系统
。
张万森的救赎
·
2024-02-02 19:44
redis
数据库
缓存
MongoDB基础认识
MongoDB是由C++语言编写的,是一个基于
分布式文件
存储的开源数据库系统。在高负载的情况下,添加更多的节点,可以保证服务器性能。MongoDB旨在为WEB应用提供可扩展的高性能数据存储解决方案。
蓝白汤姆
·
2024-02-02 19:39
mongodb
数据库
python中的可变与不可变、深拷贝和浅拷贝
如果存在于系统的话,硬盘应该在出厂的时候为系统设置一个
存储系统
字符集的地方。在安装系统的时候,把这个字符集放入约定的内存空间中。
不必介怀
·
2024-02-02 19:02
python
开发语言
关于可变类型和不可变类型的探究
如果存在于系统的话,硬盘应该在出厂的时候为系统设置一个
存储系统
字符集的地方。在安装系统的时候,把这个字符集放入约定的内存空间中。
不必介怀
·
2024-02-02 19:02
其他
分布式文件
系统(DFS)-- 详解
1.了解
分布式文件
系统1.1了解什么是
分布式文件
系统
分布式文件
系统(DistributedFileSystem,DFS)是一种计算机文件系统,它将网络上不同计算机的文件系统集成在一起,使得用户就像在自己的本地机器上一样访问和操作文件
LtMamba
·
2024-02-02 18:23
#
ds
分布式
fastdfs --详解
1.为什么会存在fastdfs参考链接–了解为什么有分布式参考链接–
分布式文件
系统详解FastDFS是一个开源的轻量级
分布式文件
系统,主要解决了海量数据存储问题,特别适合以中小文件(建议范围:4KB[storageserverlist
LtMamba
·
2024-02-02 18:18
#
C
#
linux
dfs
ETCD数据库入门小案例
一、ETCD介绍etcd一个高可用、强一致性的服务发现存储仓库,它是一个高可用,高度一致的分布式键值存储的Key/Value
存储系统
,内部采用raft协议作为一致性算法。
福海鑫森
·
2024-02-02 18:06
肖邦
etcd
TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读
ATC2023Paper分布式元数据论文汇总问题Ceph是一个广泛部署的分布式
存储系统
,Ceph中的集群级去重设计,由于一些缺点难以在生产环境中使用:(1)去重唯一数据会导致过多的元数据消耗;(2)串行层次化机制对前台
妙BOOK言
·
2024-02-02 18:26
论文阅读
论文阅读
ceph
重复数据删除
Hadoop原理
Hadoop框架
分布式文件
存储-HDFS即Hadoop内提供分布式数据存储的文件系统分布式计算框架-MapReduce即Hadoop内提供的进行分布式计算的组件分布式资源调度-YARN即Hadoop内提供的进行分布式资源调度的组件
我走之後
·
2024-02-02 14:25
hadoop
大数据
分布式
【王道】计算机组成原理 知识点总结3——
存储系统
3
存储系统
3.1存储器概述3.1.1存储器的分类按在计算机中的作用(层次)分类1)主存储器。
住在天上的云
·
2024-02-02 11:35
王道计算机组成原理知识点总结
考研
计算机外设
系统架构
【Redis】理论基础 - 数据结构
Redis不仅是一个简单的键值
存储系统
,更是一个支持多样数据结构的内存数据库。这些灵活的数据结构赋予了Redis在不同应用场景中的广泛适用性,让我们一起去了解Redis支持的各种数据
好久不见的流星
·
2024-02-02 08:55
Reids
redis
数据结构
缓存
事件驱动架构:使用Flask实现MinIO事件通知Webhooks
事件通知是一个全面、高效的对象
存储系统
中的关键组件。Webhooks是我个人最喜欢的工具,用于与MinIO集成。它们在事件的世界中就像一把瑞士军刀,为各种挑战提供了一种通用的解决方案。
MinIO官方账号
·
2024-02-02 08:35
MinIO
docker
k8s
硬件架构
flask
python
HBase详细安装指南
HBase–HadoopDatabase,是一个高可靠性、高性能、面向列、可伸缩的分布式
存储系统
,利用HBase技术可在
嘎嘎嘎啊哈
·
2024-02-02 06:59
hadoop
hbase
big
data
Redis与MongoDB:技术优势与市场选择解析
技术特性与用户需求的深入剖析Redis的技术特性Redis(RemoteDictionaryServer),作为一个开源的键值
存储系统
,其优势主要体现在以下几个方面:高性能:Redis的数据完全存储在内存中
小郑说编程i
·
2024-02-02 06:25
Redis
Mongo
redis
mongodb
数据库
Docker多节点部署Minio
分布式文件
系统并测试
文章目录一、前提准备二、文件配置1.`.env`2.`env/minio.env`3.`docker-compose-minio.yml`三、测试四、Java测试1.引入依赖2.增删改一、前提准备准备如下文件夹和文件./├──docker-compose-minio.yml├──.env├──env│├──minio.env├──minio│├──minio1││├──data1││└──data
木子dn
·
2024-02-02 01:07
Server架构
#
分布式文件系统
docker
容器
hdfs
NFS 网络文件系统
NFS协议是在
分布式文件
系统的基础上发展而来的,最早由SunMicrosystems开发,现已成为一个通用的文件共享协议,在UNIX和类UNIX系统中广泛使用。特点:
樂夢
·
2024-02-01 23:08
网络
linux
运维
服务器
基于MongoDB实现聊天记录的存储
一、mongodb简介1.1mongodb简介MongoDB是一个基于
分布式文件
存储的数据库,使用C++语言编写。它旨在为WEB应用提供可扩展的高性能数据存储解决方案。
最后一支迷迭香
·
2024-02-01 21:20
mongodb
mongodb
数据库
聊天记录
java
springboot
1 初识Ceph
Ceph是加州大学SantaCruz分校的SageWeil专为博士论文设计的
分布式文件
系统,支持对象存储、块存储和文件存储。从2004年新建第一个文件夹至今,经历了多次迭代,目前已是分布式存储的首选。
DaemonXiao
·
2024-02-01 21:21
选择
存储系统
,万万不可片面
灵活性、扩展性、可靠性、安全性……
存储系统
的各项指标看得人眼花缭乱。挑选一台合适的
存储系统
,具体应该侧重哪些方面?你的
存储系统
选对了吗?
戴尔科技
·
2024-02-01 17:43
javascript
开发语言
ecmascript
戴尔
戴尔科技
深入理解Django与Redis的集成实践
而Redis,作为一个高性能的键值
存储系统
,常被用于缓存、会话管理等多种场景。我将详细介绍如何在Django项目中集成Redis,实现数据缓存和会话管理的功能。
qa浪涛
·
2024-02-01 13:10
django
redis
sqlite
经典论文研读:《Bigtable: A Distributed Storage System for Structured Data》
一概述BigTable是以大神JeffreyDean为首的Google团队在2006年公开的分布式
存储系统
,是Google“三驾马车”论文中(GFS、MapReduce、BigTable)中最后公开的。
WanderingScorpion
·
2024-02-01 12:02
论文研读
检索技术
论文研读
数据存储
原力计划
Bigtable: A Distributed Storage System for Structured Data_中文翻译
,个人在学习的过程中参考其它译文进行翻译:参考译文:https://blog.csdn.net/u010359965/article/details/49795133)摘要Bigtable是一个分布式
存储系统
冷冽的火花
·
2024-02-01 12:31
数据库
数据库
hdfs
sql
大数据之Redis:Redis简介
目录1.Redis简介2.Redis优势3.Redis应用场景1.Redis简介Redis(REmoteDIctionaryServer)是一个完全开源免费的,高性能的key-value数据库
存储系统
,
浊酒南街
·
2024-02-01 11:11
大数据系列一
大数据系列——Redis理论
概述RemoteDictionaryServer(Redis)是一个由SalvatoreSanfilippo写的key-value
存储系统
,是跨平台的非关系型数据库,也属于一种nosql数据库,通常被称为数据结构服务器
mql007007
·
2024-02-01 11:36
数字化转型
redis
big
data
缓存
【Redis】理论基础 - 概览
数据结构多样性3)持久化4)主从复制5)事务支持3.使用场景1)缓存2)消息队列3)实时统计与计数4)分布式锁总结Redis(RemoteDictionaryServer)是一款开源、内存型的数据结构
存储系统
好久不见的流星
·
2024-02-01 10:38
Reids
redis
数据库
缓存
Redis持久化策略指南,如何根据业务需求选择合适的方案
网站,包含GPT3.5/4.0、文心一言、通义千问、智谱AI等多个AI模型,支持PC、APP、VScode插件同步使用,点击链接跳转->海鲸AI-自动生成代码前言Redis是一个被广泛使用的内存数据结构
存储系统
海鲸AI
·
2024-02-01 06:58
redis
数据库
缓存
Hadoop 大数据技术原理与应用
Hadoop大数据技术原理与应用大数据概述定义特征大量,多样,高速,价值研究意义应用场景医疗,金融,零售Hadoop概述历史优势扩容能力强,成本低,高效率,可靠性,高容错Hadoop生态分布式
存储系统
(
kk8_
·
2024-02-01 04:33
hadoop
大数据
hdfs
大数据高频面试题一:hive和Oracle的区别
Hive和Oracle数据库最大的区别在于存储和计算方面:Hive存储在hdfs上(Hadoop
分布式文件
系统容错性高),Oracle将数保存在本地文件系统中。
半亩书田
·
2024-02-01 02:47
面试题
hive
hadoop
大数据
redis面试题1
Redis全称为:RemoteDictionaryServer(远程数据服务),Redis是一种支持key-value等多种数据结构的
存储系统
。可用于缓存,事件发布或订阅,高速队列等场景。
土豆烩芋头
·
2024-02-01 00:58
redis
数据库
缓存
Zookeeper
Zookeeper--简介概述:它是一款非常好用的大数据分布式协调服务组件,主要是用来帮助我们管理大数据进群的,例如:主备切换,选举机制,全局数据一致性...吉祥物是:1个拿着铁锹的小人.本质:ZK本身也是1个小型的
分布式文件
存储系统
t_813
·
2024-01-31 22:28
zookeeper
分布式
SpringBoot中集成Minio高性能分布式存储文件服务入门
区别于分布式
存储系统
,minio的特色在于简单、轻量级,对开发者
霸道流氓气质
·
2024-01-31 16:17
SpringBoot
spring
boot
分布式
后端
spdk技术原理简介和实践经验
由于NVMe-ssd的性能比传统磁盘介质高出很多,使得在整个IO处理过程中,软件部分占用的时间比例大大提升,成为制约
存储系统
性能的主要因素。
大隐隐于野
·
2024-01-31 16:14
#
介质专栏
spdk
什么是分布式系统!以及分布式系统架构的优缺点
包括分布式操作系统、分布式程序设计语言及其编译系统、
分布式文件
系统分
架构师Javaspring
·
2024-01-31 15:57
一文读懂Memcached和Redis的区别
文章目录1.数据结构:2.持久化:3.数据操作:4.分布式支持:5.线程模型:6.使用场景:7.未来趋势:1.数据结构:Memcached:Memcached是一个简单的键值
存储系统
,它将数据存储在内存中
David爱编程
·
2024-01-31 14:57
memcached
redis
memcached
redis
数据库
Oracle Extractor 软件下载
oracleDBA在保证数据完整性的课题上正面临着现有磁盘
存储系统
容量不足以存放全量备份,基于磁带的数据备份在恢复数据时往往要求远远超过预期的平均修复时间等实际问题。
西数科技CDRSA
·
2024-01-31 12:07
oracle
数据库
Redis:save和bgsave的区别与使用解析
Redis持久化简介Redis是一款高性能的Key-Value
存储系统
,但在实际应用中,为了防止数据丢失,我们通常会采用持久化机制。
IChen.
·
2024-01-31 11:51
redis
bootstrap
java
Hadoop生态系统中一些关键组件的详细解析
1.Hadoop核心组件HDFS(HadoopDistributedFileSystem):
分布式文件
存储系统
。提供高吞吐量的数据访问,非常适合用于大规模数据集。
薛定谔的zhu
·
2024-01-31 07:27
hadoop
大数据
Springboot快速教程---Docker搭建与整合Hbase
HBase作为GoogleBigtable的开源实现,GoogleBigtable利用GFS作为其文件
存储系统
类似,则HBase利用HadoopHDFS作为其
爆米花机枪手
·
2024-01-31 07:53
JAVA
Maven
Docker
springboot
hbase
docker
分布式虚拟文件系统,如何实现多种
存储系统
的融合
业务的多样化和
存储系统
的多样化导致计算与存储之间的关系异常复杂,如下是一个计算存储关系的示意图。企业为了维护这种复杂的
数据存储张
·
2024-01-31 07:20
分布式
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他