分布式文件存储系统

一文参透分布式存储系统Ceph的架构设计、集群搭建（手把手）

1.Ceph概述1.1背景Ceph是一个去中心化的分布式存储系统，提供较好的性能、可靠性和可扩展性。
博学谷狂野架构师·2023-10-31 22:19

【面经】谈谈你对FastDFS的了解

FastDFS是什么FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问(文件上传、文件下载)等，解决了大容量存储和负载均衡的问题。
ThinkPet·2023-10-31 21:54

计组之存储系统

存储器概述分类1.按在计算机中的作用（层次）分类主存储器。CPU可以直接随机地对其进行访问，也可以和高速缓冲存储器（Cache)及辅助存储器交换数据。辅助存储器。辅存的内容需要调入主存后才能被CPU访问。高速缓冲存储器。位于主存和CPU之间，现代计算机通常将它们制作在CPU中。别名用途特点主存储器主存，内存储器（内存）用来存放计算机运行期间所需的程序和数据容量较小、存取速度较快、每位的价格较高。辅
码银·2023-10-31 20:24

33. Go语言数据库操作之MongoDB

前言mongoDB是目前比较流行的一个基于分布式文件存储的数据库，它是一个介于关系数据库和非关系数据库(NoSQL)之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。
Just_do_do_IT·2023-10-31 19:08

服务环境搭建-Etcd+Confd服务注册与发现

服务环境搭建-Etcd+Confd服务注册与发现1.说明1.1简介Etcd是一个分布式、高可用的Key/Value存储系统，主要用于分享配置与服务发现。Confd是一个轻量级的配置管理工具。
banmajio·2023-10-31 19:31

Redis

redis是一个key-value存储系统
墨竹闲人·2023-10-31 17:21

redis缓存击穿，redisson分布式锁，redis逻辑过期

什么是缓存击穿：缓存击穿是指在高并发环境下，某个热点数据的缓存过期，导致大量请求同时访问后端存储系统，引起系统性能下降和后端存储压力过大的现象。
YonChao·2023-10-31 17:01

分布式文件系统之FastDFS

1.什么是FastDFS1.1.介绍FastDFS是用c语言编写的一款开源的分布式文件系统。
Demon先生·2023-10-31 14:58

献给Nacos小白的一篇好文：集群环境搭建

既然是集群，那么就涉及到数据存储一致性问题，虽然nacos提供了内嵌derby数据库及本地文件等形式，但是不能在跨服务器节点实例间进行数据同步或保持一致，所以，需要一个独立的存储系统，目前nacos1.4.3
云水之路·2023-10-31 14:43

对MongoDB的浅谈

对数据库读写频率较高的数据对海量数据的存储对数据库的高扩展性和高可用性NoSQL的缺点:数据库事务一致性需求数据库我的读写实时性需求对于业务需求,有时需要多表查询MongoDB简介MongoDB是由c++编写,一个基于分布式文件存储的数据库
今天学不学？·2023-10-31 13:14

KKFileView(十二）——文件缓存处理

CacheServiceRedisImpl类、CacheServiceRocksDBImpl类，他们的关系如下图所示，显然后三个实现了CacheService的接口一、redis缓存1.介绍Redis是一个key-value存储系统
懒羊羊（学习中）·2023-10-31 13:50

阿里在盘古云存储系统中部署RDMA的经验谈

1阿里如何进行RDMA部署1.1RDMA部署规划中的考虑因素存储集群的部署规划控制着网络拓扑结构、RDMA通信范围、存储节点配置等，必须考虑多种因素，包括存储容量与需求的匹配、硬件成本的控制、性能的优化、可用性和SLA风险的最小化。最终的结果是所有这些因素之间的权衡。例如，微软部署RDMA的规模是适用于整个CLOS网络。因此，如果不加以阻止，PFC风暴可能会蔓延到整个网络，并导致整个集群的崩溃。在
大隐隐于野·2023-10-31 11:34

缓存雪崩和缓存穿透问题

解决方案1.最常见的则是采用布隆过滤器，将所有可能存在的数据哈希到一个足够大的bitmap中，一个一定不存在的数据会被这个bitmap拦截掉，从而避免了对底层存储系统的查询压力。
了凡_8504·2023-10-31 11:15

软考系统架构师知识点集锦七：计算机系统基础知识

一、考情分析二、考点精讲2.1计算机系统概述2.1.1计算机系统组成2.1.2存储系统时间局部性:指程序中的某条指令一旦执行，不久以后该指令可能再次执行,典型原因是由于程序中存在着大量的循环操作。
枫叶丶PJ·2023-10-31 07:20

分布式存储系统Ceph应用组件介绍

1、无中心架构分布式存储CephCeph是一套开源的分布式存储系统。具有可靠性高，性能优良，可伸缩，与HDFS不同的地方在于，该架构中没有中心节点。
exitgogo·2023-10-31 06:30

MogileFS 分布式文件存储系统-图片

一.MogileFS简单介绍MogileFS是一个开源的分布式文件存储系统，用于组建分布式文件集群。由LiveJournal旗下的DangaInteractive公司开发。
宇晨棒棒的·2023-10-31 03:05

Node.js开发概述

语法开发后端应用一些公司要求前端工程师掌握Node开发生态系统活跃，有大量开源库可以使用1.4Node是什么node是一个基于ChromeV8引擎的javaScript代码运行环境2.3PATH环境变量存储系统中的目录
直条纹先生·2023-10-31 02:06

从原理到实践，深入理解CPU缓存一致性

因此，增加缓存可以让整个存储系统的性能接近寄存器，并且每字节的成本都接近内存，甚至是磁盘。所以
linux大本营·2023-10-31 02:59

SpringBoot整合——阿里云对象存储（OSS）

用户认证需要上传证件图片、首页轮播也需要上传图片，因此我们要做文件服务，阿里云oss是一个很好的分布式文件服务系统，所以我们只需要集成阿里云oss即可。
NPE~·2023-10-30 21:07

Flume日志采集框架

uFlume可以采集文件，socket数据包等各种形式源数据，又可以将采集到的数据输出到HDFS、hbase、hive、kafka等众多外部存储系统中u一般的采集需求，通过对flume的简单配置即可实现
freefish_yzx·2023-10-30 19:30

Flume 快速入门【概述、安装、拦截器】

它的主要目的是帮助用户将大规模数据从各种数据源（如日志文件、网络数据源、消息队列等）采集、传输和加载到数据存储系统（如HadoopHDFS、ApacheH
月亮给我抄代码·2023-10-30 19:55

全球运营的游戏公司，实现存储就近访问、提升访问安全和效率

 ）中，我们介绍了XSKY星辰天合如何协助游戏公司解决在存储系统建设中遇到的挑战，这家游戏公司需要一直在线，以便为客户提供服务。
XSKY星辰天合·2023-10-30 18:55

FastDFS

分布式文件系统就是解决这些问题的！1.1什么是文件系统文件数据是如何存储的1.png1.2分布式文件系统一台电脑存储量有限，并且并发吞吐量也有限，如何提高性能？一吨货物，我要运送到吐
Yuanc丶·2023-10-30 17:21

电商API接口——实现数据同步的实时数据封装接口

常见的数据同步/集成场景多发生于不同的存储系统、不同的存储格式，如从mysql同步数据至数仓、excel或csv导入数据库中，但是众多数据同步解决方案很少涉及从http接口同步数据。
电商数据girl·2023-10-30 15:06

Redis

2Redis数据类型2.1String类型2.2hash类型2.3list类型2.4set类型2.5zset类型Redis1介绍Redis（RemoteDictionaryServer）是一个开源的内存数据存储系统
kdxing198·2023-10-30 12:20

hadoop组件及各自的功能

Hadoop=HDFS+Yarn+MapReduce+Hbase+Hive+Pig+…1.HDFS:分布式文件系统2.Yarn:分布式资源管理系统，3.MapReduce:Hadoop的编程框架4.Pig
ZK_0705·2023-10-30 10:17

Redis为什么这么快

Redis简介Redis是一个开源的内存中的数据结构存储系统，它可以用作：数据库、缓存和消息中间件。
MikeLue·2023-10-30 09:14

存储系统设计（HUST）

计算机组成与系统结构实践项目资源下载链接：存储系统设计HUST文章目录计算机组成与系统结构实践项目1、汉字字库存储芯片扩展实验2、MIPS寄存器文件设计3、MIPSRAM设计4、全相联cache设计5、
万里守约·2023-10-30 08:03

HDFS（一）HDFS基本介绍

分块存储抽象成数据块的好处HDFS副本机制名字空间（NameSpace）NameNode功能DataNode功能机架感知原理HDFS是HadoopDistributeFileSystem的简称，意为：Hadoop分布式文件系统
红叶゜·2023-10-30 07:27

大数据之 impala教程

换句话说，Impala是性能最高的SQL引擎（提供类似RDBMS的体验），它提供了访问存储在Hadoop分布式文件系统中的数据的最快方法。二、为什么选择Impala？Impal
种麦南山下·2023-10-30 07:45

大数据笔记-关于Cassandra的删除问题

我们开始在2013年做大数据存储系统选型过程中，也考虑过Cassandr
鬓戈·2023-10-30 06:48

MongoDB简介

简介MongoDB是一个基于分布式文件存储的NoSQL数据库由C++语言编写，运行稳定，性能高旨在为WEB应用提供可扩展的高性能数据存储解决方案MongoDB特点模式自由:可以把不同结构的文档存储在同一个数据库里面向集合的存储
指尖舞者_3f01·2023-10-30 05:37

一个基与邮件的数据下载存储系统

一个基与邮件的数据下载存储系统，它包括数据生成和传递以及定时执行两部分。
风暴之零·2023-10-30 04:55

工具分享：腾讯云价格计算器使用方法_服务器报价不求人

腾讯云服务器价格计算器可以一键计算出云服务器的精准报价，包括CVM实例规格价格、CPU内存费用、公网带宽收费、存储系统盘和数据盘详细费用，腾讯云百科txybk.com分享腾讯云价格计算器链接入口、使用方法说明
腮帮子疼·2023-10-30 00:42

业务设计——注册用户如何防止缓存穿透

什么是缓存穿透缓存穿透是指在使用缓存系统时，恶意或频繁地请求一个不存在于缓存中的数据，导致每次请求都需要查询数据库或其他数据存储系统，从而绕过了缓存的效果，严重影响系统性能。
学徒630·2023-10-29 20:42

04-17 day 34

3、共享存储的种类单点存储系统就是NFS，中小型企业，阿里云服务的NAS服务，OSS对象存储。NFS性能不太高。大型企业
个中秘密·2023-10-29 16:06

Mysql数据库分库分表实践

目前应用系统的最大瓶颈出现在数据库，主要是基于数据库的逻辑存储结构，和磁盘的物理特性决定了随机读取效率低下，无法靠简单磁盘阵列的扩展或者分布式文件系统，来提升性能。
Wengy.Xu·2023-10-29 15:31

MySQL--CRUD和面试题讲解

目录：1.CRUD2.链表查询及聚合函数的使用3.面试题讲解1.CRUD:什么是CRUD：CRUD是一个常用的术语，用于描述对于数据库或持久化存储系统的基本操作。
bing人·2023-10-29 11:50

Redisson的看门狗策略——保障Redis数据安全与稳定的机制

在分布式系统中，Redis作为一种高性能、低延迟的内存数据存储系统，被广泛应用于各种场景。然而，在复杂的环境中，Redis数据可能会面临过期失效或死锁等问题，这对应用程序的稳定性
懒鸟一枚·2023-10-29 06:21

国家数据局正式揭牌，数据专业融合型人才迎来发展良机

分布式统一大数据虚拟文件系统Alluxio原理、技术与实践》《云原生数据中台：架构、方法论与实践》《腾讯大数据构建之道》《运维数据治理:构筑智能运维的基石》《智能数据分析：入门、实战与平台构建》《电商存储系统实战
想你依然心痛·2023-10-28 20:04

k8s 二进制部署之部署 Etcd 集群

前一篇：k8s二进制部署之系统初始化配置后一篇：k8s二进制部署之node安装dockerEtcd介绍Etcd是一个分布式键值存储系统，Kubernetes使用Etcd进行集群资源数据的存储，所以先准备一个
菜鸟厚非·2023-10-28 12:21

MongoDB 的优点

文档结构的存储方式，能够更便捷地获取数据内置GridFS，支持大容量存储GridFS是一个出色的分布式文件系统，可以支持海量的数据存储。
65649e6a691f·2023-10-28 08:53

hadoop详解

HDFS:1.HDFS文件系统:HDFS是大数据开源框架hadoop的组件之一，全称（HadoopDistributedFileSystem），它是一个分布式文件系统，由多台服务器联合起来实现文件存储功能
不吃饭的猪·2023-10-28 07:46

操作系统--第四章 存储器管理--习题答案

答：设置多个存储器可以使存储器两端的硬件能并行工作；采用多级存储系统，特别是Cache技术，是减轻存储器带宽对系统性能影响的最佳结构方案；在微处理机内部设置各种缓冲存储器，减轻对存储器存取的压力。
三桥君·2023-10-28 06:02

计算机组成原理 思维导图 +《王道考研》习题总结(期末复习）

文章目录第一章计算机系统概述思维导图习题易错点第二章运算方法和运算器思维导图习题易错点定点数和浮点数表示浮点数运算加减运算乘除法第三章存储系统思维导图习题易错点第四章指令系统思维导图习题易错点第五章中央处理器思维导图补充习题易错点第六章总线系统思维导图习题易错点第七章输入输出系统思维导图习题易错点附录第一章计算机系统概述思维导图习题易错点
Y1seco·2023-10-28 05:35

hadoop--HDFS基础（适合初学者）

文章目录1HDFS分布式文件系统基础1.1文件系统1.2分布式文件系统1.3HDFS简介1.4HDFS起源发展1.5HDFS设计目标1.6HDFS应用场景1.7HDFS重要特性2HDFSshell操作2.1HDFSshell
火 玄·2023-10-28 04:07

Flink Streaming-Sink

文件系统连接器支持对本地文件系统或分布式文件系统的读取和写入。可以通过
hyunbar·2023-10-28 02:49

大学数字档案馆建设

专久智能大学数字档案馆建设需要从以下方面进行考虑：1.建设数字化存储系统：包括建设大学档案管理系统平台、存储服务器、数
rfid_tags·2023-10-28 01:40

NVMe End-to-End Protection Information

NVMe协议里定义SSD控制器可以支持给每个逻辑块（也就是用户数据）增加额外的元数据，主机如何使用元数据区域自定义（如分布式文件系统的元数据），元数据最常见的用途之一是传递PI端到端保护信息（end-to-endprotectioninformation
eaglelau·2023-10-27 18:03

Jenkins 凭证管理 - 看这一篇就够了~

许多三方网站和应用可以与Jenkins交互，如Artifact仓库，基于云的存储系统和服务等.在Jenkins中添加/配置credentials，Pipeline项目就可以使用credentials与三方应用交互
DevOps在路上·2023-10-27 15:24
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他