全闪存存储系统第27页

Hadoop数据压缩

一、概述压缩技术能够有效减少底层存储系统（HDFS）读写字节数，提高了网络带宽和磁盘空间的效率。在Hadoop下，尤其是数据规模很大和工作负载密集的情况下，使用数据压缩显得非常重要。

南巷的旧猫·2023-09-07 05:09

ETCD详解

etcd作为一个高可用键值存储系统，天生就是为集群化而设计的。由于Raft算法在做决策时需要多数节点的投票，所以etcd一般部署集群推荐奇数个节点，推荐的数量为3、5或者7个节点构成一个集群。

7B_coder·2023-09-07 04:16

卸载并删除/home4、扩大/root逻辑卷5、扩大/文件系统6、重建/home逻辑卷7、创建/home文件系统8、将新建的文件系统挂载到/home目录下9、恢复/home并删除备份10、再次查看看磁盘存储系统

喂小鸭·2023-09-07 02:54

李呈祥：bilibili在湖仓一体查询加速上的实践与探索

通常来说，它有以下几个特点：有一个统一的存储系统，所有的数据都放到这个统一的存储

DataFunTalk·2023-09-06 21:40

开源对象存储系统minio部署配置与SpringBoot客户端整合访问

2.3、JavaSDK管理工具3、MinIOServer配置参数3.1、启动参数：3.2、环境变量3.3、Root验证参数4、MinIOClient可用命令官方介绍：MinIO提供高性能、与S3兼容的对象存储系统

penngo·2023-09-06 19:32

Redis基本数据结构和原理

简介：Redis是一个key-value存储系统，在各种系统中的使用率越来越高，大部分原因是因为其高性能的特性。

shoulda·2023-09-06 09:10

Linux 内存管理详解（虚拟内存、物理内存，进程地址空间）

Linux-操作系统内存管理存储系统存储器的层次结构Linux的内存管理物理内存物理内存管理虚拟内存虚拟地址空间(写时拷贝)和物理地址映射关系页表虚拟内存优缺点「在4GB物理内存的机器上，申请8G内存会怎么样

-YIN·2023-09-06 03:28

优化的道路永无止境——Mysql的ICP及MRR

于本文的重点并不在架构细节上，所以让我们直接看关键部分，存储引擎作为单独的一层，是连接底层存储系统和上层server其他部分的桥梁，而MySQL对存储引擎的抽象也极大地丰富了其可扩展性。

绝色天龙·2023-09-06 01:44

变化

Memcache/redisRedis和Memcached都是基于内存的数据存储系统。

九楼记·2023-09-05 22:06

存储数据恢复- raid5多块硬盘出现坏道的数据恢复案例

存储系统上层共划分了11个卷。存储故障&检测：存储内磁盘发生故障，存储设备上有两块盘的硬盘指示灯显示黄色，存储不可用，存储设备已经过保。硬件工程师将故障存储中那组出现故障崩溃的阵列中所有磁盘编号后

北亚数据恢复·2023-09-05 19:43

存储数据恢复- 存储raid5多块硬盘出现故障的数据恢复案例

存储系统上层共划分了11个卷。存储故障&检测：存储内磁盘发生故障，存储设备上有两块盘的硬盘指示灯显示黄色，存储不可用，存储设备已经过保。硬件工程师将故障存储中那组出现故障崩溃的阵列中所有磁盘编号后

·2023-09-05 16:56

解读MapReduce程序实例

Hadoop的四大组件：（1）HDFS：分布式存储系统；（2）MapRedu

大禹编程扛把子·2023-09-05 14:03

Hudi 源码之Bucket Index

然后将这些对应关系保存到外部存储系统（HBase，Flink状态后端等）。这种方式需要引入外部系统，运维的复杂度较高且索引数据量较大。除此之外Hudi还提供了Bl

AlienPaul·2023-09-05 09:14

Hadoop的概述与安装

Hadoop的概述与安装一、Hadoop内部的三个核心组件1、HDFS：分布式文件存储系统2、YARN：分布式资源调度系统3、MapReduce：分布式离线计算框架4、HadoopCommon（了解即可

Augenstern K·2023-09-05 06:49

搭建单机版FastDFS分布式文件存储系统

一、准备工作1、下载FastDFS安装包和依赖包https://codeload.github.com/happyfish100/libfastcommon/tar.gz/V1.0.43https://codeload.github.com/happyfish100/fastdfs/tar.gz/V6.06https://codeload.github.com/happyfish100/fastd

知识是要分享的·2023-09-05 04:21

HBase/TiDB都在用的数据结构：LSM Tree，不得了解一下？

设计数据存储系统可能需要考虑的一些问题有：ACID，RUM（Read,Write,Memory）。ACIDACID相信小伙伴都被面试官问过，我想简单讨论的

Monica2333·2023-09-04 23:24

DBService基础原理

一、DBService简介DBService是一个高可用性的关系型数据库存储系统，适用于存储小量数据（10GB左右），比如：组件元数据。

Hello.Reader·2023-09-04 21:24

Spark-Core核心算子

文章目录一、数据源获取1、从集合中获取2、从外部存储系统创建3、从其它RDD中创建4、分区规则—load数据时二、转换算子(Transformation)1、Value类型1.1map()_1.2mapPartitions

ha_lydms·2023-09-04 20:36

如何给电脑分盘，D盘，E盘……

C盘一般用来存储系统使用，如果D盘很大，比如1TB的话，可以分成两个500多G的盘来使用，方便我们存储和管理文件。下面介绍磁盘分区的步骤。首先右击此电脑，点击管理进入磁盘管理界面。

加载数据别失败·2023-09-04 14:03

记录一下redis基本概念和常用场景

如题，记录一下基本概念和常用场景什么是redisRedis（RemoteDictionaryServer）是一个开源的内存数据库，也可以称为键值存储系统特点内存存储Redis将数据存储在内存中，以提供快速读写访问

death撒旦·2023-09-04 12:03

08 etcd环境安装

etcd环境安装etcd是一个分布式的键值存储系统，其优秀的读写性能、一致性和可用性的机制，非常适合用来做配置中心角色。

拼搏的菜鸟·2023-09-04 08:09

分布式计算在云计算中的作用

云计算基于分布式计算技术，它离不开Google的三大核心技术，GFS（GoogleFileSystem，Google文件系统）分布式存储系统，MapReduce分布式处理技术和BigTable分布式数据库

EmmauelZ·2023-09-03 22:54

案例分享：NetApp SSD 硬盘重启后全部故障

近日连续处理了几个NetAppFAS存储系统SSD磁盘重启后，全部故障的案例。这里是case的总结和分享，以后有遇到的可以参考处理。

存储服务专家StorageExpert·2023-09-03 19:27

NetApp FAS存储系统磁盘更换详细步骤

说起更换磁盘，都会说非常简单，但无数次的血淋淋的教训让我们再次来审视一下更换磁盘的专业步骤。本文就是介绍最专业的也是最简单的磁盘更换步骤。常在河边走哪有不湿鞋，希望做了几十年攻城狮的你不要在这里翻船。本文介绍的内容适用于Ontap8和7的7-mode，clustermode，或者到了9版本，命令有了很大的差异，甚至有了ADP的磁盘，很多内容不再适用。如果在新的ontap9版本更换磁盘有问题可以ad

存储服务专家StorageExpert·2023-09-03 19:57

EMC VNX2代一键关机方法

由于不正确的EMCVNX存储系统的关机导致客户业务中断，数据丢失的案例数不胜数。

存储服务专家StorageExpert·2023-09-03 19:55

Java-XML

XML的使用场景：XML内容经常被当成消息进行网络传输，或者作为配置文件用于存储系统的信息。XML的

潆勖·2023-09-03 15:15

Redis和memcached的区别

相同点都是基于内存的数据存储系统，不同点1.Redis支持服务器端的数据操作：Redis相对memcached而言，拥有更多的数据结构和数据操作。

杨帆玉·2023-09-03 07:36

Flink Table API& SQL编程指南(Source Connector【FileSystem、HBase、Kafka、JDBC、Hive】)

TableSink会将计算的结果输出给外部存储系统。这些取决于Source和Sink的类型，他们支持很多种数据类型，例如：CSV、Parquet、ORC等。接下来

麦田里的守望者··2023-09-03 07:30

案例若干

1.傲腾（Optane）1.1概念傲腾由Intel公司推出，类似于M.2(22mmx80mm)固态硬盘，可以作为混合硬盘一部分，存储系统常用数据，起一定的加速作用。

技术支持小张·2023-09-02 20:50

搭建单机版的kafka

Kafka介绍Kafka已经不仅仅是一个消息系统，它还是一个存储系统和流处理平台。因为其高可用，可水平扩展，可持久化，可处理流数据而被大数据领域广泛使用。

好吃二师兄·2023-09-02 13:30

什么鬼，面试官竟然让我用Redis实现一个消息队列！！？

file众所周知，redis是一个高性能的分布式key-value存储系统，在NoSQL数据库市场上，redis自己就占据了将近半壁江山，足以见到其强大之处。

南风过境jz·2023-09-02 12:36

无代理备份有哪些好处？

在这个实例中需要一个代理，因为在许多情况下，服务器使用的物理存储是本地的，或者是从数据备份软件无法访问的共享存储系统中获取的。

weixin_34249367·2023-09-02 12:41

2020下半年信息系统监理师上午真题及答案

A.信息资源系统B.信息网络系统C.信息应用系统D.信息存储系统参考答案：B2、在信息系统软件生存周期中，系统总目标应在(2)阶段完成。

qq_5849497·2023-09-02 10:59

Redis数据结构总结

Redis是一款开源的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息代理。

栗筝i·2023-09-02 09:22

《分布式技术原理与算法解析》学习笔记Day22

数据分布设计原则在分布式数据存储系统中，做存储方案选型时，一般会考虑以下因素：数据均匀数据稳定节点异构性隔离故障域性能稳定性数据均匀有两重含义：不同存储节点中存储的数据要尽量均衡，避免让某一个或者某几个节点存储压力过大

技术修行者·2023-09-02 02:02

Kubernetes集群构建的主要步骤

3、安装Kubernetes软件组件：安装Etcd，作为Kubernetes的分布式键值存储系统。安装KubernetesMas

浩豪·2023-09-01 23:14

【zabbix】使用SMI-S监控惠普3par存储

请记住，管理员应拥有超级用户权限才能连接到目标存储系统。连接到目标HP3PARStorage

shen12138·2023-09-01 22:05

什么是 LSM 思想？它的优缺点都那些？

LSM（Log-StructuredMerge）是一种用于设计和优化存储系统的思想和架构。

VicRestart·2023-09-01 22:56

Redis

Redis是一个高速缓存数据库，是一种key-value的存储系统，就是一个数据库，有些数据不想存放在数据库中，就可以放到redis中，比如说验证码，它支持的数据类型很丰富：String、list、set

爱吃饭团煲·2023-09-01 21:54

Erasure-Code(纠删码) 最佳实践

典型如Google新一代分布式存储系统colossus系统的Reed-solomon算法、WindowAzureStorage的LRC算法等等。EC(Erasure-Code)算法的最底层

大隐隐于野·2023-09-01 10:44

Ceph基础知识和基础架构认识

1Ceph基础介绍Ceph是一个可靠地、自动重均衡、自动恢复的分布式存储系统，根据场景划分可以将Ceph分为三大块，分别是对象存储、块设备存储和文件系统服务。

大隐隐于野·2023-09-01 10:11

短视频矩阵系统独立技术运行--云端开发储存

云数据库将数据存储在云端，通过互联网实现全球访问，具有高可靠性和高可扩展性；云存储是一种云服务，可用于存储任何类型的数据，包括文档、音频、视频等；对象存储是一种分布式存储系统，可存储大量非结构化数据，如图像

云罗互动yx898978·2023-09-01 08:23

非常详细的 Ceph 介绍、原理、架构

非常详细的Ceph介绍、原理、架构1.Ceph架构简介及使用场景介绍1.1Ceph简介Ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。

大隐隐于野·2023-09-01 07:30

ceph架构及 IO流程

节点之间相互通信以达到：存储和检索数据数据复制监控集群的健康状况保证数据的完整性检测故障并恢复基本架构如下图：分布式对象存储系统RADOS是CEPH最为关键的技术，主要由OSD和Monitor组成。

大隐隐于野·2023-09-01 07:30

零基础学Python|Python高阶-使用Python操作数据库

前端、Python开发多年，做过高程，项目经理，架构师主要内容：Java项目开发、毕业设计开发、面试技术整理、最新技术分享收藏点赞不迷路关注作者有好处文末获得源码一，使用Python操作数据库数据库作为存储系统数据的主要工具

编程指南针·2023-09-01 06:42

Gartner & IDC：超融合回归“软件定义”本质，“全栈软件”成为厂商关键能力

近日，IDC发布了《中国软件定义存储（SDS）及超融合存储系统（HCI）市场季度跟踪报告，2023年第一季度》（以下简称“跟踪报告”）。

志凌海纳SmartX·2023-09-01 05:19

计组中需要记忆的零散知识点

程序控制指令：指实现程序跳转之类的指令，包括如下：转移指令有条件转移指令无条件转移指令循环控制指令调用和返回指令中断指令第三章存储系统虚拟存储器是靠软硬件结合实现的，需要硬件进行地址翻译，需要操作系统进行资源的管理和调度

rebekk·2023-09-01 02:57

Android_chunhui·2023-09-01 00:59

oss-server 小型对象存储系统

oss-server项目介绍oss-server是针对项目开发时提供的小型对象存储系统,开发者在针对文件上传时业务剥离,同时方便文件迁移，为满足单个项目，多个系统的情况下，提供统一的oss服务oss-server

八一菜刀·2023-09-01 00:54

大数据学习之路之HBASE

它可以直接使用本地文件系统，也可以使用Hadoop的HDFS文件存储系统。不过，为了提高数据的可靠性和系统的健壮性，并且发挥HBase处理大数据的能力，使用HDFS作为文件存储系统才更为稳妥。

王小冬·2023-09-01 00:27

推荐频道

全闪存存储系统