全闪存存储系统

spark streaming杂记

Metadatacheckpointing:保存流计算的定义信息到容错存储系统如HDFS中。这用来恢复应用程序中运行worker的节点的故障。
cclucc·2023-07-26 06:10

Redis缓存击穿

Redis缓存击穿是指在使用Redis作为缓存时，某个热点数据过期或不存在，导致大量请求直接打到后端存储系统（例如数据库），使得后端系统压力骤增，性能下降的情况。这种情况通常发生在热点数据失效的瞬间。
来杯茶的ni·2023-07-26 05:10

Oracle Exadata一体机简介

Exadata是什么Exadata是Oracle的推出的软硬件整合一体机产品，初始目的是用于解决超大型数据库所存在的普遍性性能瓶颈，也就是磁盘存储系统向数据库服务器传输大量的数据，Exadata相当于Oracle
wenzhongyan·2023-07-26 05:11

Twitter的分布式自增ID算法snowflake【雪花算法】

而twitter的snowflake解决了这种需求，最初Twitter把存储系统从MySQL迁移到Cassandra，因为Cassandra没有顺序I
Mr丶Xi·2023-07-26 05:40

深入解析Redis：一种快速、高效的键值存储系统

深入解析Redis：一种快速、高效的键值存储系统1.引言在现代应用程序中，高性能和可扩展性是至关重要的。
念广隶·2023-07-26 04:19

K8s卷存储详解（二）

但新的问题出现了，如果某个Node节点故障了，Pod如果转移到了别的节点，本地临时存储的数据就不能访问了，此时需要网络存储系统来
抽象空间·2023-07-26 03:42

B树、B+树详解

[1]与其他自平衡二进制搜索树不同，B树非常适合读取和写入相对较大的数据块（如光盘）的存储系统。它通常用于数据库和文件系统。B
coder_by·2023-07-26 03:01

Raft 思想在架构中实践

Raft诞生背景：分布式存储系统通常通过维护多个副本来进行容错，提高系统的可用性。要实现此目标，就必须要解决分布式存储系统的最核心问题：维护多个副本的一致性。
菠萝-琪琪·2023-07-25 21:44

基于LSM-Tree 的分布式组件化 KV 存储系统 | DB·洞见回顾

Nova-LSM，一个将基于LSM-Tree的分布式KV存储系统分解为使用RDMA进行通信的组件的工作。这些组件将存储与处理分开，使处理组件能够共享存储带宽和空间。
腾讯云数据库·2023-07-25 16:08

IOR的安装及使用

简介IOR是一种并行IO基准测试，可用于测试使用各种接口和访问模式的并行存储系统的性能。IOR存储库还包括mdtest基准测试，专门测试不同目录结构下存储系统的峰值元数据速率。
fakerth·2023-07-25 15:48

满足考研角度理解计算机组成原理的大端存储、小端存储、LSB和MSB

一个存储单元对应存储系统的一个单独唯一的地址，而一个存储单元内包含的存储元的数量由计算机的编址确定的。
硕欧巴·2023-07-25 14:01

Hbase基本原理剖析

基本原理数据存储使用HBase来承接，HBase是一个开源的、面向列（Column-Oriented）、适合存储海量非结构化数据或半结构化数据的、具备高可靠性、高性能、可灵活扩展伸缩的、支持实时数据读写的分布式存储系统
Hello.Reader·2023-07-25 13:35

Hadoop概念学习(无spring集成)

Hadoop分布式的文件存储系统三个核心组件但是现在已经发展到很多组件的s或者这个图官网地址:https://hadoop.apache.org历史hadoop历史可以看这个:https://zhuanlan.zhihu.com
Like_wen·2023-07-25 12:56

HBase教程_编程入门自学教程_菜鸟教程-免费教程分享

教程简介HBase是一个分布式的、面向列的开源数据库，该技术来源于FayChang所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。
菜鸟一记·2023-07-25 10:01

vue3 实现预览pdf的几种方式（vue3-pdf, iframe流展示，vue-office/pdf）

功能描述：要实现菜单（二级）绑定文件，并进行预览（点击菜单即触发），支持文件上传下载（绑定菜单）,文件以byte[]形式保存到数据库（至于为什么不用文件存储系统，因为这是领导定的=，=而且这个功能比较小
小小杜w·2023-07-25 08:10

数据仓库设计理论

数据仓库设计理论一、数据仓库基本概念1.1、数据仓库介绍数据仓库是一个用于集成、存储和分析大量结构化和非结构化数据的中心化数据存储系统。它旨在支持企业的决策制定和业务分析活动。
高世之智·2023-07-24 22:33

ceph中RADOS原理是什么，具体实现步骤是什么

RADOS（ReliableAutonomousDistributedObjectStore）是Ceph分布式存储系统的基础，是一种可靠的、自主分布的对象存储系统。
d1306937299·2023-07-24 22:29

Redis 简介&下载安装(Windows中与Linux中)

Redis简介&下载安装Redis是一个开源的内存中的数据结构存储系统，它可以用作:数据库、缓存和消息中间件。Redis是一个开源的高性能键值对存储数据库，常用于缓存、消息队列、计数器等场景。
heart000_1·2023-07-24 21:52

实训笔记7.19

实训笔记7.197.19一、座右铭二、Hadoop的HDFS分布式文件存储系统的相关原理性内容2.1HDFS上传数据的流程2.2HDFS下载数据的流程2.3HDFS中NameNode和SecondaryNameNode
cai-4·2023-07-23 15:21

HDFS分布式存储系统简述

HDFS分布式存储系统HDFS存储架构文件存储系统原理文件存储在磁盘上，磁盘读取数据靠的是机械运动。
这里是YH·2023-07-23 14:43

hadoop分布式文件系统_Hadoop分布式文件系统简介

Hadoop是存储诸如TB和PB之类的大量数据的理想选择，并且使用HDFS作为其存储系统。HDFS使您可以连接包含在其上分布数据文件的群集中的节点（商品个人计算机）。
cuyi7076·2023-07-23 14:42

HDFS Hadoop分布式文件存储系统整体概述

HDFS整体概述举例：包括机架rack1、rack2包括5个Datanode,一个Namenode(主角色)带领5个Datanode(从角色)，每一个rack中包含不同的block模块文件为分块存储模式。块与块之间通过replication进行副本备份，进行冗余存储，Namenode对存储的元数据进行记录。该架构可以概括为一个抽象统一的目录树结构。主从架构HDFS集群是标准的master/slav
好的！文西·2023-07-23 14:42

分布式系统开发实战：分布式存储，分布式存储常用技术

分布式存储概述分布式存储系统，是将数据分散存
写代码的珏秒秒·2023-07-23 08:14

HBase分布式数据库（NoSQL）

ApacheHBase介绍HBase是一个分布式的、面向列的开源数据库，该技术来源于FayChang所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。
小中.·2023-07-23 04:48

HBase&Spark集成 -- DataFrame

HBase&Spark集成–DataFrameApacheHBase是一个成熟的NoSQL存储系统，已在大规模生产部署中得到证明。
小中.·2023-07-23 04:48

redis笔记

advancedkey-valuestore.Itisoftenreferredtoasadatastructureserversincekeyscancontainstrings,hashes,lists,setsandsortedsets.redis是开源,BSD许可,高级的key-value存储系统
凯睿看世界·2023-07-23 02:52

NetApp AFF C 系列——跨存储介质、协议和混合云统一数据管理

一、引领云互联全闪存数据中心之路随着四层式存储单元(QLC)闪存技术的成熟和广泛应用、企业发现其性能足以满足许多第1层和第2层工作负载的要求—而且其价格通常比三层式存储单元(TLC)介质更经济实惠、因此具有优势
小信瑞·2023-07-22 19:48

Hive和Spark

1.Hive简介hive的定位是数据仓库，其提供了通过sql读写和管理分布式存储中的大规模的数据，即hive即负责数据的存储和管理（其实依赖的是底层的hdfs文件系统或s3等对象存储系统），也负责通过sql
万里长江横渡·2023-07-22 14:22

DAY 34

3、共享存储的种类单点存储系统就是NFS，中小型企业，阿里云服务的NAS服务，OSS对象存储。NFS性能
朱耿卫·2023-07-22 14:15

hdfs详解

hdfs简介hdfs是hadoop中分布式的文件存储系统；具有高容错、可扩展；广泛的用于大数据项目中（不仅仅是hadoop）优点容错性高数据自动保存多个副本（可设置）副本丢失后，自动恢复适合批处理移动计算而非移动数据数据位置暴露给计算框架适合大数据处理
水木清华_f221·2023-07-22 08:39

最全总结 | 聊聊 Python 数据处理全家桶（Memcached篇）

前言本篇文章继续继续另外一种比较常用的数据存储方式：MemcachedMemcached：一款高性能分布式内存对象缓存系统，通过内存缓存，以减少数据库的读取，从而分担数据库的压力，进而提高网站的加载速度Memcached，实际上是一套简洁的键值对存储系统
AirPython·2023-07-21 19:56

Redis快速入门

Redis简介  REmoteDIctionaryServer(Redis)是一个由SalvatoreSanfilippo写的key-value存储系统。  
山阴少年·2023-07-21 19:52

一、什么是IPFS?

本质上就是一个世界互联网范围内永久的、去中心化、分布式的文件存储系统。
月景无痕·2023-07-21 16:26

Hadoop学习-3-HDFS简介及Python操作HDFS

HDFS(分布式文件系统)HDFS简介分布式文件系统解决大数据存储的问题，横跨多台计算机上的存储系统是一种能够在普通硬件上运行的分布式文件系统，高容错，适用于具有大数据集的应用程序提供统一的访问接口一次写入
数说兴趣·2023-07-21 12:35

Linux5.17 Ceph应用

文章目录计算机系统5G云计算第四章LINUXCeph应用一、创建CephFS文件系统MDS接口1.服务端操作2.客户端操作二、创建Ceph块存储系统RBD接口三、创建Ceph对象存储系统RGW接口四、OSD
wfwj_·2023-07-21 11:03

浅谈微信朋友圈的架构设计

可以使用分布式存储系统，如Hadoop或Ceph等，来存储多媒体数据，并使用关系型数据库，如MySQL或PostgreSQL等，来存储其他数据。服务器架构为了支持高并发和高可用性，可以使用分
Java技术攻略·2023-07-21 07:58

分布式运用存储系统Ceph

Ceph使用C++语言开发，是一个开放、自我修复和自我管理的开源分布式存储系统。具有高扩展性、高性能、高可靠性的优点。Ceph目前已得到众多云计算厂商的支持并被广泛应用。
瓜皮小菜·2023-07-20 23:48

String类型

一、必要性个人已知的存储系统，无论是磁盘，内存又或是CPU内部的缓存，在逻辑层面其实都是一种Key-Value的访问模式。也就是给定一个Ke
FA-117·2023-07-20 21:26

构建容器化的 Redis 集群服务代理

Redis&AmazonElastiCacheforRedis&AmazonMemoryDBofRedis简介Redis是一个Key-Value存储系统，是跨平台的非关系型数据库。
亚马逊云开发者·2023-07-20 18:41

HBase

是一个分布式的、面向列的开源数据库HBase是GoogleBigTable的开源实现HBase不同于一般的关系数据库,适合非结构化数据存储1.1.2BigTableBigTable是Google设计的分布式数据存储系统
Wzideng·2023-07-20 15:18

PG概述及OSD对PG状态的影响

前言随着分布式存储的广泛应用，目前对PG的关注越来越多，本文基于ONStor分布式存储系统简要介绍一下PG的状态变化，重点说明OSD对PG状态的影响。
yuzhangfeng·2023-07-20 10:43

ceph----应用

文章目录一、创建CephFS文件系统MDS接口1.1服务端操作1.2客户端操作二、创建Ceph块存储系统RBD接口三、OSD故障模拟与恢复四、创建Ceph对象存储系统RGW接口一、创建CephFS文件系统
含蓄。·2023-07-20 05:05

ceph三个接口的创建

目录创建CephFS文件系统MDS接口服务端操作客户端操作创建Ceph块存储系统RBD接口1、创建一个名为rbd-demo的专门用于RBD的存储池2、将存储池转换为RBD模式编辑3、初始化存储池4、创建镜像
一条会呼吸的鱼·2023-07-20 05:28

【Ceph集群应用】Ceph对象存储系统之RGW接口详解

Ceph对象存储系统之RGW接口详解1.创建Ceph对象存储系统RGW接口2.开启http+https,更改监听端口3.更改监听端口4.S3接口访问测试5.实验中遇到的故障案例接上文基于ceph-deploy
陌上花开，静待绽放！·2023-07-19 18:17

【Ceph集群应用】Ceph块存储之RBD接口详解

Ceph块存储之RBD接口详解1.创建Ceph块存储系统RBD接口1.1删除镜像1.2还原镜像1.3在线扩容1.4回滚镜像到指定位置1.5删除快照1.6快照分层1.7快照展平1.8镜像的导出导入接上文基于
陌上花开，静待绽放！·2023-07-19 18:47

Ceph分布式存储系统架构研究综述

Ceph项目是加州大学圣克鲁兹分校的Weil于2006年开发的。当时他发现元数据的查询和维护严重影响了Lustre等分布式文件系统的性能和扩展性，因此设计了一种利用算法来确定数据与存储节点对应关系的方法CRUSH。2015年5月发布的Linux内核2.6.34已开始支持Ceph。Weil也成立了IntTank公司，专注于Ceph的开发。2014年5月，该公司被RedHat收购。Ceph同时支持３种
开源Linux·2023-07-19 15:08

【Linux】分布式存储系统 Ceph

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档分布式存储系统CephCeph概述1、Ceph简介2、存储基础3、Ceph优势4、Ceph架构4、Ceph核心组件5、OSD存储后端6、Ceph
ikun小鸡子·2023-07-19 15:06

分布式存储系统 Ceph 介绍与环境部署

一、概述Ceph是当前非常流行的开源分布式存储系统，具有高扩展性、高性能、高可靠性等优点，同时提供块存储服务(rbd)、对象存储服务(rgw)以及文件系统存储服务(cephfs)，Ceph在存储的时候充分利用存储节点的计算能力
Java小小虫·2023-07-19 15:35

【Linux】分布式存储系统 Ceph应用

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档分布式存储系统Ceph应用创建CephFS文件系统MDS接口创建Ceph块存储系统RBD接口创建Ceph对象存储系统RGW接口OSD故障模拟与恢复创建
ikun小鸡子·2023-07-19 15:05

Java中使用Redis实现高效缓存与数据存储

Redis是一种快速、开源的内存数据结构存储系统，常被用作高效的缓存和数据存储解决方案。在Java开发中，使用Redis可以极大地提升应用性能，减轻数据库压力，实现分布式系统的数据共享。
儿时可乖了·2023-07-19 12:09
上一页 29 30 31 32 33 34 35 36 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他