分布式存储

ceph分布式存储

1、存储基础//单机存储设备●DAS（直接附加存储，是直接接到计算机的主板总线上去的存储）IDE、SATA、SCSI、SAS、USB接口的磁盘所谓接口就是一种存储设备驱动下的磁盘设备，提供块级别的存储●NAS（网络附加存储，是通过网络附加到当前主机文件系统之上的存储）NFS、CIFS、FTP文件系统级别的存储，本身就是一个做好的文件系统，通过nfs接口在用户空间输出后，客户端基于内核模块与远程主机
半糖不加冰520·2023-06-11 18:21

轻骑逐单于，大雪满弓刀：华为分布式存储的一骑绝尘

唐代诗人卢纶，有一首脍炙人口的《和张仆射塞下曲》，“月黑雁飞高，单于夜遁逃。欲将轻骑逐，大雪满弓刀。”诗中的慷慨激昂，热血炙烈，千年来让无数国人心魂激荡。时代变迁，岁月迁移，今天我们所期望听到的热血故事或许不在现实世界，而是在数字山野的轻骑追逐中，在核心科技的发展竞赛里。《数字中国建设整体布局规划》中，明确提出了构筑自立自强的数字技术创新体系，为关键核心技术突破发展指明了方向。在核心科技自立自强中
脑极体·2023-06-11 14:07

Redis集群之redis cluster模式

Sentinel基本已经实现了高可用，但是每台机器都存储相同内容，很浪费内存，所以RedisCluster实现了分布式存储。每台机器节点上存储不同的内容，并且可扩展性大大提高。
小沈同学呀·2023-06-11 10:31

springboot整合minio分布式存储

Minio基础概念S3SimpleStorageService，简单存储服务，这个概念是Amazon在2006年推出的，Object存储到Minio的基本对象，如文件、字节流，Anything…Bucket用来存储Object的逻辑空间。每个Bucket之间的数据是相互隔离的。Drive部署Minio时设置的磁盘，Minio中所有的对象数据都会存储在Drive里。Set一组Drive的集合，分布式
kill-java·2023-06-11 07:18

【分布式存储】聊一下分布式存储中分片机制

为什么需要分片在服务端领域，主要特点是支撑7*24小时不间断的服务，而最终对各种行为会生产对应的数据，比如用户登陆/注册，发起订单交易、支付、身份验证，短信验证等情况都需要存储起来，其中包括各种各样的数据，而采用格式的存储中间件进行保存数据，可以有效的进行数据查询和存储，比如MySQL支持关系型数据的存储，Redis支持NoSQL，ES支持快速查询等。但是如果只是单实例的话，其实存储的数据是有上限
qxlxi·2023-06-10 20:30

Prometheus+Grafana+Alertmanager搭建（Docker）

特征：具有由指标名称和键/值对标识的时间序列数据的多维数据模型PromQL，一种灵活的查询语言，可利用此维度不依赖分布式存储;单服务器节点是自治的时序收集通过HTT
Forced O&M personnel·2023-06-10 14:30

原来我们的互联网还可以是这样

去中心化我们知道，在区块链的技术中，数据采用分布式存储，这是一种去中心化的方式。在去中心化的结构中，由于没有了中心的管理机构或者硬件设施，整个社区内的任何节点大家都享有同样的
EOSGenesis·2023-06-10 06:27

2021-06-19

PPT大纲第一p趋势互联网+第二p区块链+第三p分布式存储什么是分布式存储第四p国家政府对于分布式存储的公文第5p5.24号国家大数据中心的批文swarm介绍创始人解决什么问题决定挖币的因素计算机性能带宽技术东宇威公司优势为什么要挖头矿
精灵一笑·2023-06-10 04:57

Ceph 分布式存储

存储基础单机存储设备●DAS（直接附加存储，是直接接到计算机的主板总线上去的存储）IDE、SATA、SCSI、SAS、USB接口的磁盘所谓接口就是一种存储设备驱动下的磁盘设备，提供块级别的存储●NAS（网络附加存储，是通过网络附加到当前主机文件系统之上的存储）NFS、CIFS、FTP文件系统级别的存储，本身就是一个做好的文件系统，通过nfs接口在用户空间输出后，客户端基于内核模块与远程主机进行网络
星辰18岁·2023-06-10 03:55

基于docker容器工具实现redis分布式存储、容错切换、扩容缩容

cluster（集群）模式：docker版哈希槽分区进行亿级数据存储一、3主3从redis集群配置注：主从机器分配情况以实际情况为准1、关闭防火墙+启动docker后台服务systemctlstopfirewalldsystemctlstartdocker2、新建6个docker容器实例dockerrun-d--nameredis-node-1--nethost--privileged=true-
Small stones·2023-06-10 01:08

存储技术的发展，未来有哪些趋势？

而对于分布式存储技术这个领域，我认为需要从纵向的存储技术发展脉络和横向的主流技术对比两个方面
sendnews·2023-06-09 19:17

Clickhouse系列之整合Hive数仓

ApacheHive数据仓库软件便于使用SQL读取、写入和管理驻留在分布式存储中的大型数据集。结构可以投射到已存储的数据上。提供了一个命令行工具和JDBC驱动程序，用于将用户连接到Hive。
小二上酒8·2023-06-09 19:22

spark复习重点

大数据的处理需要使用特殊的技术和工具，如分布式存储、分布式计算、数据挖掘、机器学习等。大数据的特性大数据具有以下特性：Volume（数据量大）：大数据的数据量通常以TB、PB、EB等计量单位来衡量。
浩茫·2023-06-09 12:48

Spark运行原理

1.BlockManagerBlockManager是Spark的分布式存储系统主从结构：BlockManagerMaster/BlockManager（Slave）BlockManagerMaster
不会编程的小小怪·2023-06-09 09:15

聊聊分布式锁——Redis和Redisson的方式

一、什么是分布式锁分布式~~锁，要这么念，首先得是『分布式』，然后才是『锁』分布式：这里的分布式指的是分布式系统，涉及到好多技术和理论，包括CAP理论、分布式存储、分布式事务、分布式锁...分布式系统是由一组通过网络进行通信
小小怪下士 XIA·2023-06-09 06:56

从绿色节能趋势看存储资源盘活系统HBlock

数据中心约超过一半的成本是电费，数据存储系统作为数据中心三大件之一，能耗也约占三分之一，面对非结构化数据量的快速增长挑战，以及国家对数据中心绿色节能要求的提高，分布式存储的绿色节能愈来愈加重要。
存储-小白·2023-06-08 20:47

从分布式存储管理功能发展趋势看存储资源盘活系统HBlock

随着企业IT的架构复杂化、多样化，非结构化数据进入到企业生产决策流程，企业对非结构数据的安全可靠、自动化管理、跨云共享提出了新的要求，为满足新的数据管理需要，分布式存储正向着硬件异构、多数据中心容灾、智能化运维的方向创新演进
存储-小白·2023-06-08 20:16

分布式存储Ceph的部署及应用（创建MDS、RBD、RGW 接口）

目录一、存储基础1.1单机存储设备1.2单机存储的问题二、分布式存储（软件定义的存储SDS）2.1分布式存储的类型三、Ceph简介3.1Ceph优势3.2Ceph架构3.3Ceph核心组件3.4Pool
橘淮南枳·2023-06-08 07:24

初学者学习微服务 需要了解哪些知识?该如何入门微服务?有哪些优质的教程可以学习?

终于有人把tcp、http、rpc和grpc总结完整了微服务知识点总览学习微服务，需要了解以下几个方面的知识：分布式系统：微服务是一种分布式系统架构模式，因此需要对分布式系统有一定的了解，包括分布式计算、分布式存储
7small7·2023-06-08 04:18

微服务架构案例(03)：数据库选型简介，业务数据规划设计

分布式存储Cassandra、Hbase、MongodDB等。键值存储Memcached、Redis、MemcacheDB等。图形
知了一笑·2023-06-08 02:23

ceph 分布式存储

一、存储基础1.1单机存储设备●DAS（直接附加存储，是直接接到计算机的主板总线上去的存储）IDE、SATA、SCSI、SAS、USB接口的磁盘所谓接口就是一种存储设备驱动下的磁盘设备，提供块级别的存储●NAS（网络附加存储，是通过网络附加到当前主机文件系统之上的存储）NFS、CIFS、FTP文件系统级别的存储，本身就是一个做好的文件系统，通过nfs接口在用户空间输出后，客户端基于内核模块与远程主
宇航员殿·2023-06-07 23:51

CEPH分布式存储部署

ceph支持块存储、对象存储、cephfs文件共享系统，概念性的东西这里不过多介绍，请自行查阅ceph分布式存储相关资料，本文主要介绍ceph分布式集群部署操作系统：centos7.9最小安装节点配置：
旅途丶·2023-06-07 22:08

Ceph 分布式存储

Ceph概述存储基础单机存储设备●DAS（直接附加存储，是直接接到计算机的主板总线上去的存储）IDE、SATA、SCSI、SAS、USB接口的磁盘所谓接口就是一种存储设备驱动下的磁盘设备，提供块级别的存储●NAS（网络附加存储，是通过网络附加到当前主机文件系统之上的存储）NFS、CIFS、FTP文件系统级别的存储，本身就是一个做好的文件系统，通过nfs接口在用户空间输出后，客户端基于内核模块与远程
仙女爱硬拉·2023-06-07 22:55

什么是数藏，数藏适用于什么样配置服务器

数藏的概念：数藏是一种基于分布式存储和计算的架构，它采用分布式文件系统和分布式数据库等技术，将数据分散存储在多个节点上，并通过数据冗余和数据分片等方式来保证数据的可靠性和可用性。
潘潘潘潘panpan·2023-06-07 20:25

Hbase安装指南

Hbase简介HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PCServer上搭建起大规模结构化存储集群。
小小哭包·2023-06-07 18:59

网工内推 | 云方向招运维，云计算HCIE认证优先，最高22k

01东华软件股份公司招聘岗位：运维系统工程师（云平台）职责描述：1、负责华为云平台HuaweiCloudStack，FusionStorage分布式存储的维护，优化和故障处理；2、负责云平台上VDC、ECS
HCIE考证研究所·2023-06-07 13:31

数据结构与算法08：二分查找和哈希算法

目录【二分查找】二分查找的特殊情况【哈希算法】应用一：安全加密应用二：唯一标识应用三：数据校验应用四：散列函数应用五：负载均衡应用六：数据分片应用七：分布式存储（一致性哈希算法）每日一练：搜索旋转排序数组
浮尘笔记·2023-06-07 10:26

几种分布式文件系统的优缺点归纳与总结

2.Ceph：Ceph是一个开源的分布式存储系统，提供了高可用性、高性能和可扩展性。3
水云间月掌柜·2023-06-07 08:00

ELK 企业级日志分析系统

●ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。
StarkDD1127·2023-06-07 05:33

【存储方式】

存储方式1.顺序存储2.链式存储3.哈希存储4.树形存储5.关系式存储6.分布式存储7.对象存储结论不同的存储方式在不同的场景下拥有各自的优势和适用性。
MarcoAI·2023-06-07 03:51

SpringBoot整合Minio实现文件上传、下载

SpringBoot整合Minio实现文件上传、下载：1，介绍高性能分布式存储文件服务Minio：Minio是基于Go语言编写的对象存储服务，适合于存储大容量非结构化的数据，例如图片、音频、视频、日志文件
【JAVA】玩家·2023-06-07 02:03

hadoop集群基础配置

hadoop1.0mapreduce+HDFShadoop2.0mapreduce+HDFS+YARN加入YARN使得hadoop更加包容，其他的组件也可以在hadoop生态系统中运行hadoop3.0HDFS（分布式存储
February13·2023-04-21 13:11

linux搭建hadoop集群及MapReduce使用

1Hadoop分布式存储介绍2搭建Hadoop集群本次实验将搭建一个含有三节点的hadoop集群。
沐岩:)·2023-04-21 05:17

区块链共识机制怎么解释？

项目名称：DitoChian官网：www.ditochain.org丨白皮书区块链，是一种拥有分布式存储、共识机制、点对点传输、安全加密等特性的集成应用。
RcardoMS·2023-04-20 20:21

数据中心厂商超云加入龙蜥社区，多款服务器完成与龙蜥操作系统适配

超云是由CEC中国电子、云基地产业基金联合注资成立的国家高新技术企业，其专注于云基础架构、云系统、云服务三大产业布局，现已形成了覆盖X86服务器、整机、超融合、分布式存储等产品领域的完善业务体系，是国内专业的数据中心
·2023-04-20 18:25

小白入门---从0开始学习区块链---词汇篇08分布式存储

听说共识机制，分布式存储是区块链核心技术的精华所在。今天学习的内容就是分布式存储。
成长为价值投资者·2023-04-20 07:50

「扫盲」 Elasticsearch

Elasticsearchisareal-time,distributedstorage,search,andanalyticsengineElasticsearch是一个实时的分布式存储、搜索、分析的引擎
chen_chen_chen_·2023-04-19 21:30

【ES】【ElasticSearch】 扫盲

Elasticsearchisareal-time,distributedstorage,search,andanalyticsengineElasticsearch是一个实时的分布式存储、搜索、分析的引擎
狼爷的号·2023-04-19 21:39

从并发到分布式系统和web应用

2.2分布式存储引擎2.3分布式计
Baoshan-Hobbit·2023-04-19 17:31

Rancher入门到精通-2.0 Ceph分布式存储基础

一、初始Ceph1.1了解什么是块存储/对象存储/文件系统存储？直接进入主题，ceph目前提供对象存储（RADOSGW）、块存储RDB以及CephFS文件系统这3种功能。对于这3种功能介绍，分别如下：1.对象存储，也就是通常意义的键值存储，其接口就是简单的GET、PUT、DEL和其他扩展，代表主要有Swift、S3以及Gluster等；2.块存储，这种接口通常以QEMUDriver或者Kernel
瓦哥架构实战·2023-04-19 16:51

Redis---集群环境准备

一、redis集群环境准备1、部署Redis集群的目的：多台服务器一起提供数据存储服务；实现数据的分布式存储；可以实现服务的高可用；可用实现数据自动备份；2、服务器IP地址及端口：主机名IP地址端口redisA192.168.4.616379redisB192.168.4.626379redisC192.168.4.636379redisD192.168.4.646379redisE192.168
Ch An·2023-04-19 14:28

【服务器数据恢复】VSAN节点数据迁移失败的数据恢复案例

VSAN简介：VSAN是以vSphere内核为基础开发，可以扩展使用的分布式存储架构。该架构在vSphere集群主机中安硬盘及闪存构建VSAN存储层，通过存储进行管理与控制，最终形成一个共享存储层。
·2023-04-19 12:08

分布式存储是MetaVerse和NFT的基石

分布式存储是MetaVerse和NFT的基石O网页链接Web3.02021年04月08日15:24数字资产和数据资产，是人类穿越Web2.0的窄门，到达Web3.0和MetaVerse世界辽阔之地的钥匙原文作者
xjzcink·2023-04-19 11:51

浅析HBase架构及读写流程

#博学谷IT学习技术支持#HBase简述HBase是一款Apache下的基于HDFS的分布式NoSQL数据库，主要用于解决HDFS分布式存储不能实现随机读写的瓶颈，适用于大数据量存储、随机读写、字段分布稀疏的场景
hello_java_noob_go·2023-04-19 09:54

Hadoop学习内容概述day02

举例：（1）商品推荐：问题1：大量的订单如何存储问题2：大量的订单如何计算（2）天气预报：问题1：大量的天气数据如何存储问题2：大量的天气数据如何计算大数据的核心问题：（1）数据的存储：分布式文件系统（分布式存储
weixin_30764771·2023-04-19 03:11

Hadoop学习_day01_基础概念

分布式存储海量数据如何计算？分布式计算1.大数据导论1.1大数据概念数据：是事
mango660·2023-04-19 03:39

虚拟化存储和非虚拟化存储

非虚拟化存储：由分布式存储提供的存储空间，没有添加文件系统，性能好，但无法支持高级特性。
爱-古-诗-词·2023-04-19 03:45

屡次中标中国移动的背后，曙光存储做了什么？

值得注意的是，本次是曙光自2020年以来，连续第三次成功入围中国移动数据分布式存储集采：在中国移动2020年—2021年分布式块存储集中采购中斩获1.3亿，分布式文件存储集中采购中斩获1.76亿
科技沸点·2023-04-19 01:18

Day36-集群第一阶段-中小规模集群架构-企业级实时复制备份

对于用户提交到服务器上的普通文件（压缩包、视频、文档等），可采用inotify+rsync或sersync+rsync实时备份方式；对于数据文件还有较复杂的分布式存储工具自身可以实现将数据同时备份成多份
王亚楠ooo·2023-04-18 17:24

leveldb原理和使用

LevelDB是一个基于本地文件的存储引擎，非分布式存储引擎，原理基于BigTable（LSM文件树），无索引机制，存储条目为Key-value。
sizhi_xht·2023-04-18 16:54
上一页 18 19 20 21 22 23 24 25 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他