分布式存储集群服务第4页

GZ036 区块链技术应用赛项赛题第3套

作为数字经济时代的前沿产物，区块链以其分布式存储、不可伪造和防篡改、透明可信、高可靠性和可追溯等优势，区块

嘿哈小将·2024-01-20 11:42

【Redis】三种集群模式（主从复制、哨兵模式、Cluster）

cluster模式是redis官方提供的集群模式，使用了Sharding技术，不仅实现了高可用、读写分离、也实现了真正的分布式存储。一、主从复制Redis的主从复制是一

hope笔记·2024-01-20 10:34

大数据导论（2）---大数据与云计算、物联网、人工智能

2.云计算是一种全新的技术，包含了虚拟化、分布式存储、分布式计

冒冒菜菜·2024-01-20 07:49

亚信安慧AntDB数据库：揭开性能与效率提升的奥秘

它采用了先进的数据库分片技术，使得数据在多个节点间进行分布式存储和处理，从而大幅提升数据库的性能和吞吐量。AntDB数据库的分片技术可以根据数据的特点和访问模式进行灵活

亚信安慧AntDB数据库·2024-01-20 01:31

ELK日志分析

ElasticSearch是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。

lelelele798·2024-01-19 21:12

华为云计算IE面试笔记-fusionstorage相对于传统集中式存储的优势

fusionstorage是华为研发的一款分布式存储软件，可以将X86架构的服务器组成一个存储池，向上提供统一的存储能力。

魔仙堡的仙女·2024-01-19 20:19

K8s调试积累

文章目录一、K8S集群服务访问失败？二、K8S集群服务访问失败？三、K8S集群服务暴露失败？四、外网无法访问K8S集群提供的服务？五、pod状态为ErrImagePull？

百慕卿君·2024-01-19 10:05

【分布式技术】分布式存储ceph之RBD块存储部署

目录创建Ceph块存储系统RBD接口服务端操作1、创建一个名为rbd-demo的专门用于RBD的存储池2、将存储池转换为RBD模式3、初始化存储池4、创建镜像5、在管理节点创建并授权一个用户可访问指定的RBD存储池6、修改RBD镜像特性，CentOS7默认情况下只支持layering和striping特性，需要将其它的特性关闭7、将用户的keyring文件和ceph.conf文件发送到客户端的/e

liu_xueyin·2024-01-19 04:17

【分布式技术】分布式存储ceph之RGW接口

目录1、对象存储概念2、创建RGW接口//在管理节点创建一个RGW守护进程#创建成功后默认情况下会自动创建一系列用于RGW的存储池#默认情况下RGW监听7480号端口//开启http+https，更改监听端口#更改监听端口//创建RadosGW账户客户端测试OSD故障模拟与恢复3、把原来坏掉的osd修复后重新加入集群方法二1、对象存储概念对象存储（objectstorage）是非结构数据的存储方法

liu_xueyin·2024-01-19 04:17

存储系统——Ceph

目录存储基础单机存储设备单机存储的问题分布式存储（软件定义的存储SDS）分布式存储的类型Ceph概述Ceph优势Ceph架构RADOS基础存储系统LIBRADOS基础库高层应用接口应用层Ceph核心组件

袁慕求玲·2024-01-19 04:17

【分布式技术】分布式存储ceph之MDS接口详解

目录创建CephFS文件系统MDS接口服务端操作1）在管理节点创建mds服务2）查看各个节点的mds服务3）创建存储池，启用ceph文件系统4）查看mds状态，一个up，其余两个待命，目前的工作的是node01上的mds服务5）创建用户客户端1）客户端要在public网络内（我的public网络是192.168.20.0/24网段）在客户端安装ceph软件包2）在客户端创建工作目录3）在ceph的

liu_xueyin·2024-01-19 04:46

[ceph] ceph之分布式存储

分布式存储的类型●块存储（例如硬盘，一般是一个存储被一个服务器挂载使用，适用于容器或虚拟机存储卷分配、日志存储、文件存储）就是一个裸设备，用于提供没有被组织过的存储空间，底层以分块的方式来存储数据●文件存储

为什么老是名字被占用·2024-01-19 04:15

【大数据】HBase集群安装部署

一、前提条件服务器配置好，搭建大数据集群服务器看这篇：搭建学习使用的大数据集群环境：windows使用vmware安装三台虚拟机，配置好网络环境安装好对应版本的hadoop集群，并启动安装好对应版本的zookeeper

橙子园·2024-01-19 00:51

Ceph分布式存储（1）

目录一.ceph分布式存储Ceph架构（自上往下）OSD的存储引擎：Ceph的存储过程：二.基于ceph-deploy部署Ceph集群20-40节点上添加3块硬盘，一个网卡：10节点为admin，20-

伍dLu·2024-01-18 21:49

Ceph分布式存储（2）

目录一.资源池Pool管理.查看集群Pool信息:创建一个Pool资源池：cephosdpoolcreatemypool6464查看资源池副本的数量:查看PG和PGP数量:修改pg_num和pgp_num的数量为128:修改Pool副本数量为2:修改默认副本数为2:再次创建池看下数量：查看所有池名：删除Pool资源池：二.创建CephFS文件系统MDS接口创建存储池，启用ceph文件系统：创建用户

伍dLu·2024-01-18 21:49

15.kubernetes部署Longhorn

Longhorn简介Longhorn是一个轻量级且功能强大的云原生Kubernetes分布式存储平台，可以在任意基础设施上运行。

CodingDemo·2024-01-18 14:24

HBASE学习一：原理架构详解

你可以认为HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。

Studying！！！·2024-01-18 08:34

ceph分布式存储学习指南 RBD部署

对象、块、文件image.pngRBD方式访问image.png所有hosts更改image.png在客户端安装image.pngimage.pngimage.pngimage.pngimage.png调整RBD容量image.pngimage.pngRBD快照功能image.pngimage.pngimage.pngimage.pngimage.pngimage.png只有格式2的镜像支持写时复

SkTj·2024-01-18 06:49

【SpringBoot框架篇】24.集成FastDFS实现文件的分布式存储

文章目录1.简介2.添加配置2.1.在maven的pom.xml中添加fastDfs依赖包2.2.修改应用配置文件3.添加工具类4.测试接口编写5.测试5.1.上传图片5.2.下载图片5.3.删除图片6.项目配套代码1.简介如果应用是在集群部署,如果文件存储需要共享要通过linux的nfs服务来实现共享，或者把文件存储在分布式文件存储系统里面,例如FastDFS,minio,本章讲解集成FastD

皓亮君·2024-01-18 03:10

Zabbix补充扩展

3.部署zabbix代理服务器下载zabbix-proxy以及数据库启动zabbix-proxy及添加hosts解析在Web页面配置agent代理配置agent使用proxy4.部署Zabbix高可用集群服务端配置

Ybaocheng·2024-01-18 00:40

Ceph分布式文件系统

目录1.存储基础单机DAS存储设备DASNASSAN单机存储的问题分布式存储分布式存储的类型2.Ceph简介Ceph优势Ceph架构Ceph组件OSD(ceph-osd)Monitor(ceph-mon

Ybaocheng·2024-01-18 00:39

ceph数据分布式存储

单机存储的问题存储处理能力不足传统的IDE的IO值是100次/秒，SATA固态磁盘500次/秒，固态硬盘达到2000-4000次/秒。即使磁盘的IO能力再大数十倍，也不够抗住网站访问高峰期数十万、数百万甚至上亿用户的同时访问，这同时还要受到主机网络IO能力的限制。存储空间能力不足单块磁盘的容量再大，也无法满足用户的正常访问所需的数据容量限制。单点故障问题单机存储数据存在单点故障问题商业存储解决方案

沈阳最速传说と疾走の猛虎！贵物刀一郎です·2024-01-17 23:37

Raft集群算法

Raft与ZAB算法就是为了解决分布式存储一致性问题；二、Raft中的角色Raft集群中包含若干个节点，每个节点任务不同，正常节点只存在leader和follwer；1、Leader（领导者）：负责日志的同步管理

匠道·2024-01-17 11:53

为什么选择阿里云产品？

为什么现在企业都喜欢使用阿里云产品呢，今天我就围绕阿里云产品的优势讲一讲：一.超大的集群规模阿里云计算集群具有能够适应海量计算的服务器规模，最大的集群服务器数量达到5000台，并可以提供多集群的计算资源

tomcat145·2024-01-17 08:02

Redis面试题13

Redis如何实现分布式存储？它的原

CrazyMax_zh·2024-01-16 23:12

Ceph的介绍与部署

是直接接到计算机的主板总线上去的存储）NAS（网络附加存储，是通过网络附加到当前主机文件系统之上的存储）SAN（存储区域网络）单机存储的问题存储处理能力不足存储空间能力不足单点故障问题商业存储解决方案分布式存储

GnaW1nT·2024-01-16 19:58

Cuda与Torch配置（For 集群服务器）超详细步骤

每次配置模型环境，无论是在windows，linux，集群服务器上都会在这里卡一段，为了未来配置方便，记录下配置注意事项配置cuda和torch主要有几个要点，分别是：显卡与驱动（NIVIADAdriver

拉普拉斯之妖·2024-01-16 08:45

集群服务器GPU深度模型训练笔记（PBS作用调度系统）

拉普拉斯之妖·2024-01-16 08:04

mac上搭建 hadoop 伪集群

它主要由以下几个部分组成：HDFS(HadoopDistributedFileSystem)：HDFS是Hadoop的分布式文件系统，具有较高的读写速度，很好的容错性和可伸缩性，为海量的数据提供了分布式存储

寂夜了无痕·2024-01-16 06:30

运维良药，K8S日常故障处理集锦

问题1：K8S集群服务访问失败？原因分析：证书不能被识别，其原因为：自定义证书，过期等。解决方法：更新证书即可。问题2：K8S集群服务访问失败？

old_GGB·2024-01-16 06:24

【华为云·云筑2020】数据库考卷答案

forMySQL)的说法正确的是（D）GaussDB(forMySQL)能最大支持64T的存储GaussDB(forMySQL)性能是开源MySQL的4倍GaussDB(forMySQL)使用的存储是分布式存储

若尘___·2024-01-16 01:46

任务3：配置SSH免密码连接--自用

任务的内容为在各个节点配置SSH，首先在所有集群服务器节点上生成密钥对，然后再将公钥合并

Dija-bl·2024-01-15 22:21

【架构设计】单体软件分布式化思考

这种多个副本共同提供服务的形式叫做集群服务（注意，不是分布式服务）。客户端分布式

小子宝丁·2024-01-15 15:07

最全对象存储（云盘）挂载本地主机或服务器

1.对象存储介绍1.1分类分布式存储的应用场景相对于其存储接口，现在流行分为三种:块存储:这种接口通常以QEMUDriver或者KernelModule的方式存在，这种接口需要实现Linux的BlockDevice

tuoluzhe8521·2024-01-14 05:32

OKEx徐坤：Filecoin的机遇与风险

近期IPFS/Filecoin成为行业的热点，我也受邀在Odaily星球日报举办的「星际崛起——IPFS技术与分布式存储生态云峰会」进行了主题分享，内容涵盖了去中心化存储市场趋势、IPFS/Filecoin

徐坤Alysa·2024-01-14 04:49

ZooKeeper 实战(一) 超详细的单机与集群部署教程（MacOS）

（MacOS）0.ZooKeeper简介1.单机部署1.1.ZooKeeper下载安装1.2.修改配置文件1.3.启动服务端1.4.启动客户端2.集群部署2.1.集群准备zk1zk2zk32.2.启动集群服务器

QQ_AHAO·2024-01-13 12:37

微服务治理：可视化 Kubernetes 集群服务依赖关系的工具

在微服务架构中，理解服务之间的依赖关系至关重要。依赖关系映射工具可以帮助您在Kubernetes集群中可视化服务之间的调用和交互，从而深入了解整个架构的运行状况。以下是一些最流行的选项：1.服务网格Istio:提供全面的服务网格，包含内置的依赖关系可视化功能。以可视方式呈现服务间的流量，包括调用、错误和延迟。Linkerd:另一个流行的服务网格，具有依赖关系可视化功能。允许您查看服务依赖关系和拓扑

surfirst·2024-01-13 10:40

11张手绘图：搞定分布式系统容错架构

到底啥是分布式存储？那啥又是分布式存储系统呢？天哪！某台机器宕机了咋办？Master节点如何感知到数据副本消失？如何复制副本保持足够副本数量删除多余副本又该怎么做呢？

石杉的架构笔记·2024-01-13 10:32

大数据系列 | CDH6.3.2（Cloudera Distribution Hadoop）部署、原理和使用介绍

ClouderaDistributionHadoop）部署、原理和使用介绍1.大数据技术生态中Hadoop、Hive、Spark的关系介绍2.CDN（ClouderaDistributionHadoop）集群部署2.1.集群服务器节点安装部署

降世神童·2024-01-13 10:50

区块链是如何存数据的？

我们都知道，区块链技术是一种去中心化的分布式存储方式，那么区块链如何存储和记录数据呢？————————个人技术公众号：解决方案工程师欢迎同领域的朋友关注、相互交流。

公众号：链上物联网·2024-01-13 07:58

C++——STL标准模板库——容器详解——list

list是一种分布式存储的线性表，每个节点分为数据域和指针域，其中指针域中包含一个指向前驱节点的指针和一个指向后续节点的指针，基本模型如下：（二）特性1、双向链表：每个元素都有一个前驱和一个后继，这种结构允许在链表的任何位置实现快速的插入和删除而不影响其他元素

诗酒伴年华·2024-01-13 05:23

基于鲲鹏云服务迁移技术和实践（鲲鹏生态）

鲲鹏计算产业生态产业链芯片能力积累到芯片技术创新芯片架构创新华为云鲲鹏云服务典型应用场景：大数据：分布式存储：把一个文件分开放，不同文件，不同硬盘，不同PC数据库：分布

努力的小陈、·2024-01-12 20:46

这次在搞不定 Redis 集群搭建！你来找我~~

Redis集群简介下载&安装Redis搭建Redis集群手动方式搭建自动方式搭Redis集群简介RedisCluster即Redis集群，是Redis官方在3.0版本推出的一套分布式存储方案。

码农开花·2024-01-12 20:42

NVMe-oF 1.1规范：多路径、非对称命名空间和NVMe/TCP

提到NVMeoverFabric，我就会想到它的几种应用场景：1、存储阵列到主机的网络连接（替代FC、iSCSI等）；2、服务器、本地NVMe存储解耦（跨机箱/JBOF），SSD存储资源池化共享；3、分布式存储

大隐隐于野·2024-01-12 18:07

Kafka在车联网中应用浅谈

数据分片与分布式存储：Kafka可以将车辆产生的数据分片存储，实现分布式存储和数据备份。这种设计可以有效地应对数据量大的情况，提高数据存储和处理的效率。消息队列与

MarkHD·2024-01-12 14:06

联手英特尔，释放星飞分布式全闪存储潜能

近日，英特尔官网发布了与XSKY星辰天合联手打造的解决方案，即XSKY的新一代全闪分布式存储系统XINFINI，该存储系统采用英特尔QAT加速数据压缩/解压缩，从而大幅度提升存储系统性能。

XSKY星辰天合·2024-01-12 09:15

集群服务器定时任务重复执行的解决方案

集群服务器定时任务重复执行的解决方案服务器采用了负载均衡，有两台服务器，部署的代码一样，所以里面的定时任务在某一时间会被同时执行，这就导致了很多其他意外的发生，想要解决的问题基本就三个：单点执行，故障转移

caodongfang126·2024-01-12 03:47

布隆过滤器应用场景优势不足

分布式系统：在分布式系统中，可以用于快速判断某个数据在分布式存储中的存在与否，减少网络传输和存储访问。爬虫系统：用于判断一个URL是否已经被爬取

KevinAha·2024-01-11 22:36

LVS、nginx反向代理

LVS的两个组件ipvadm：用户空间的命令行工具，规则创建和管理，用于管理集群服务及RealServeripvs：工作于内核空间的ne

懒人笔记—001·2024-01-11 16:42

E01 GBase 8a MPP Cluster V95 安装和卸载

在集群所有节点上创建安装目录并授权3、安装包解压缩4、配置安装环境5、修改主节点的安装配置文件（demo.options）6、执行安装脚本7、集群状态查看8、申请授权9、导入和检查授权10、在集群所有节点上启动全部集群服务

wiserhowe·2024-01-11 14:54

推荐频道

分布式存储集群服务