ceph分布式存储集群搭建

【docker】解决Docker build时 Sending build context to Docker daemon 过大的问题

Daemo的内容过大，如下：SendingbuildcontexttoDockerdaemon218.2MB现象2.并导致生成的dockerimage过大而，Dockerfile中的内容却不多，FROMceph-clientMAINTAINERdevRUNyumcleanall
tiandaochouqin99·2024-02-02 18:55

ETCD数据库入门小案例

etcd和redis的区别etcd是一种分布式存储，更强调的是各个节点之间的通信，同步，确保各个节点上数据和事务的一致性，使得服务发现工作更稳定，本身单节点的写入能力并不强。
福海鑫森·2024-02-02 18:06

TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读

ATC2023Paper分布式元数据论文汇总问题Ceph是一个广泛部署的分布式存储系统，Ceph中的集群级去重设计，由于一些缺点难以在生产环境中使用：（1）去重唯一数据会导致过多的元数据消耗；（2）串行层次化机制对前台
妙BOOK言·2024-02-02 18:26

Kafka集群搭建

Kafka集群是把状态保存在Zookeeper中的，首先要搭建Zookeeper集群。本期是分享Kafka，若想看zookeeper搭建请看：zookeeper搭建（单机模式和集群模式)-CSDN博客1.下载压缩包链接：https://pan.baidu.com/s/1zxJRd13rgHfJexP-Jbl36g提取码：lcmi当然，您也可以从官网下载2.解压tar-zxvf/opt/softwa
莫噶·2024-02-02 14:30

Kafka 集群搭建

1、前提条件1、部署Kafka集群搭建需要服务器至少3台，奇数台2、Kafka的安装需要java环境，jdk1.83、Kafka安装包版本：kafka_2.11-0.10.0.1.tar.gz4、假设3
那小子、真烦·2024-02-02 14:30

kafka集群搭建

本文将记录使用kafka镜像，分别在两种场景下搭建3节点集群：1.在一台机器上使用容器方式安装kafka集群；2.在三台机器上使用容器方式安装kafka集群。此次使用的是wurstmeister的，下载量是比较大的。使用下面命令下载：dockerpullwurstmeister/kafka:2.13-2.8.1先介绍第一种方式：1.在宿主机分别建立3个kafka容器ENV参数文件，改文件配置容器启
topswim·2024-02-02 14:30

Hadoop原理

MapReduce即Hadoop内提供的进行分布式计算的组件分布式资源调度-YARN即Hadoop内提供的进行分布式资源调度的组件Hadoop原理-HDFS相关1.HDFS原理--分布式介绍问题1:为什么要用分布式存储
我走之後·2024-02-02 14:25

第96讲：MySQL高可用集群MHA的核心概念以及集群搭建

文章目录1.MHA高可用数据库集群的核心概念1.1.主从复制架构的演变1.2.MHA简介以及架构1.3.MHA的软件结构1.4.MHAManager组件的启动过程1.5.MHA高可用集群的原理2.搭建MHA高可用数据库集群2.1.环境架构简介2.2.搭建基于GTID的主从复制集群2.2.1.在三台服务器中分别搭建MySQL实例2.2.2.配置基于GTID的主从复制集群2.2.3.查看集群各节点的状
Jiangxl~·2024-02-02 13:43

redis 6.x集群搭建

redis6集群搭建安装文件下载redis-6.2.6.tar.gz编译tar-zxvfredis-6.2.6.tar.gzcdredis-6.2.6/makeMALLOC=libcmakeinstallPREFIX
tmaczt·2024-02-02 12:55

Logstash 7.7.1版本安装&系统梳理

前言上一篇文章介绍了《ElasticSearch7.7.1集群搭建&Kibana安装》，今天说一下Logstash的安卓和配置；Logstash是一个开源的数据收集引擎，具有实时管道功能。
卢卡上学·2024-02-02 11:28

关于Redis Cluster集群运维与核心原理

关于RedisCluster集群运维与核心原理1、Redis集群方案比较哨兵模式高可用集群模式2、Redis高可用集群搭建3、Java操作redis集群1、Redis客户端Jedis操作2、集群的SpringBoot
秋天的一亩三分地·2024-02-02 10:00

Ceph分布式集群部署01

Ceph分布式集群部署011.Ceph环境准备主机名ip地址及磁盘部署组件node01192.168.1.181（三块硬盘）Mon、mgr、rgs、osdnode02192.168.1.182（三块硬盘
superman超哥·2024-02-02 09:02

HBase详细安装指南

HBase–HadoopDatabase，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在
嘎嘎嘎啊哈·2024-02-02 06:59

redis集群搭建

说明：创建6个redis节点，这里为了方便演示，直接使用了docker容器。1.创建6个node节点创建6个文件目录mkdir/wjmao/redis-17001/mkdir/wjmao/redis-17002/mkdir/wjmao/redis-17003/mkdir/wjmao/redis-17004/mkdir/wjmao/redis-17005/mkdir/wjmao/redis-1700
星迹m·2024-02-02 05:38

rabbitmq 集群搭建方法

RabbitMQ集群搭建方法这里展示的是多机集群的部署，如果机器受限，可以选择单机集群部署，详细可以参考《RabbitMQ单机多实例配置》。
SkTj·2024-02-02 01:31

ZK（ZooKeeper）分布式锁实现

不知道如何搭建的，可以看我之前ZooKeeper集群搭建：Zookeeper集群部署的那
牧小农·2024-02-02 01:52

1 初识Ceph

Ceph是加州大学SantaCruz分校的SageWeil专为博士论文设计的分布式文件系统，支持对象存储、块存储和文件存储。从2004年新建第一个文件夹至今，经历了多次迭代，目前已是分布式存储的首选。
DaemonXiao·2024-02-01 21:21

Zookeeper单机版/伪集群搭建

在同一台机器(即伪集群)上，启动三个zookeeper，三个分别使用不同的配置文件Zookeeper的单机版安装从官网上下载zookeeper的安装包1准备:安装之前请自行安装jdk(如java8)2使用wget命令或者xshelleditplus工具远程上传tar包到Linux(1)使用wget命令下载zookeeper安装包到linux环境下命令:wgethttp://archive.apac
我不是吴彦祖i·2024-02-01 20:43

zookeeper搭建（单机模式和集群模式)

目录单机模式：集群搭建：单机模式：1.新建data和logs目录(data目录用来存放数据库快照，logs目录用来存放日志文件)[root@masterdev]#mkdir-p/home/apps/zookeeper
莫噶·2024-02-01 20:11

面对垫后的Filecoin，SIA需砥砺前行

传统数据服务商即云存储商由于中心化特性，需花费大量成本搭建基础服务平台，在数据交易中自然增加了交易成本，且随着中心化云服务商屡屡爆出数据泄露事件，表明在安全上无绝对保障，因此分布式存储在市场上蔓延。
老猫___·2024-02-01 20:02

2022-06-21 七十二更 元宇宙创新技术的发展方向

首先是区块链，包含以下几个⽅⾯，第⼀是分布式的计算，也叫分布式的账本，已经⾮常成熟；第⼆是分布式的存储，分布式存储⽬前来说还是⾮常基础的，还没有到⾮常⾼效率、可靠和⼤规模的程度，潜在需求很大；第三个就是分布式的
随光和尘·2024-02-01 17:14

经典论文研读：《Bigtable: A Distributed Storage System for Structured Data》

一概述BigTable是以大神JeffreyDean为首的Google团队在2006年公开的分布式存储系统，是Google“三驾马车”论文中（GFS、MapReduce、BigTable）中最后公开的。
WanderingScorpion·2024-02-01 12:02

Bigtable: A Distributed Storage System for Structured Data_中文翻译

作为分布式数据库的经典文献，个人在学习的过程中参考其它译文进行翻译：参考译文：https://blog.csdn.net/u010359965/article/details/49795133）摘要Bigtable是一个分布式存储系统
冷冽的火花·2024-02-01 12:31

ceph 缓冲池实例(SSD做缓冲，sata做后端)

image.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.png
SkTj·2024-02-01 08:44

私有云+云原生能力模型

公有云和私有云平台的使用和管理，如AWS、Azure、OpenStack等数据库备份和恢复的方法和工具，保证数据的安全性和可恢复性私有云技能树虚拟化技术KVMESXI软件定义存储（SDS）软件定义存储、NAS、ceph
野心与梦·2024-02-01 06:45

Hadoop 大数据技术原理与应用

Hadoop大数据技术原理与应用大数据概述定义特征大量，多样，高速，价值研究意义应用场景医疗，金融，零售Hadoop概述历史优势扩容能力强，成本低，高效率，可靠性，高容错Hadoop生态分布式存储系统（
kk8_·2024-02-01 04:33

详解SpringCloud微服务技术栈：深入ElasticSearch（4）——ES集群

）——数据同步（酒店管理项目）订阅专栏：微服务技术全家桶希望文章对你们有所帮助ElasticSearch本身就是分布式的，在这里将要讨论如何用3个docker容器来模拟实现ElasticSearch的集群搭建
布布要成为最负责的男人·2024-02-01 03:42

SpringBoot中集成Minio高性能分布式存储文件服务入门

区别于分布式存储系统，minio的特色在于简单、轻量级，对开发者
霸道流氓气质·2024-01-31 16:17

spdk技术原理简介和实践经验

一、导读与机械硬盘相比，NVMe-ssd在性能、功耗和密度上都有巨大的优势，并且随着固态存储介质的高速发展，其价格也在大幅下降，这些优势使得NVMe-ssd在分布式存储中使用越来越广泛。
大隐隐于野·2024-01-31 16:14

华为助力区块链互操作标准化 获评工业和信息化部团体标准应用示范项目——华为云BCS的经验与启示

区块链作为一种分布式账本技术，具多方共识、分布式存储、难以篡改等特点，在金融科技、政务民生、司法存证、供应链协同、税务发票、版权保护等领域展现出广阔应用前景。
华为云PaaS服务小智·2024-01-31 15:14

zookeeper curator 伪集群 - 安装 -配置 - 秒懂

zookeeper的伪装集群搭建疯狂创客圈Java分布式聊天室【亿级流量】实战系列之-22【博客园总入口】文章目录zookeeper的伪装集群搭建写在前面1.1.
40岁资深老架构师尼恩·2024-01-31 09:19

Elasticsearch Windows版安装配置

Lucene的调用比较复杂，所以Elasticsearch就再次封装了一层，并且提供了分布式存储等一些比较高级的功能。基
liaozk_c·2024-01-31 08:07

【大数据入门核心技术-Tez】（三）Tez与Hive整合

一、准备工作1、Hadoop和Hive安装【大数据入门核心技术-Hadoop】（五）Hadoop3.2.1非高可用集群搭建【大数据入门核心技术-Hadoop】（六）Hadoop3.2.1高可用集群搭建【
forest_long·2024-01-31 08:06

Docker进阶篇-reids集群

一、集群存储算法分布式存储的常见算法：哈希取余分区一致性哈希算法分区哈希槽分区1、哈希取余分区描述：每次读写操作都是根据公式：Hash(key)%N（其中，key是要存入Redis的键名，N是Redis
陪我养猪吧·2024-01-31 07:53

分布式虚拟文件系统，如何实现多种存储系统的融合

为了给不同的计算框架提供存储服务，存储的服务类型也是很多，常见的如AWS的S3存储、NFS文件系统和Ceph分布式系统等。
数据存储张·2024-01-31 07:20

构建高效可靠的消息队列系统：设计与实现

目录一、引言二、设计目标2.1、高可用性1.集群搭建1.1DockerCompose配置示例2.容错和恢复2.1异常检测与自动故障迁移2.2SpringBoot代码示例3.心跳检测4.优雅关闭2.2、持久性
喔的 喔的嘛呀·2024-01-31 07:31

大数据 ---分布式并行计算框架MapReduce

大数据为什快横向扩展移动程序到数据端多个数据副本分布式存储（减小磁盘IO的瓶颈）分布
谪仙逍遥·2024-01-31 06:21

Zookeeper实现分布式队列

Zookeeper不适合大数据量存储，官方并不推荐作为队列使用，但由于实现简单，集群搭建较为便利，因此在一些吞吐量不高的小型系统中
山鸟与鱼！·2024-01-31 05:33

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2024-01-31 05:41

3台服务器+StarVCenter，搭建“超融合云平台”-完美体验-跑100台虚拟机

这种模式不需要专用的存储设备，它采用分布式存储软件，利用每台计算节点上的本地硬盘构成存储集群。这样计算节点即有高可用的计算能力，又有高可用的存储能力。
wtyuiohxvm·2024-01-31 04:49

什么叫超融合基础架构？

超融合基础架构是一种软件定义的IT基础架构，包括虚拟化计算，虚拟化存储（一般为分布式存储）、虚拟化
greatrooster·2024-01-31 04:17

深信服超融合

aSAN作为超融合基础架构（HCI）的重要组成部分，使用分布式存储技术为上层应用提供了高性能、高可靠的存储服务，在aCloud不同演进版本中合
轻云望月笑容常挂·2024-01-31 04:47

超融合架构介绍

超融合架构，其实就是“服务器虚拟化+分布式存储”架构，即超融合技术包含了服务器虚拟化技术和分布式存储技术。
头大的一批·2024-01-31 04:16

软硬兼施：亚信安慧AntDB创造更多可能性

它采用了先进的分布式架构，能够充分发挥多台服务器的协同作用，实现数据的分布式存储和处理。与此同时，亚信安慧AntDB还具备灵活的扩展性，可以根据需求进
亚信安慧AntDB数据库·2024-01-31 04:01

mongodb java spring_MongoDB和Java（4）：Spring Data整合MongoDB（XML配置）

最近花了一些时间学习了下MongoDB数据库，感觉还是比较全面系统的，涉及了软件安装、客户端操作、安全认证、副本集和分布式集群搭建，以及使用SpringData连接MongoDB进行数据操作，收获很大。
務酒者·2024-01-31 02:03

三、ElasticSearch集群搭建实战

本篇ES集群搭建主要是在LinuxVM上，未使用Docker方式,ES版本为7.10,选择7.10版本原因可以看往期文章介绍。
南天一梦N·2024-01-31 02:29

ElasticSearch 7.4集群部署 启用x-pack验证 Kibana7.4用户管理

一.es7.4集群搭建1.1下载es以及修改相应配置1.1.1节点规划内网ip节点192.168.18.126node-1192.168.18.125node-2192.168.18.133node-31.1.2
Cocktail_py·2024-01-31 02:28

四、ES集群安全策略设置 X-pack

本文主要是结合ES集群搭建时使用，并且适用于ES7.x以上版本背景及安全策略方案对比ES7.x以下版本默认几乎没有任何安全策略，如果集群IP、端口被暴露，在可访问的情况下任何用户都可以对索引进行管理以及数据的增删改查等
南天一梦N·2024-01-31 02:57

kafka集群搭建需要做的事情

首先，虚拟机克隆好之后的步骤如下：1.修改IP、主机名，关闭防火墙；（reboot重启）2.在/etc/hosts文件中进行IP与主机名的映射配置，集群中每天都记得配置；3.安装JDK并进行分发；进入/etc/profile.d/目录创建my_env.sh文件并在其中配置JAVA_HOME并进行分发；（分发jdk前先卸载自带的jdk）；4.安装zookeeper并进行分发，具体为：首先，在zook
薛薛哦·2024-01-30 21:24

你知道隐私保护在Web3.0中的重要性吗？

敏感的用户数据可以从任何用户平台安全地共享到云端或分布式存储，并通过代理重加密或属性加密自动授予对该数据的访问。在这个过程中，有必要确保数据的可用性。
77920f849a64·2024-01-30 18:45
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他