ceph分布式存储集群搭建

03-03 elasticsearch

入门篇使用场景海量存储：支持分布式存储实时搜索：lucene倒排索引，海量数据下近乎实时搜索a.日志分析，es+logstash+kibanab.Github代码数据分析：支持数据分析及处理基本功能分布式的搜索引擎和数据分析引擎全文检索
nan得糊涂·2024-02-13 19:26

hadoop 分布式集群安装与原理

对很多人来说，学习大数据都止步于集群搭建，即使是那些工作过很多年的JAVA程序员也不例外，我们分享一套能让您轻松完成集群搭建的方法，包括Hadoop的源码编译、企业级环境安装与配置和常用大数据组件的基本原理
海牛大数据_青牛老师·2024-02-13 12:44

dockerer-compose搭建单机clickhouse集群，工作中最新亲测能用，超详细

公司这几天让我搭建clickhouse集群，这一周我在公司的角色更像是运维人员搭建集群和服务，一个字干,另外kafka搭建点击这篇，zookeeper集群搭建点击这篇。
迷梦星河·2024-02-13 11:53

Kubernetes深度实践（三）

先说一下存储的选择，一般的话有一个分布式存储+Localstorage基本就够了。
哦呵呵_3579·2024-02-13 05:07

Zookeeper学习系列【二】Zookeeper 集群章节之集群搭建

本章内容主要讲的是集群搭建相关的知识。本篇的内容主要包含以下几点：Zookeeper运行模式Zookeeper搭建一、Zookeeper运行模式Zookeeper有两种运行模式，单点模式和集群模式。
Richard_易·2024-02-13 04:20

DL4J中文文档/DataVec/读取器

读取器实现对于复杂的文件类型或分布式存储机制是有用的。读取器返回记录记录中每一列的Writable类。这些类用于将每个记录转换为张量/NDArray格式。使用每个读取器实现都扩展了BaseRec
hello风一样的男子·2024-02-12 22:18

Flink第二篇：集群搭建

Flink集群搭建.Flink可以选择的部署方式有：Local、Standalone（资源利用率低）、Yarn、Mesos、Docker、Kubernetes、AWS。
菜鸟Coders·2024-02-12 17:22

Glusterfs分布式存储

目录一、简介二、特点1、扩展性和高性能2、高可用性3、全局统一命名空间4、弹性卷管理5、基于标准协议三、专业术语四、GlusterFS构成五、GlusterFS的工作流程1、工作流程2、弹性HASH算法六、GlusterFS常用分布式简介1、分布式卷2、条带卷（Stripevolume）3、复制卷（Replicavolume）4、分布式条带卷（DistributeStripevolume）5、分布
忙碌滴比特流·2024-02-12 14:55

如何搭建glusterfs分布式存储系统

目录前言什么是分布式存储分布式存储的优点本章重点glusterfs相关术语glusterfs的逻辑卷类型准备6台测试服务器storage服务器安装glusterfs软件并启动分布式集群的结构配置可信池pool
MssGuo·2024-02-12 14:55

「精心整理」Ceph搭建硬件建议详解

Ceph是专为在商品硬件上运行而设计的，这使得构建和维护超大规模的数据集群在经济上是可行的。当规划出你的集群硬件时，你需要平衡一些考虑因素，包括故障域和潜在的性能问题。
Lin_b0c9·2024-02-12 12:41

第三节 zookeeper基础应用与实战2

Zookeeper权限控制3.1zk权限控制介绍3.2Scheme权限模式3.3ID授权对象3.4Permission权限类型3.5在控制台实现操作3.6Curator演示ACL的使用4.Zookeeper集群搭建
做个专注的工程师·2024-02-12 09:58

Hadoop-MapReduce-Yarn集群搭建

搭建的部署节点图如下：hdfs和yarn是两个不同概念，两者搭建不会冲突。注意一点是DataNode和NodeManager必须要部署在同一台机器，它们的比例是1比1关系的。否则DataNode只能存储，不能做相应的计算处理。通过官网搭建：hadoop.apache.org/docs/r2.6.5/hadoop-project-dist/hadoop-common/SingleCluster.ht
qq_2368521029·2024-02-12 07:44

mysql数据库的pxc工具_CentOS7 下 MySQL 数据库 PXC 集群部署操作指导

背景最近在进行MySQL的PXC集群搭建使用和研究前期已完成了一篇记录文章：【CentOS7下MySQL之PXC集群部署【Docker+多机多节点】】但是，毕竟不是所有人都熟悉docker而作为开发人员
郑默默·2024-02-12 00:25

陪标材料制作

（1）陪标时会以不同于主投方的产品与应标，如此次陪标是用Lenvon的分布式存储，超融合服务器，交换
吴亮16·2024-02-11 20:15

Ceph入门到精通-sysctl参数优化

Ceph是一种开源的、高度可扩展的分布式存储系统，它可以在商业硬件上提供对象、块和文件系统的存储。
·2024-02-11 18:09

ClickHouse集群搭建及ODBC配置

ClickHouse是一种列式数据库管理系统，适用于在线分析处理(OLAP)场景。以下是搭建ClickHouse集群及配置ODBC的步骤。首先是ClickHouse集群的搭建。假设你有三台服务器，IP分别为192.168.1.1，192.168.1.2，192.168.1.3。在每台服务器上安装ClickHouse，可通过APT或YUM进行安装，具体命令为：sudoapt-getinstallcl
·2024-02-11 18:02

SpringCloud微服务实战——搭建企业级开发框架（三十六）：使用Spring Cloud Stream实现消息中间件功能

在进行框架设计的时候，我们考虑是否能够和之前实现的短信发送、分布式存储等功能一样，抽象统一消息接口，屏蔽底层实现，在用到消息队列时，使用统一的接口代码，然后在根
·2024-02-11 17:42

Ceph入门到精通-sysctl参数优化

Ceph是一种开源的、高度可扩展的分布式存储系统，它可以在商业硬件上提供对象、块和文件系统的存储。
·2024-02-11 17:41

k8s 集群搭建 1.18.0

主从结构master：10.19.37.76workder：10.19.37.7510.19.37.77详细步骤所有操作都在root用户下运行。1.初始准备确保集群间机器互相ping通关闭selinux：sed-i's/enforcing/disabled/'/etc/selinux/configsetenforce0关闭swap：swapoff-a#临时vim/etc/fstab#永久2.安装d
dyyy_li·2024-02-11 11:04

ClickHouse的特征,性能,优点,缺点,应用场景以及什么是OLAP,Clickhouse的相关优化

1.什么是clickhouse:提供了sql结构化的查询语言;clickhouse是一款分布式数据库;clickhouse可以存储海量数据;因为clickhouse是分布式存储海量数据,所以解决了高并发的问题
晓晓很可爱·2024-02-11 08:15

分布式存储系统学习笔记(三)—分布式键值系统(1)—Amazon Dynamo

1.概述Dynamo以很简单的键值方式存储数据，不支持复杂的查询。Dynamo中存储的是数据值的原始形式，不解析数据的具体内容。Dynamo主要用于Amazon购物车和S3云存储服务。Dynamo通过组合P2P的各种技术打造了线上可运行的分布式键值系统，下表列出了Dynamo设计时面临的问题及最终采取的解决方案：2.数据分布Dynamo采用一致性哈希将数据分布到多个存储节点中(博文：一天不学习我浑
不会算命的赵半仙·2024-02-11 02:34

MFS 分布式存储

MFS分布式存储MooseFS是一个具备冗余容错功能的分布式网络文件系统，它将数据分别存放在多个物理服务器或单独磁盘或分区上，确保一份数据有多个副本，然而对于访问MFS的客户端或者用户来说，整个分布式文件系统集群看起来就像一个资源一样
中门对狙·2024-02-11 01:30

ubuntu 22.04部署quincy版ceph

ceph集群安装配置有多种方式，下方cephadm方式是借助容器部署。cephadm从ceph的octopus版本开始支持。安装需要主机配置安装了容器和python3。
嗨安HiAn·2024-02-10 22:26

rbd快照管理、rbd快照克隆原理与实现、rbd镜像开机自动挂载、ceph文件系统、对象存储、配置对象存储客户端、访问Dashboard

快照快照可以保存某一时间点时的状态数据快照是映像在特定时间点的只读逻辑副本希望回到以前的一个状态，可以恢复快照使用镜像、快照综合示例#1.在rbd存储池中创建10GB的镜像，名为img1[root@client1~]#rbd--help#查看子命令[root@client1~]#rbdhelpcreate#查看子命令create的帮助[root@client1~]#rbdcreateimg1--s
Mick方·2024-02-10 05:13

Ceph概述、准备ceph部署环境、cephadm概述、安装Ceph集群、ceph块存储、存储池、rbd镜像管理、ceph客户端配置

ceph概述ceph可以实现的存储方式：块存储：提供像普通硬盘一样的存储，为使用者提供“硬盘”文件系统存储：类似于NFS的共享方式，为使用者提供共享文件夹对象存储：像百度云盘一样，需要使用单独的客户端Ceph
Mick方·2024-02-10 05:13

DolphinScheduler-3.2.0 集群搭建

DolphinScheduler-3.2.0生产集群高可用搭建，DolphinScheduler原数据存储mysql设置，分布式存储采用h
爱吃辣条byte·2024-02-10 01:23

2022-12-02 Redis Cluster （1）通信机制

原文链接https://mp.weixin.qq.com/s/tlocdMlyI4Sx8UxfbuVjTw能提供的能力高可用更高的QPS分布式存储大量数据分散网络流量压力基本架构分区方式虚拟槽分区虚拟槽分区示意图
圆方的鱼·2024-02-09 21:05

第五届脑电深度学习入门班（训练营：2023.9.12~9.20）

★课程简介★脑电图（Electroencephalogram,EEG）是脑神经细胞电生理活动在大脑皮层或头皮表面的总体反映，包
茗创科技·2024-02-09 21:12

编程随笔-ElasticSearch知识导图(1)：全景

但我最初了解ES却是从NoSQL数据库开始，在使用、研究了ES一段时间后，我发现这是一个优秀的分布式部署软件，不仅是一个全文搜索引擎、还是一个分布式存储系统、一个分布式数据库。  
weixin_33868027·2024-02-09 18:58

k8s，1.14.2 集群搭建（3）：metric server

简介如何查看pod的CPU,内存等资源占用情况？那就需要metricserver。借用官网的例子使用kubectltop命令查看mem-example中memory-demo的资源使用情况。kubectltoppodmemory-demo--namespace=mem-example结果类似如下：NAMECPU(cores)MEMORY(bytes)memory-demo162856960安装运行
Java程序员YY·2024-02-09 10:01

ceph

sudoyuminstall-yhttps://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpmcat>/etc/yum.repos.d/ceph.repo
钾肥尔德·2024-02-09 08:16

Ubuntu搭建计算集群

同时集群搭建可以分为硬件和软件两部分，硬件可以参考北京科音自然科学研究中心内容，这里仅是
xk6891·2024-02-09 08:56

常用的文件系统、存储类型小整理

最近接触到了五花八门的文件系统、存储类型，名词听得头大，趁假期整理学习一番~名称OSSFastDFSJuiceFSCIFSCephFSEFSNFS全称ObjectStorageService(对象存储服务
Hehuyi_In·2024-02-09 06:16

第四届脑电深度学习入门班（训练营：2023.7.4~7.12）

★课程简介★脑电图（Electroencephalogram,EEG）是脑神经细胞电生理活动在大脑皮层或头皮表面的总体反映，包
茗创科技·2024-02-09 05:48

redis集群搭建

redis集群搭建在开始redis集群搭建之前，我们先简单回顾一下redis单机版的搭建过程下载redis压缩包，然后解压压缩文件；进入到解压缩后的redis文件目录（此时可以看到Makefile文件）
角角_d216·2024-02-09 03:44

centos7搭建集群过程

集群搭建过程第一步：ping测试第二步：修改主机名第三步：修改IP地址与域名映射关系第四步：重启reboot第五步：关闭防火墙第六步：关闭SELinux第七步:免密登录第八步：时钟同步第九步：安装JDK
妖怪书生·2024-02-08 21:06

Zookeeper集群搭建（3台）

准备工作1、提前安装好hadoop102、hadoop103、hadoop104三台机器，参照：CentOS7集群环境搭建（3台）-CSDN博客2、提前下载好Zookeeper安装包并上传到/opt/software上、安装包，链接：https://pan.baidu.com/s/1Ta9DH6FHm2pO4vQw_5wC4A?pwd=6666安装Zookeeper一、解压安装1、解压Zookee
在下区区俗物·2024-02-08 21:35

k8s1.20 搭建-抛弃docker使用containerd

其他相关文档：《k8s-1.21高可用集群搭建》文章目录前言：1.环境准备1.1关闭无用服务1.2环境和网络1.3依赖安装1.4系统优化2.安装Containerd2.1安装2.2修改配置文件2.3启动
玄德公笔记·2024-02-08 19:00

Raft算法在Curve中的实践

110006508【嵌牛导读】：本文介绍了RAFT算法的特点和基本应用【嵌牛鼻子】：Curve实践【嵌牛模块】：RAFT算法概念、特点、应用场合【嵌牛正文】：urve作为高性能、高可用、高可靠的新一代分布式存储系统
xx_d18b·2024-02-08 19:45

Docker Swarm集群仓库和可视化管理

DockerSwarm集群仓库和可视化管理1背景2环境3安装操作3.1registary部署3.1.1下载3.1.2部署3.2portainer部署3.2.1下载3.2.2部署1背景本篇是上篇《DockerSwarm集群搭建
水步天·2024-02-08 16:54

K8s环境下rook-v1.13.3部署Ceph-v18.2.1集群

文章目录1.K8s环境搭建2.Ceph集群部署2.1部署RookOperator2.2镜像准备2.3配置节点角色2.4部署operator2.5部署Ceph集群2.6强制删除命名空间2.7验证集群3.Ceph
@TangXin·2024-02-08 14:26

kubernetes 集群搭建(二进制方式)

kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。这个工具能通过两条指令完成一个kubernetes集群的部署：#创建一个Master节点$kubeadminit#将一个Node节点加入到当前集群中$kubeadmjoin1.安装要求在开始之前，部署Kubernetes集群机器需要满足以下几个条件：一台或多台机器，操作系统CentOS7.x-86_x64硬件配置：2GB
萧兮_瑾琛·2024-02-08 14:59

Redis核心技术与实战【学习笔记】 - 30.番外篇：Redis学习资料、运维说明及使用规范建议

1.1经典书籍在学习Redis时，场景的需求有三个方面：日常使用操作：比如常见的命令和配置，集群搭建等关键技术原理：比如IO模型、AOF和RDB机制等在实际使用时的经验教训，比如Redis响应变慢了怎么办
陈建111·2024-02-08 10:20

使用 Kubernetes，基础设施层面如何优化？分享一些解决方案

重点内容搭配SmartX自主研发的Kubernetes服务、分布式存储、Kubernetes原生存储等产品，用户既可基于SmartX超融合构筑全栈Kubernetes基础设施，也可选择为部署在裸金属、其他虚拟化平台或混合环境的
志凌海纳SmartX·2024-02-08 07:51

zookeeper安装

1.0Zookeeper教程|菜鸟教程(runoob.com)1.0Zookeeper教程2.0Zookeeper安装配置3.0Zookeeperlinux服务端集群搭建步骤4.0ZookeeperJava
riabai·2024-02-08 06:34

小迪渗透&CTF夺旗&SRC挖掘（拾叁）

文章目录83.Python考点SSTI&反序列化&字符串(83-88)演示案例:涉及资源84.PHP弱类型&异或取反&序列化&RCEPHP常考点弱类型绕过对比总结反序列化考点:网鼎杯2020-青龙组-web-AreUserialzpreg_match
进击的网安攻城狮·2024-02-08 05:43

一起坚持早起日更英语，第34天

DayupdateEnglishpracticePhase2.每天一个对话场景。写下10句话，翻译成英语。今日场景《包水饺》1今天元旦，咱们包水饺吧。
努力变富·2024-02-08 02:47

一次ceph节点时钟同步异常排查总结

问题现象cephmon节点时钟同步异常：$sudo/var/lib/ceph/bin/ceph-scluster:id:3fe6c651-2a0c-4f15-851b-7215536897ebhealth
洒满阳光的午后·2024-02-08 02:01

RabbitMQ之七生产集群部署

个人专题目录1.RabbitMQ集群搭建实际生产应用中都会采用消息队列的集群方案,出于MQ中间件本身的可靠性、并发性、吞吐量和消息堆积能力等问题的考虑，在生产环境上一般都会考虑使用RabbitMQ的集群方案
Java及SpringBoot·2024-02-07 21:21

Taishan服务器装centos7.6系统部署ceph服务出现的慢请求

近期，公司云要适配Taishan服务器，于是在服务器上部署了ceph，用来跑储存，但是在使用ceph上传快文件时，ceph出现大量的慢请求，导致ceph集群用不了，但是，使用对象存储和文件系统，未出现以上情况
LeLiRUi·2024-02-07 19:23
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他