ceph集群安装

私有云+云原生能力模型

公有云和私有云平台的使用和管理，如AWS、Azure、OpenStack等数据库备份和恢复的方法和工具，保证数据的安全性和可恢复性私有云技能树虚拟化技术KVMESXI软件定义存储（SDS）软件定义存储、NAS、ceph
野心与梦·2024-02-01 06:45

分布式虚拟文件系统，如何实现多种存储系统的融合

为了给不同的计算框架提供存储服务，存储的服务类型也是很多，常见的如AWS的S3存储、NFS文件系统和Ceph分布式系统等。
数据存储张·2024-01-31 07:20

SeaTunnel集群安装

环境准备服务器节点节点名称IPbigdata1192.168.1.250bigdata4192.168.1.251bigdata5192.168.1.252Java环境（三个节点都需要）java1.8+注意：在安装SeaTunnel集群时，最好是现在一个节点上将所有配置都修改完，之后通过SCP命令传到其它的节点上，更为方便些。使用scp命令要保证服务器之间SSH是可以通讯的。scp命令示例#如下：
崔二旦·2024-01-30 15:26

Elk运维-Elastic7.6.1集群安装部署

集群安装结果说明实例配置安装软件安装账号hadoop12C4G磁盘：50G云服务器elasticsearchkibanardhadoop22C4G磁盘：50G云服务器elasticsearchrdhadoop32C4G
消逝的bug·2024-01-29 10:11

Ceph部署

目录1、存储基础2、Ceph简介3、Ceph优势4、Ceph架构5、Ceph核心组件6、OSD存储后端7、Ceph数据的存储过程8、Ceph版本发行生命周期--------------------基于ceph-deploy
bob_gem·2024-01-29 02:39

Ceph应用

目录--------------------创建CephFS文件系统MDS接口--------------------//客户端操作--------------------创建Ceph块存储系统RBD接口
bob_gem·2024-01-29 02:38

【脑电信号处理与特征提取】P2-夏晓磊：脑电的神经起源与测量

夏晓磊：脑电的神经起源与测量专业术语electroencephalography(EEG)脑电图ExcitatoryPostsynapticPotential(EPSP)兴奋性突触后电位Electrocorticography
头发没了还会再长·2024-01-28 21:44

Centos/RHEL 7 安装部署openGauss 5.0 企业版 一主二备一级联操作指南

前言：写此文章的目的主要是感觉openGauss官网对企业版集群安装部署描述有些冗杂，对于初次接触openGauss的朋友可能会有点复杂，所以希望能编写一篇5.0的安装部署文档，希望对openGuass
openGauss社区·2024-01-28 18:19

k8s学习-DaemonSet和Job

DaemonSet的典型应用场景有：（1）在集群的每个节点上运⾏存储Daemon，比如glusterd或ceph。（2）在每个节点上运行日志收集Daemon，比如flunentd或logstash。
ByteX·2024-01-28 14:55

Ubuntu22.04三台虚拟机Hadoop集群安装和搭建（全面详细的过程）

虚拟机Ubuntu22.04Hadoop集群安装和搭建（全面详细的过程）环境配置安装安装JDK安装Hadoop三台虚拟机设置克隆三台虚拟机设置静态IP修改虚拟机hostssh免密登录关闭防火墙Hadoop
WuRobb·2024-01-28 06:41

K8S,KubeSphere安装与卸载

K8S,KubeSphere单机与集群安装与卸载安装Docker安装K8S安装Helm安装OpenEBS安装(推荐Helm安装)KubeSphere安装卸载K8S卸载Helm卸载KubeSphere卸
IT小分享·2024-01-27 23:40

Ceph分布式存储自动化运维平台开发实践

文章目录1.背景介绍1.1什么是Ceph？
抛物线.·2024-01-27 12:34

巧用 Prometheus 监控 Kubernetes 集群所有组件的证书

虽然提供了运维友好的向导式操作界面，简化了Kubernetes的运维操作，但它还是建立在底层Kubernetes之上的，Kubernetes默认的证书有效期都是一年，即使使用KubeKey[1]这样的集群安装利器也不能改变这个结果
王伯爵·2024-01-27 10:22

Zookeeper3.5.7基础学习

文章目录一、Zookeeper入门1、概述2、特点3、数据结构4、应用场景二、Zookeeper安装部署1、本地模式安装1.1基础操作1.2配置参数解读2、集群部署2.1集群安装2.2选举机制(面试重点
魅Lemon·2024-01-27 00:32

ES系列索引、文档、集群、技术原理文章目录

文档操作索引ES-index索引配置文档ES-DynamicMapping、文档字段类型ES-索引、文档插入、更新、删除、脚本API和Query参数ES-aggregation聚合分析ES-API约定集群ES集群安装和启动图解
冲上云霄的Jayden·2024-01-26 14:00

Ceph篇之搭建Ceph可视化界面Dashboard

一、CephDashboardCeph提供了原生的Dashboard功能，通过Dashboard可以获取Ceph集群的各种基本状态信息等。
听说唐僧不吃肉·2024-01-26 13:09

【ceph】ceph如何排查哪个osd曾经down过，超级实用

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2024-01-26 13:09

一文了解Ceph原理以及常见ceph指令

一、Ceph介绍什么是分布式存储？与集中式存储相反，分布式存储通常采用存储单元集群的形式。并且具有在集群节点之间进行数据同步和协调的机制。
听说唐僧不吃肉·2024-01-26 13:08

二 Ceph存储工作原理及实现

认识Cephceph是一个能提供文件存储，快存储和对象存储的分布式存储系统。
假面生·2024-01-26 13:38

ceph recovery的速度控制

转自https://ceph.com/planet/ceph-recover的速度控制/前言磁盘损坏对于一个大集群来说，可以说是必然发生的事情，即使再小的概率，磁盘量上去，总会坏那么几块盘，这个时候就会触发内部的修复过程
凌云靖宇·2024-01-26 13:05

Ceph的可靠性恢复原理 Scrub机制

Ceph的可靠性恢复原理:Scrub机制Scrub是Ceph集群进行的副本间的数据扫描操作，以检测副本间的数据一致性，包括Scrub和Deep-Scrub，其中Scrub只是对元数据信息进行扫描，相对比较快
HHFQ·2024-01-26 12:34

Ceph篇之利用Prometheus监控ceph服务

一、Ceph内置模块Cephmanager内部的模块中包含了prometheus的监控模块,并监听在每个manager节点的9283端口，该端口用于将采集到的信息通过http接口向prometheus提供数据
听说唐僧不吃肉·2024-01-26 12:02

ceph之rados设计原理与实现第七章：在线数据恢复——Recovery和Backfill

由于每个写操作都需要产生和操作日志，所以处于效率考虑，必须定时对日志进行裁剪。由于PG保存的日志条目有限，按照能否依靠日志进行数据恢复，存在两种数据恢复方式，分别为Recovery和Backfill。Recovery指只需要修复副本（PG）上与权威日志不同步的那部分对象（即降级对象即可）。missing已经记录Backfill指以PG全体对象为目标的数据迁移过程。例如所在OSD离线太久而期间产生大
mxy990811·2024-01-26 12:32

【ceph】ceph关于清洗数据scrub的参数分析

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2024-01-26 12:32

ceph之rados设计原理与实现第六章：移动的对象载体——PG

PG相关重要概念Log有一个队列，顺序记录了该PG接受的所有客户端写请求，Info则记录了该PG的Log队列最新和最旧的日志指针。Info是PG的元数据PG有几个副本，就有几个实例，其中有一个Primary，每个实例都有Info，Log队列。关于Acting、Up、PGTemp：Up包含的是由Crush计算出来的OSD序列，如果计算出的OSD不合理，比如新加入的OSD没有PG的历史副本，那么就会选
mxy990811·2024-01-26 12:01

TIDB7.5LTS集群安装配置手册

简介因近期有一个项目需要上线，在评估使用什么架构时，和开发同仁沟通需求，了解到该应用为OLTP但是数据量很集中，会有几张超大的表，如果要保证事务效率，使用mysql集群难免会要做分库分表，对后期的运维带来很大的挑战；而TIDB属于分布式集群，TIKV的行存模式非常适用于大表事务性业务，因此选型用TIDB来作为该应用的底层数据库架构；安装集群的一些基本配置要求请参考如下官方文档，这里不再赘述http
xiaofan23z·2024-01-26 11:02

跟着Microbiome学作图：R语言ggplot2画堆积柱形图展示微生物门水平的相对丰度

论文Reduceddiversityandalteredcompositionofthegutmicrobiomeinindividualswithmyalgicencephalomyelitis/chronicfatiguesyndrome
小明的数据分析笔记本·2024-01-26 04:46

Hbase集群安装部署

安装好对应版本的hadoop集群，并启动安装好对应版本的zookeeper集群，并启动HBase集群安装部署下载安装包并上传到node01服务器安装包下载地址：http://archive.cloudera.com
我还不够强·2024-01-25 12:02

PHP中一些特征函数导致的漏洞总结

第一部分：特征函数接触到几个常用的函数：\=\=\=\=\=md5intvalstrposin_arraypreg_matchstr_replacephp用这些函数实现过滤一些代码，漏洞可能有一些特性，
carrot11223·2024-01-25 10:36

Cephadm部署使用rgw对象网关（s3cmd和Java）

s3cmd）创建radosgwuser安装s3cmd配置s3cmds3cmd使用使用对象存储（Java代码）引入依赖编码测试参考前提RGW的部署基于以下集群，集群信息如下：重要概念区域（zone）:一个ceph
gengduc·2024-01-25 06:38

Kafka高可用集群安装

开始安装配置Kafaka1.编辑server.properties文件#############################ServerBasics##############################Theidofthebroker.Thismustbesettoauniqueintegerforeachbroker.broker.id=1#######################
NikolasNull·2024-01-24 19:05

ceph状态报：pgs not deep-scrubbed in time

问题描述ceph-s状态输出如下：分析过程scrubbed功能用于PG，是为了检测PG分布到各osds上的数据是否一致，deep-scrubbed的检测模式除了检测数据的元数据信息外，还会检测数据的内容是否一致
小鲸鱼大梦想·2024-01-24 18:28

mkfs.xfs无法格式化问题cannot open /dev/sdm: Device or resource busy

实验环境：centos7服务器问题：之前服务器做过ceph，之后格式化磁盘，数据盘作raid0。系统装好后，查看设备信息。
运维-大白同学·2024-01-24 18:44

【星海随笔】ceph存储池

ceph部件很多。写到一个文章里太多了。每个分开写，找起来舒服一些PG（PlacementGroup）是一个逻辑概念，用于数据的分布和复制。注：OSD是负责物理存储的进程，它管理存储在磁盘上的数据。
活跃的煤矿打工人·2024-01-24 12:57

K8S集群安装Ingress-Nginx

K8S集群安装Ingress-Nginx1工作原理2安装3解决方法3.1方案一3.2方案二3.3方案三4应用5使用hostNetwork的方式部署ingress-nginx5.1镜像源更新5.2优化ingress-nginx5.3
qq_37705525·2024-01-24 10:55

Zookeeper集群+Kafka集群

Zookeeper数据结构5.Zookeeper应用场景统一命名服务统一配置管理统一集群管理服务器动态上下线软负载均衡6.Zookeeper选举机制第一次leader选举非第一次选举7.部署Zookeeper集群安装
Ybaocheng·2024-01-24 06:20

Ceph应用

ceph补充1Ceph管理1.1资源池的管理上面我们已经完成了Ceph集群的部署，但是我们如何向Ceph中存储数据呢？首先我们需要在Ceph中定义一个Pool资源池。
王德发666·2024-01-23 16:15

Flink基础介绍

Flink基础介绍学习目标Flink基本介绍大数据发展历史Flink性能比较Flink在阿里的现状Flink集群安装伪分布式安装StandAlone模式安装StandAlone的高可用模式Yarn模式Yarn-SessionFlink
Baby 看你们浪。·2024-01-23 16:10

Openstack云计算(六)Openstack环境对接ceph

requiretty\ncentALL=(root)NOPASSWD:ALL' |tee/etc/sudoers.d/cephchmod440/etc/sudoers.d/ceph（2）openstack
wmd13164306712·2024-01-23 11:59

CentOS 7部署 Ceph分布式存储架构

SE4nJH1.概述随着OpenStack日渐成为开源云计算的标准软件栈，Ceph也已经成为OpenStack的首选后端存储。
大帅同学·2024-01-23 09:48

K8s（八）持久化存储emptyDir、hostpath、nfs

kubectlexplainpods.spec.volumesawsElasticBlockStore#AWSElasticBlockStore（EBS）卷的配置对象azureDisk#AzureDisk卷的配置对象azureFile#AzureFile卷的配置对象cephfs
心葉493·2024-01-23 08:38

Zookeeper的使用

：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录系列文章目录前言一、Zookeeper概述二、应用场景三、Zookeeper的基本概念四、Zookeeper安装Zookeeper伪集群安装集群安装五
键盘敲烂~~~·2024-01-23 03:16

k8s k3s云容器性能测试-边端云端性能测试

集群里创建POD，在POD里为集群加压e.g.memtester网络:创建两个pod分别起在两个物理节点上，使用iperf3给网络加压存储:通过MEC创建一块大磁盘,，通过DD或其他工具将磁盘写满(e.g.ceph
东方狱兔·2024-01-22 23:59

Tableau Server集群安装步骤

TableauServer集群安装流程1.硬盘挂载此小节使用root用户，其他小节使用自己建的其他用户用户查看磁盘情况，选出空闲磁盘fdisk-l新建分区#fdisk/dev/vdb我这里的硬盘名称是vdb
Charles_DT·2024-01-22 23:18

SSH免密码登录设置

则在每一台机器下执行如下命令：ssh-keygen连续回车，有yes的直接确认yes，直到密文生成；然后通过ssh-copy-idroot@hostname命令把密文发给三个机器ssh-copy-idroot@ceph1ssh-copy-idroot
华木公子·2024-01-22 22:52

k8s-pvc/pv扩容记录

这里是基于ceph-csi插件，在rbd的使用方式下做的扩容原理需要csi插件的支持，更改pod的pvc申明的存储空间需
old_GGB·2024-01-22 07:49

ceph资源池pool管理

之前我们已经完成了Ceph集群的部署，但是我们如何向Ceph中存储数据呢？首先我们需要在Ceph中定义一个Pool资源池。Pool是Ceph中存储Object对象抽象概念。
沈阳最速传说と疾走の猛虎！贵物刀一郎です·2024-01-21 16:27

Ceph分布式存储部署

存储基础2、NAS（网络附加存储，是通过网络附加到当前主机文件系统之上的存储）3、SAN（存储区域网络）4、单机存储的问题5、商业存储解决方案6、分布式存储（软件定义的存储SDS）7、分布式存储的类型二、Ceph
睡美人章繁·2024-01-21 16:26

hadoop分布式集群配置（linux）

linux配置hadoop分布式集群一、前期准备二、Jdk的安装三、配置hadoop集群安装hadoop分布式集群hadoop-3.3.0及jdk1.8下载链接一、前期准备1.安装hadoop分布式之前先准备好
小-枝-丫·2024-01-21 05:44

在Centos7上进行Trino 377的集群安装部署

目录1.集群规划2.安装依赖3.下载解压4.配置文件4.1服务器配置etc/config.properties4.2节点配置etc/node.properties4.3JVM配置etc/jvm.config4.4日志配置etc/logging.properties5.启动6.关闭7.查看WebUI1.集群规划主机名服务bigdata001coordinatorbigdata002workerbig
Bulut0907·2024-01-20 22:20
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他