ceph集群部署

ceph存储

ceph一.存储分类1.本地存储的文件系统ext3ext4efsntfs2.网络存储nfs网络文件系统hdfs分布式网络文件系统glusterfs分布式网络文件系统3.传统存储(1).DASSAS,SATA
MoonSoin·2024-01-04 17:26

ElasticSearch 集群搭建与状态监控cerebro

为了解决存储能力上上限问题就可以用到集群部署。
Crhy、Y·2024-01-04 13:16

软件测试工程师需要掌握的理论知识（1）

Redis集群有以下几种类型:1.主从复制集群(Master-SlaveCluster)∶这是最简单的Redis集群部署方式。
w43993000·2024-01-04 11:54

超详细Zookeeper+Kafka+ELK集群部署

一、Zookeeper概述1、Zookeeper定义Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。2、Zookeeper工作机制Zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zookeeper就将负责通知已经在Zookeeper上注册的那
半糖不加冰520·2024-01-04 11:40

Ceph RADOS集群

RADOS(Reliable,AutonomicDistributedObjectStore)可靠、自由分布式对象存储RADOS是抽象概念，是客户端对象存储的实体，而RADOS内部是由Monitor和OSD组件提供服务Monitor提供可靠性，提供可靠性就是集群，所以Monitor一般不会是一个，负责维护和分发集群的关键元数据OSD也是个抽象概念，实质其实就是一个硬盘或者一个RAID组，通常一个硬
Y。S。H。·2024-01-04 09:45

SpringBoot入门到精通-使用Jasypt对数据库账号密码加解密

引用代码库com.github.ulisesbocchiojasypt-spring-boot-starter3.0.5配置启动@EnableEncryptablePropertiespublicclassCephS3TransferApplication
瓦哥架构实战·2024-01-04 09:14

Ceph源码分析-std::unique_ptr＜rgw::sal::RGWObject::WriteOp＞ obj_op = head_obj-＞get_write_op(&obj_ctx)；

std::unique_ptrobj_op=head_obj->get_write_op(&obj_ctx);这行代码是C++代码，涉及到智能指针和某个对象或库的特定操作。我会为你逐步解释这行代码：std::unique_ptr:这是C++11引入的一个智能指针，用于管理对象的生命周期。unique_ptr确保其指向的对象在任何时刻都只有一个unique_ptr拥有它，当unique_ptr被销毁
瓦哥架构实战·2024-01-04 09:14

【ceph】Rados的客户端RadosClient|MonClient|Osdc

本文介绍Ceph客户端方面的某些模块的实现。
bdview·2024-01-04 09:43

ceph架构核心之RADOS

ceph架构核心之RADOS一、ceph生态系统的概念架构图一：ceph生态系统的概念架构图二：ceph生态系统简化后的分层视图图三：一个简单的ceph生态系统二、Ceph架构核心之RADOS图四：RADOS
S1436006750·2024-01-04 09:37

Ceph入门到精通-数据完整性签名

S3Glacier要求您通过签署请求。若要对请求进行签名，请使用加密哈希计算数字签名功能。加密哈希是一个函数，它根据输入。哈希函数的输入包括请求的文本和密钥访问密钥。哈希函数返回一个哈希值，您将其包含在请求中，作为签名。签名是请求标头的一部分。Authorization收到您的请求后，S3Glacier会使用相同的方法重新计算签名哈希函数和用于对请求进行签名的输入。如果生成的签名与请求中的签名匹配
瓦哥架构实战·2024-01-04 09:36

Ceph源码分析-使用VScode调试ceph-osd教程

前言：本文以cephosd部分为例，为您演示通过第三方社区提供的vscode编辑软件，对cephosd进行进行图形化单步调试以及配置操作。
瓦哥架构实战·2024-01-04 09:36

ceph之rados设计原理与实现第三章：集群的大脑monitor

Monitor和核心是OSDMonitor，利用分布式领域的一致性算法Paxos来维护集群唯一的一张表OSDMap。Monitor采用分担负荷的方式，一个集群可以有多个Monitor节点，任何时刻，任何客户端或者OSD都可以通过和任意一个Monitor进行交互，以索取或者请求更新集群表OSDMap。OSD上下电、故障上报、故障切换等操作都由OSD独立与Monitor通过协商完成，每个操作都有可能多
mxy990811·2024-01-04 09:06

大数据StarRocks(二) StarRocks集群部署

一、生产机器资源评估1.梳理数据量，包括每天增量数据接入和全量数据接入2.数据存储时间长度（1个月/3个月/半年/1年/三年等）3.报表的SQL查询数量，SQL查询占用资源的统计，需要提前做好压测4.压测可以采用官网提供的压测工具先进行测试，根据测试数据进行资源调整，然后再要业务数据进行压测一遍最终以压测中预期结果最好的机器配置进行申请，如果公司很rich的话，直接用80c/256G的机器配置。二
运维仙人·2024-01-04 07:55

IoTDB 集群部署——windows

本文的测试环境为windowserver2016，版本包为1.1.0，jdk版本为1.8首先下载IoTDB版本包，链接地址如下https://archive.apache.org/dist/iotdb/1.1.0/apache-iotdb-1.1.0-all-bin.zip本次部署将使用1个ConfigNode和3个DataNode模式，元素的副本数为1，数据在3个DataNode中都进行存储，保
zhu1361·2024-01-04 07:54

cephfs cap机制介绍

一、Cap：概述cap是文件系统层面的，包括元数据、数据操作。cap和mds分布式锁是对应的cap是MDS分配给client对inode的操作能力权限。不同的客户端，或者同一客户端不同时刻，对同一inode持有cap可能是不同的•作用：MDS通过cap对多个客户端操作同一个inode进行权限管理二、基本cap三、Cap和锁四、Cap结构
大隐隐于野·2024-01-04 04:36

Kafka

目录1、Kafka简要描述1.1、kafka1.2消息队列1.3、为什么需要消息队列1.4kafka架构1.5分布式模型1.6Kafka网址2、Kafka集群部署2.1环境准备2.1.1集群规划2.1.2jar
有语忆语·2024-01-04 04:59

Kafka集群部署

在Kafka集群(Cluster)中，一个Kafka节点就是一个Broker，消息由Topic来承载，可以存储在1个或多个Partition中。发布消息的应用为Producer、消费消息的应用为Consumer，多个Consumer可以促成ConsumerGroup共同消费一个Topic中的消息。概念/对象简单说明BrokerKafka节点Topic主题，用来承载消息Partition分区，用于主
Minority·2024-01-03 21:18

【ceph】理解Ceph的三种存储接口:块设备、文件系统、对象存储

“Ceph是一个开源的、统一的、分布式的存储系统”，这是我们宣传Ceph时常说的一句话，其中“统一”是说Ceph可以一套存储系统同时提供块设备存储、文件系统存储和对象存储三种存储功能。
Bogon·2024-01-03 18:01

java版Spring Cloud Spring Boot 电商平台-技术架构分析

SpringBoot、MybatisPlus、Redis前端框架：VUE、Bootstrap/H5/CSS3、IOS、Android、小程序核心思想：分布式、微服务、云架构、模块化、原子化、持续集成、集群部署开发模式
黑骑士1203·2024-01-03 17:05

简易版前端项目离线方案-接口及页面离线缓存

崩溃等异常而无法访问的情况,就需要将接口和页面的静态资源缓存在用户的浏览器本地,这样一来,就算后端服务不可达,前端依旧能有正常的页面显示操作反馈,大部分用户无法感知到系统出现了故障.二,方案的设计2.1,前端单独集群部署这个虽然听起来高大上
笑道三千·2024-01-03 16:10

开源大数据集群部署（一）集群实施规划

作者：櫰木本次集群规划信息本次实际生产业务体量存在巨大差异，但集群规划内容相同，因此建议实际生产环境按照按照一定比例扩展即可。主机操作系统要求软件信息参数配置8C16G操作系统版本CentOSLinuxrelease7.8.2003(Core)java版本javaversion“1.8.0_281”hadoop版本hadoop3.2.4集群版本规划集群组建版本HDFS3.2.4YARN3.2.4M
云掣YUNCHE·2024-01-03 15:42

Spark大数据分析与实战笔记（第二章 Spark基础-02）

文章目录每日一句正能量章节概要2.2搭建Spark开发环境2.2.1环境准备2.2.2Spark的部署方式2.2.3Spark集群安装部署一、Spark下载二、Spark安装三、环境变量配置2.2.4SparkHA集群部署一
想你依然心痛·2024-01-03 09:14

K8S集群部署MySql

挂载MySQL数据卷在k8s集群中挂载MySQL数据卷需要安装一个NFS。在主节点安装NFSyuminstall-ynfs-utilsrpcbind在主节点创建目录mkdir-p/nfschmod777/nfs更改归属组与用户chown-Rnfsnobody:nfsnobody/nfs配置共享目录echo"/nfs*(insecure,rw,sync,no_root_squash)">/etc/e
xdpcxq1029·2024-01-03 07:27

K8s部署cephfs-provisioner —— 筑梦之路

cephfs-provisioner.go是cephfs-provisioner（cephfs的storageclass）的核心，主要是watchkubernetes中PVC资源的CURD事件，然后以命令行方式调用
筑梦之路·2024-01-03 06:27

【Harbor】基于Harbor和CephFS搭建高可用Private Registry

如何快速利用Harbor搭建自己的企业级registryserverhttp://www.dockerinfo.net/3659.htmlVMwareHarbor基于DockerDistribution的企业级Registry服务http://www.dockerinfo.net/3245.htmlHarboronKubernetes高可用方案https://imkira.com/a10.html
Bogon·2024-01-02 19:38

后天开课 | 第五届脑电深度学习入门班（训练营：2023.9.12~9.20）

★课程简介★脑电图（Electroencephalogram,EEG）是脑神经细胞电生理活动在大脑皮层或头皮表面的总体反映，包
茗创科技·2024-01-02 12:07

Spark内容分享(二十三)：Spark on K8s 在茄子科技的实践

4.EMR类产品的缺陷5.传统Hadoop生态，三大组件的前世今生6.SparkonK8s的优势SparkonK8s原理介绍1.Spark的集群部署模式2.Sparkonk8s如何运行3.Spark的dynamicAllocation
之乎者也··2024-01-02 11:30

编程语言未来发展趋势探析：简化与标准化、并发与分布式、智能应用新篇章

python爬虫入门进阶❤️4.Ceph实战，从原理到实战应有尽有。Ceph实战
码农飞哥·2024-01-02 06:35

【ceph】Ceph之PG状态详解--研读笔记

原文：分布式存储Ceph之PG状态详解-简书Ceph中一些PG相关的状态说明和基本概念说明、故障模拟_pansaky的博客-CSDN博客1.PG介绍继上次分享的《Ceph介绍及原理架构分享》，这次主要来分享
bandaoyu·2024-01-02 06:31

【ceph】vdbench的使用教程——裸盘测试和文件系统测试vdbanch

目录即看即用详细说明vdbench简介常用执行选项和参数文件说明1、文件系统2、块设备（裸盘测试）运行使用1、单机运行2、联机运行结果分析1、输出文件2、结果分析测试说明1、测试总结2、常见测试参数测试和思考可视化摘抄和参考：bandaoyu,本文持续更新，连接：http://t.csdn.cn/7kaiZ即看即用1、下载https://www.oracle.com/downloads/serve
bandaoyu·2024-01-02 06:31

【Ceph】Ceph常用命令|Ceph配置参数和命令解析|ceph管理

目录常用命令查看状态启动/停止分类命令cephmoncephmdscephosdcephpgcephosdpoolradosceph-deploy块设备|rbd的一些命令修改ceph进程的配置：（临时生效
bandaoyu·2024-01-02 06:00

云宏大讲坛 | Ceph分布式存储高性能设计

随着数据量的不断增长，如何以高效的方式存储数据量成为IT界的一个挑战。许多传统存储解决方案不能满足日益增长的需求，业界迫切需要一种新的方法来管理现今的数据，为用户控制访问时间，缩减管理成本。软件定义的存储解决方案是存储大量数据的一个新兴方案。当代网络，云计算、大数据技术的应用使得数据呈指数增长，每天增长达百万兆背景字节的数据量是常见的情况。我们迫切需要一种更有效的解决方案，如可伸缩扩展的软件定义存
chennbwin·2024-01-02 01:48

MySQL-长事务详解

python爬虫入门进阶❤️4.Ceph实战，从原理到实战应有尽有。Ceph实战
码农飞哥·2024-01-01 16:58

ceph之rados设计原理与实现：crush算法

执行命令cephosdcrushdump可以查看当前集群crush信息其中会输出可调crush参数"tunables"、规定的若干规则"rules"、以及crushmap。
mxy990811·2024-01-01 14:51

ceph集群搭建到应用从入门到熟练，包含块存储、对象存储、cephfs的应用、cephx认证等

ceph-deploy比较适合生产环境，不是用cephadm搭建。相对麻烦一些，但是并不难，细节把握好就行，只是命令多一些而已。
绝恋96·2024-01-01 14:50

ceph rgw故障处理

前言这里想总结下，平时遇到的cephrgw相关的故障和对应的处理方法。方便下次遇到类似问题之后，能快速有效的找到解决方案。
ypdai·2024-01-01 10:46

Elasticsearch-8.11.1 （2+1）HA（高可用）集群部署

目录一、环境描述二、安装ES2.1下载Elasticsearch2.2解压Elasticsearch2.3创建es服务账号/密码2.3修改服务器配置2.4配置节点2.4.1配置说明2.4.2配置高可用集群2.4.2.1maser节点服务配置2.4.2.2node1节点服务配置2.4.2.3node2节点服务配置2.4.2.3node3节点服务配置2.4.2.3node4节点服务配置2.4.3服务启
夜夜流光相皎洁_小宁·2024-01-01 06:36

第五届脑电深度学习入门班（训练营：2023.9.12~9.20）

★课程简介★脑电图（Electroencephalogram,EEG）是脑神经细胞电生理活动在大脑皮层或头皮表面的总体反映，包
茗创科技·2024-01-01 05:49

Kubernetes集群部署Rook Ceph实现文件存储，对象存储，块存储

Kubernetes集群部署RookCeph部署Ceph集群1.RookCeph介绍RookCeph是Rook项目中的一个存储方案，专门针对Ceph存储系统进行了优化和封装。
大風起雲飛揚·2023-12-31 17:08

【分布式系统测试】vdbench的使用教程——裸盘测试和文件系统测试ceph

即看即用1、下载https://www.oracle.com/downloads/server-storage/vdbench-downloads.html(外网不一定能访问下载，可以直接在csdn下载栏搜索。下载)2、解压文件夹中的vdbench.bat是个windows用，vdbench给linux用Linux3、进入文件夹./vdbench-t测试一下可用性运行测试模型./vdbench-f
mumu_wangwei·2023-12-31 15:48

trino-435: 集群部署

二、集群部署1、集群规划节点是否为coordinatornod
玉成226·2023-12-31 13:38

Nginx and micro-service

现在假设系统后端服务是微服务架构，一共100个microservice（简称:m-s），分别部署在150台机器上（有的服务是集群部署）。这种情况下前端请求它如何调抵达自己想访问的m-s呢？
君子兰琚琚·2023-12-31 13:37

【MySQL】主从异步复制配置

python爬虫入门进阶❤️4.Ceph实战，从原理到实战应有尽有。Ceph实战
码农飞哥·2023-12-31 06:23

一篇掌握Elasticsearch7.10集群搭建到实战

目录一、背景二、内容概要三、基础概念四、ES版本选择Elasticsearch版本选择ES客户端SDK版本选择五、Elasticsearch多租户多租户下的架构租户的识别和路由六、ES集群搭建集群部署架构单集群示例多集群示例
南天一梦N·2023-12-30 22:49

CentOS7安装部署Zookeeper

集群角色4.特点5.环境二、正文1.部署服务器2.基础环境1）主机名2）Hosts文件3）关闭防火墙4）JDK安装部署3.单机部署1）下载和解压2）配置文件3）数据目录4）单机启动5）测试6）自启动4.集群部署
趴着喝可乐·2023-12-30 21:43

MYSQL二主二从集群部署

目录一、环境描述二、安装mysql2.1卸载mysql(如果没安装过，可忽略)2.1.1列出安装的mysql2.1.2卸载mysql2.1.3删除mysql文件目录2.1.3.1查看mysql目录2.1.3.2依次删除2.2在线安装2.2.1下载安装源2.2.2安装源rpm2.2.3加入rpm密钥2.2.4执行安装2.2.5设置开机自启动2.2.6修改密码2.2.6.1获取临时密码2.2.6.2登
夜夜流光相皎洁_小宁·2023-12-30 20:10

Spark在不同集群中的运行架构

部署在单台机器上时，既可以用本地（Local）模式运行，也可以使用伪分布式模式来运行；当以分布式集群部署的时候，可以根据自己集群的实际情况选择Standalone模式（Spark自带的模式）、YARN-Client
姚兴泉·2023-12-30 13:54

Ceph监控

Cephdashboard安装非常简单。ceph-dash-graphite.pngInkscope用Ansible安装Inkscope。
杰森斯坦sen·2023-12-30 12:55

「从ES到CK 02」Clickhouse的基础知识扫盲

限于篇幅及便于分类组织，我会以一个系列文章的形式记录：01《ElasticsearchvsClickhouse》02《Clickhouse的基础知识扫盲》03《Clickhouse多分片多副本集群部署》
Pong_Kaho·2023-12-30 09:07

Linux|minio对象存储服务的部署和初步使用总结

一，minio的简介MinIO现在也是CNCF成员，在云原生存储部分和ceph等一起
晚风_END·2023-12-30 09:30
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他