分布式存储-ceph

半夜三更的，Proxmox VE集群的ceph OSD磁盘挂了

这几天centreon监控频频报警，提示cephpg错误，用cephhealthdetail确定不一致的pgs，然后用指令cephpgrepairpg_num进行修复，通过查看系统日志，有IO错误，修复一次
4/5$全真龙门·2023-12-20 08:44

API资源对象StorageClass；Ceph存储；搭建Ceph集群；k8s使用ceph

API资源对象StorageClass;Ceph存储;搭建Ceph集群;k8s使用cephAPI资源对象StorageClassSC的主要作用在于，自动创建PV，从而实现PVC按需自动绑定PV。
dumplings。·2023-12-20 08:06

区块链正改变世界

比特币呢，其实不是一蹴而就，而是由多位密码学家从1980年开始逐渐发明了区块链的一些重要概念：像分布式存储、工作证明机制、时间戳、非对称加密技术等。
心态区块链·2023-12-20 05:11

Ceph部署

[TOC]一、Ceph集群规划系统类型：Centos7.5ceph版本：v13.2.7mimic主机名IP地址角色数据盘ceph-node1172.16.0.122mon、mgr、osd、deploy/
奔跑De猪·2023-12-20 03:09

新一代云上基础技术和架构分论坛

新一代飞天系统，使用神龙计算平台，盘古分布式存储平台，洛神网络平台为内核，承载着阿里云基础产品和云原生产品，支撑起阿里云高性能，高稳定性，高安全性的云上环境。
数据库小组·2023-12-19 23:24

ceph的osd盘删除操作和iscsi扩展

ceph的osd盘删除操作拓展:osd磁盘的删除(这里以删除node1上的osd.0磁盘为例)1,查看osd磁盘状态[root@node1ceph]#cephosdtreeIDCLASSWEIGHT TYPENAME
师范大学通信大怨总·2023-12-19 23:26

【运维面试100问】（八）如何手动释放内存

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-12-19 18:58

【运维日常】nginx 413 Request Entity Too Large

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-12-19 18:28

【运维面试100问】（九）了解Raid嘛？

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-12-19 18:22

千万级PV/IP规模高性能高并发网站架构

如果把来访用户比作来犯的”敌人”，我们一定要把他们挡在800里地以外，即不能让他们的请求一下打到我们的指挥部（指挥部就是数据库及分布式存储）。如：能缓存在用户电脑本地的，就不要让他去访问CDN。
Success85·2023-12-19 18:28

从零开始了解大数据(二)：Hadoop篇

目录前言一、Hadoop集群整体概述1.HDFS集群（分布式存储）：(1)HDFS集群角色构成：(2)HDFS集群功能：2.YARN集群（资源管理、调度）：(1)YARN集群角色构成：(2)YARN集群功能
橘子-青衫·2023-12-19 13:23

从零开始了解大数据(三)：HDFS分布式文件系统篇

目录前言一、HDFS分布式文件系统基础1.数据与元数据2.分布式存储系统的核心属性3.HDFS的设计目标4.HDFS的重要特性二、HDFSShell操作1.HDFSShell命令行简介2.HDFSShell
橘子-青衫·2023-12-19 13:23

Spark简介

1.Spark基本概念Spark是一种基于内存计算的大数据并行计算框架，最早是由加州大学伯克利分校开发，现已经成为Apche顶级开源项目，其作为MapReduce的替代方案，兼容HDFS、Hive等分布式存储层
Mrsimple_4f84·2023-12-19 09:18

ceph更换硬盘

ceph-s//检查故障k8s70132:~$ceph-scluster:id:d10b3028-b78d-4b23-bacb-ca26c0a35c99health:HEALTH_WARN1daemonshaverecentlycrashedservices
潮落拾贝·2023-12-19 07:58

kubernetes 使用ceph

下载externalstorage项目gitclonehttps://github.com/kubernetes-incubator/external-storage.gitkubernetes使用cephfs
你挺能闹_6726·2023-12-19 07:16

【GPU监控】Gpu-dcgm-exporter 监控

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-12-19 06:30

【ES】--Elasticsearch的索引别名和主副分片

二、ES的分片分片作用：(1)、更好的分布式存储、扩展。(2)、
DreamBoy_W.W.Y·2023-12-18 23:43

Flink系列之：大状态与 Checkpoint 调优

Checkpoints三、Checkpoint调优四、RocksDB调优五、增量Checkpoint六、RocksDB或JVM堆中的计时器七、RocksDB内存调优八、容量规划九、压缩十、Task本地恢复十一、主要（分布式存储
最笨的羊羊·2023-12-18 23:27

破局创新，天翼云HBlock如何以小见大、以柔克刚？

如此举措，表明了天翼云欲在分布式存储领域“破局”。天翼云显然不会走传统企业级存储厂商那样的
阿明观察·2023-12-18 19:38

挺进云存储，天翼云全新一代XSSD勇立潮头

引言：自研高性能分布式存储引擎LAVA，实现云硬盘持续创新获得新突。
阿明观察·2023-12-18 19:37

基于haproxy+keepalived+ceph实现高可用web Cluster

192.168.2.21haproxy1/DNS：192.168.2.5(eth0)192.168.4.5(eth1)haproxy2：192.168.2.6192.168.4.6VIP：192.168.4.80ceph
update_now1·2023-12-18 17:04

ceph性能优化

1.ceph的优化1.硬件选型1.服务器1GHzCPU*4perMON1GHzCPUperOSD（themorethebetter）2.内存4GBRAMperMON1GBRAMperOSD3.硬盘SSD
TomNewChao·2023-12-18 15:15

一文看懂分布式存储 Ceph 架构原理

1.什么是Ceph？
Chengz77_·2023-12-18 15:45

Ceph存储

raid：独立磁盘阵列性能raid0条带卷性能最高的，没有冗余，不具备容错功能raid1100%容错raid5最少三块性能不如raid0容错不如raid1raid0+raid1性能+容错raid时代-->分布式存储
叫我家驹范·2023-12-18 15:15

Ceph分布式存储 原理+架构图详解

存储基础单机存储设备●DAS（直接附加存储，是直接接到计算机的主板总线上去的存储）IDE、SATA、SCSI、SAS、USB接口的磁盘所谓接口就是一种存储设备驱动下的磁盘设备，提供块级别的存储●NAS（网络附加存储，是通过网络附加到当前主机文件系统之上的存储）NFS、CIFS、FTP文件系统级别的存储，本身就是一个做好的文件系统，通过nfs接口在用户空间输出后，客户端基于内核模块与远程主机进行网络
Yuzhang2046·2023-12-18 15:14

ceph的整体架构

1.ceph集群简介1.集群简介ceph是分布式集群:1>软件定义存储(sds)sds是减少存储基础设施的tcd(总体成本)所需要的。
TomNewChao·2023-12-18 15:42

PIPE Interface解析之信号解析（SerDes&Original共有）

DataInterafcePHY的input信号TxData1Original架构：TxData[31:0]/[15:0]/[7:0]分别对应32/16/8bits的interface，低位的symbol
芯芯之火，可以燎原·2023-12-18 05:25

Ceph入门到精通- smartctl -l error检查硬盘指标

“smartctl-lerror”是一个Linux命令，用于查看磁盘驱动器的SMART(Self-Monitoring,AnalysisandReportingTechnology)错误日志。SMART是一种技术，能够监测硬盘驱动器的状态并提供关于硬盘健康状况的信息。运行该命令后，你将看到磁盘驱动器中记录的硬盘错误日志。每个错误都包含一些信息，例如错误类型、错误代码、时间戳等。解析这些错误日志可能
瓦哥架构实战·2023-12-18 04:37

Ceph入门到精通-Ceph Pacific 版本磁盘预测模块

磁盘预测模块利用Ceph设备运行状况检查来收集磁盘运行状况指标，并使用内部预测器模块生成磁盘故障预测并返回到Ceph。它不需要任何外部服务器进行数据分析和输出结果。其内部预测器的准确率约为70%。
瓦哥架构实战·2023-12-18 04:05

分布式块存储 ZBS 的自主研发之旅｜元数据管理

SmartX分布式存储ZBS采用LogReplication的机制，在元数据存储方案上选择将LevelDB和Zookeeper相结合，从而以更加精简的架构实现了高可靠、高性能与轻量级的元数据服务。
志凌海纳SmartX·2023-12-17 23:29

KVM+GFS分布式存储系统构建KVM高可用

一、安装部署KVM虚拟化平台1、安装KVM虚拟化平台yum-yinstallqemu-kvmqemu-kvm-toolsvirt-installqemu-imgbridge-utilslibvirtvirt-manager2、验证cat/proc/cpuinfo|grepvmxlsmod|grepkvm3、开启libvirtd服务systemctlstartlibvirtd&&systemctle
叮咚网工·2023-12-17 10:28

HDFS介绍+Shell操作

看黑马网课记录第二章-wwww操]使用命令操作HDFS文件系统_哔哩哔哩_bilibiliHDFS1.什么是HDFShadoop三大组件之一，负责海量数据的分布式存储2.HDFS架构角色：主节点（领导）
Y蓝田大海·2023-12-17 10:14

docker-单机启动ceph集群（macOS）

pull镜像前提先安装好docker本次实验环境为：操作系统macosdocker版本dockerpullceph/osddockerpullceph/mon1.创建Ceph专用网络sudodockernetworkcreate
Eoneanyna·2023-12-17 09:33

【elasticsearch】23、分片与集群的故障转移

primaryshard-提升系统的存储容量分片是elasticsearch分布式存储的基石主分片/副本分片通过主分片，将数据分布在所有的节点上primaryshard，可以将一份索引的数据，分散在多个
cutieagain·2023-12-17 07:47

Hadoop，Hive和Spark大数据框架的联系和区别

Hadoop主要包括两个方面，分别是分布式存储框架（HDFS）和分布式计算框架（Mapreduce）。1.1HDFS分布式存储HDFS全称为hadoopdistributedfilesystem。
Weiyaner·2023-12-17 06:00

大数据生态中‘Hadoop’、‘Hive’、‘Spark’、‘Mapreduce’、‘HDFS’、‘Yarn’是什么关系

Hadoop生态中HDFS：处理存储，管理信息的分布式存储、提供接口，让用户感觉集群中的信息
小书生啊·2023-12-17 06:29

网络时间服务器

使用chrony配置时间服务器配置chrony客户端向服务器同步时间1时间同步的必要性一些服务对时间要求非常严格，例如，图所示的由三台服务器搭建的ceph集群。
xiongjiale@·2023-12-16 22:03

ceph rgw: zone/zone/group/realm

阿里云Region和AZ地域（Region）指物理的数据中心。资源创建成功后不能更换地域。当前所有的地域、地域所在城市和RegionID的对照关系如下表所示。可用区（AvailabilityZone，简称AZ）是指在同一地域内，电力和网络互相独立的物理区域。同一可用区内实例之间的网络延时更小。在同一地域内可用区与可用区之间内网互通，可用区之间能做到故障隔离。是否将实例放在同一可用区内，主要取决于对
fengyueqiao·2023-12-16 19:03

【理论研究】漫谈云计算IT基础设施05-超融合技术

你说它是分布式存储，但是它同时又是硬件服务器与存储；你说它算硬件，但是它又离不开分布式存储软件。传统的IT基础设施架构，主要分为网络、计算、存储三层架构。
工程师Waiting·2023-12-16 17:06

云原生之深入解析Kubernetes本地持久化存储方案OpenEBS LocalPV的最佳实践

一、K8s本地存储K8s支持多达20+种类型的持久化存储，如常见的CephFS、Glusterfs等，不过这些大都是分布式存储，随着社区的发展，越来越多的用户期望将K8s集群中工作节点上挂载的数据盘利用起来
╰つ栺尖篴夢ゞ·2023-12-16 15:38

ElasticSearch与HBase的分布式存储设计

本文内容覆盖如今两大非结构化数据库之间的区别详情介绍从各个角度详细对比1.官方定位HBase是Hadoop数据库，是一个分布式、可扩展的大数据存储。当您需要对大数据进行随机、实时的读/写访问时，请使用ApacheHBase™。这个项目的目标是在商用硬件集群上托管非常大的表——数十亿行X数百万列。ApacheHBase是一个开源的、分布式的、版本化的、非关系型的数据库，以Chang等人的Google
不学会Ⅳ·2023-12-16 09:32

CEPH可靠性的计算方法分析

本文主要针对UnitedStack公司在巴黎峰会上对Ceph可靠性的计算方法(https://www.ustack.com/blog/build-block-storage-service/)做了一个更明确的分析和阐述
孙琦Ray·2023-12-16 06:41

Ceph集群磁盘没有剩余空间的解决方法

故障描述OpenStack+Ceph集群在使用过程中，由于虚拟机拷入大量新的数据，导致集群的磁盘迅速消耗，没有空余空间，虚拟机无法操作，Ceph集群所有操作都无法执行。
孙琦Ray·2023-12-16 06:41

分布式存储的架构、隐患及解决方法

分布式存储的架构、隐患及解决方法Raid和副本把磁盘们相同偏移量的一块空间横向进行分割，组成一条逻辑上存储空间。数据是先写满一条条带，再写下一条条带。一个卷可以有很多条条带组成。
程序员老舅·2023-12-16 04:05

k8s 对接ceph并使用StorageClass动态创建pvc

k8s对接ceph并使用StorageClass动态创建pvc前提条件，已经安装ceph和k8s，具体环境信息如下：一.服务器环境操作系统：centos7.6ceph版本：14.2.10（nautilus
隔壁老姚·2023-12-16 04:04

基于kolla-ansible部署的openstack外接ceph

连接cephopenstack连接ceph主要是三个组件：glance，cinder，nova1使用外接ceph意味着不需要通过kolla去部署ceph，因此需要在全局配置中关闭ceph组件；vi/etc
Dreams_13·2023-12-16 00:14

浅谈对微服务的理解

学习期间看过的内容有微服务设计云原生分布式存储基石：etcd深入解析Docker技术入门与实战每天5分钟玩转Kubernetes左耳听风从0开始学微服务出现原因微服务为什么会出现？
程序员麻辣烫·2023-12-15 23:43

Linux中的网络时间服务器

本章主要介绍网络时间的服务器使用chrony配置时间服务器配置chrony客户端服务器同步时间1.1时间同步的重要性一些服务对时间要求非常严格，例如如图所示的由三台服务器搭建的ceph集群这三台服务器的时间必须保持一致
L廖锦耀·2023-12-15 23:38

AI：ElasticSearch

ElasticSearch使用Java编写，可以运行在多个服务器上，实现海量数据的处理和分布式存储。
AnyaPapa·2023-12-15 22:18

图解Paxos

一.简要介绍在《聊聊分布式存储——问题与矛盾》中已经提到，在对一个分布式系统进行架构设计时，往往会在可用性和一致性之间反复权衡。为了解决分布式一致性问题，产生了一系列一致性协议和算法。
join_a922·2023-12-15 21:52
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他