Ceph存储系统

分布式存储与传统存储对比分析

分布式存储的定义分布式存储系统，是将数据分散存储在多台独立的X86服务器上，通过通用的存储协议对外提供FC、ISCSI、RBD、NAS、S3等存储接口，每个存储服务器节点既能够进行数据存放和性能加速，也同时提供数据控制和存储接口对接
LD_ee65·2024-01-07 01:46

实时数仓模型

实时数仓主要是基于数据采集工具，如canal等原始数据写入到kafka这样的数据通道中，最后一般都是写入到类似于HBase这样的OLAP存储系统中。对外提供分钟级别，甚
jero_lei·2024-01-06 23:48

Proxmox VE 超融合集群销毁Ceph Pool

作者：田逸（formyz）销毁CephPool的目的一套五节点的ProxmoxVE超融合集群，当初为有效利用资源，配备了Nvme高性能磁盘和大容量的SATA机械磁盘（如图所示），高性能Nvme磁盘用于虚拟机的系统盘
4/5$全真龙门·2024-01-06 22:39

Flume基础知识（八）：Flume 拓扑结构全解

1.简单串联这种模式是将多个flume顺序连接起来了，从最初的source开始到最终sink传送的目的存储系统。
依晴无旧·2024-01-06 17:51

Redis高级特性和应用(慢查询、Pipeline、事务、Lua)

Redis的慢查询许多存储系统（例如MySQL)提供慢查询日志帮助开发和运维人员定位系统存在的慢操作。
原来是好奇心·2024-01-06 16:38

2022-07-12

HierarchicalDatabase，HDB）关系数据库（RelationalDatabase，RDB）面向对象数据库（ObjectOrientedDatabase，OODB）XML数据库（XMLDatabaseXMLDB）键值存储系统
weeeb·2024-01-06 13:41

六：分布式架构存储设计

这里写目录标题一.单机存储系统介绍1.什么是存储引擎？？？
qq_44949002·2024-01-06 12:12

计算机组成原理——第三章存储系统

•掌握存贮器的基本功能及各类存储器读写信息的原理•特别要注意•半导体存储器的外特性和工作原理•半导体与CPU的连接方式•这样可更加强对整机概念的理解。•必须了解高速缓冲存储器(CACHE)、主存和外存的组成，以及他们在存储器的层次结构中各自所起的作用主存储器的技术指标⚫存储容量–主存存储容量：以字节B（Byte）为基本单位–半导体存储器芯片：以位b（Bit）为基本单位–存储容量以210＝1024规
Ruannn（努力版）·2024-01-06 11:18

第五届脑电深度学习入门班（训练营：2023.9.12~9.20）

★课程简介★脑电图（Electroencephalogram,EEG）是脑神经细胞电生理活动在大脑皮层或头皮表面的总体反映，包
茗创科技·2024-01-06 11:25

Linux操作系统基础(11)：Linux的环境变量

1.环境变量的介绍在Linux系统中，环境变量是一种用于存储系统环境信息的特殊变量，包含了系统运行所需的配置信息，以及用户自定义的一些配置信息，甚至影响程序的行为、系统的运行以及用户的工作环境。
Jungout·2024-01-06 11:10

安装Ceph集群

目录1、服务端部署2、Dashboard的配置3、配置块存储4、配置对象存储5、配置文件系统1、服务端部署准备环境系统版本：centos7.4x86_64server硬件配置：5台vm，1核1G内存，每台node角色的机器至少挂载1块不低于5个G的空闲盘为osd存储​ 主机名        ip           role admin      192.168.153.130       adm
宇博士·2024-01-06 10:36

ceph存储 object的attr和omap操作

这里有一个ceph的原则，就是所有存储的不管是块设备、对象存储、文件存储最后都转化成了底层的对象object，这个object包含3个元素data，xattr，omap。
大隐隐于野·2024-01-06 08:49

私有云平台搭建openstack和ceph结合搭建手册

OpenStack与云计算什么是云？如何正确理解云，可以从以下几个方面。云的构成。用户：对用户而言是透明无感知的，不用关心底层构成，只需要知道利用云完成自己任务即可。云提供商：对云资产管理和运维。云的特点。弹性扩展；自助服务；标准接口方便二次开发和其他系统对接；付费和计量。云的定义。云是指你作为接受服务的对象，是云端，不管你在何时何地，都能享受云计算提供的服务。云是网络、互联网的一种比喻说法。云分
Destiny()·2024-01-06 08:48

Ceph分布式存储

一.Ceph分布式存储1.Ceph概念（1）Ceph是一种开源的分布式存储系统，2006年出现，是私有云事实上的标准-OpenStack的默认存储后端。用于在整个集群中存储海量数据。
z怀夕·2024-01-06 08:46

Ceph Large omap objects现象及原理分析

随着Ceph对象存储的产品不断成熟，用户数量的不断增加，对集群的性能考验也愈发严峻。特别是某些大型用户在特定场景下需要对单个bucket进
大隐隐于野·2024-01-06 08:15

BigData~05：HBase

https://www.cnblogs.com/ityouknow/p/7344001.html一、简介HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PCServer
帅可儿妞·2024-01-06 07:29

Windows安装Minio(超详细)

Minio是一个开源的、云原生的分布式对象存储系统，是一个基于ApacheLicensev2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口，非常适合于存储大容量非结构化的数据。
小徐很努力·2024-01-06 00:08

Alluxio中国行（一）开源分布式存储系统Alluxio的历史、现状和未来

七月底八月初在南京、上海和北京三地，Alluxio项目创立者李浩源以及部分核心开发者举办了一系列Meetup活动。活动现场介绍了Alluxio项目的新增功能，Alluxio生态系统展望，以及探讨了Alluxio在未来的发展路线。同时还分享了Alluxio在百度、去哪儿网的实践案例，与广大开发者及用户积极交流，碰撞思想。Alluxio，前称Tachyon，源自UCBerkeleyAMPLab，是一个
言则yanze·2024-01-05 22:43

云卷云舒：【实战篇】Redis迁移

1.简介RemoteDictionaryServer(Redis)是一个由SalvatoreSanfilippo写的key-value存储系统，是一个开源的使用ANSIC语言编写、遵守BSD协议、支持网络
Cloud云卷云舒·2024-01-05 21:49

分布式【Zookeeper三大核心之数据节点ZNode】

ZooKeeper在分布式领域，能够帮助解决很多很多的分布式难题，但是底层却只是依赖于两个主要的组件：ZNode文件/数据存储系统和watch监听系统，另外还有一大模块，就是ACL系统。
sober_me·2024-01-05 21:09

Reds来看看，会有一定的收获！！！

1.Redis概述1.NoSQL数据库(NotOnlySQL)的一种,即非关系型数据库2.Redis是一个开源的key-value存储系统。
super_zjl·2024-01-05 19:19

Spark基础解析（一）

1、Spark概述1.1什么是Spark1.2Spark内置模块SparkCore：实现了Spark的基本功能，包含任务调度、内存管理、错误恢复、与存储系统交互等模块。
有语忆语·2024-01-05 10:04

Hive实战处理（二十三）hive整合phoenix

1、hive整合phoenix的原理Hive支持使用HDFS之外的存储系统作为底层存储系统，其中官方明确支持HBase，Kudu，Druid和JDBC(MySQL等)。
sheep8521·2024-01-05 08:13

kafka 偏移量的类型与提交方式

kafkacheckpoint在流处理中，“checkpoint”通常指的是将应用程序的状态保存到可靠的存储系统中，以便在发生故障或应用程序需要重启时能够从先前的状态中恢复。
贾斯汀玛尔斯·2024-01-05 08:49

java与大数据：Hadoop与MapReduce

它由两个核心组件组成：Hadoop分布式文件系统（HDFS）：HDFS是Hadoop的存储系统，它将大数据集分割成多个块，并将这些块分布
naer_chongya·2024-01-05 08:38

flink将数据写入redis

前言通过flink分析出来的数据，经常需要写入到外部存储系统，以供其他应用来使用这些数据，比如redis就是一个很好的存储数据库，写入到redis后，应用可以读取redis中的数据做统计、分析、计算等1
逆风飞翔的小叔·2024-01-05 06:55

【网络】华为交换机排查收发光情况以及思路

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2024-01-05 02:24

【ceph】pg状态不正常，Degraded data redundancy: 460/77222938 objects degraded (0.001%), 11 pgs degraded

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2024-01-05 02:24

【运维面试100问】（十三）谈谈session和cookic的区别

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2024-01-05 02:53

【ceph】使用 upmap 在 OSD 上手动重新平衡数据，比前面用reweight、balance香多了

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2024-01-05 02:23

CTF流量分析经典例题详解

目录入门题型题目：Cephalopod(图片提取)题目：特殊后门(icmp协议信息传输)题目：手机热点(蓝牙传输协议obex,数据提取)题目：想蹭网先解开密码(无线密码破解)进阶题型题目：抓到一只苍蝇(
未知百分百·2024-01-05 01:34

K8s -- DaemonSet

下面是一些典型的DaemonSet的使用场景：在每台节点上运行一个集群存储服务，例如运行glusterd，ceph。在每台节点上运行一个日志收集服务
沉沦2014·2024-01-04 22:45

CentOS7 安装Redis和PHP-redis扩展

Redis是一个key-value存储系统，属于我们常说的NoSQL。它遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。
天咋哭了·2024-01-04 21:58

分布式存储题库

分布式存储题库分布式存储系统要求实现的特性有哪些？答：低成本、高性能、可扩展、易用。分布式存储系统设计的技术性挑战包括那些。答：数据分布、一致性、容错、负载均衡、并发控制、易用性、压缩/解压缩。
@Yauo·2024-01-04 19:18

Nosql数据库的分类及应用场景

是近今年新发展起来的存储系统。当前使用最多的是key-value模型，是一种非关系型数据库，主要是解决是海量数据下的数据库性能和扩展能力。它最大的特点在于要求的数据量大，对事物的要求低。
zjqbobo·2024-01-04 18:47

ceph存储

ceph一.存储分类1.本地存储的文件系统ext3ext4efsntfs2.网络存储nfs网络文件系统hdfs分布式网络文件系统glusterfs分布式网络文件系统3.传统存储(1).DASSAS,SATA
MoonSoin·2024-01-04 17:26

redis-基本语法

REmoteDIctionaryServer(Redis)是一个由SalvatoreSanfilippo写的key-value存储系统，是跨平台的非关系型数据库。
金灰·2024-01-04 16:18

云存储系统中的单点故障是什么？

什么是数据存储系统中的单点故障？数据存储系统中的单点故障可以理解为系统的一个元素、组件或部分发生故障，其故障会导致整个系统瘫痪。通常有几种情况：假设一个存储设备只有一个电源，这是单点故障。如果电源出
CESS_Cloud·2024-01-04 11:05

Ceph RADOS集群

RADOS(Reliable,AutonomicDistributedObjectStore)可靠、自由分布式对象存储RADOS是抽象概念，是客户端对象存储的实体，而RADOS内部是由Monitor和OSD组件提供服务Monitor提供可靠性，提供可靠性就是集群，所以Monitor一般不会是一个，负责维护和分发集群的关键元数据OSD也是个抽象概念，实质其实就是一个硬盘或者一个RAID组，通常一个硬
Y。S。H。·2024-01-04 09:45

SpringBoot入门到精通-使用Jasypt对数据库账号密码加解密

引用代码库com.github.ulisesbocchiojasypt-spring-boot-starter3.0.5配置启动@EnableEncryptablePropertiespublicclassCephS3TransferApplication
瓦哥架构实战·2024-01-04 09:14

Ceph源码分析-std::unique_ptr＜rgw::sal::RGWObject::WriteOp＞ obj_op = head_obj-＞get_write_op(&obj_ctx)；

std::unique_ptrobj_op=head_obj->get_write_op(&obj_ctx);这行代码是C++代码，涉及到智能指针和某个对象或库的特定操作。我会为你逐步解释这行代码：std::unique_ptr:这是C++11引入的一个智能指针，用于管理对象的生命周期。unique_ptr确保其指向的对象在任何时刻都只有一个unique_ptr拥有它，当unique_ptr被销毁
瓦哥架构实战·2024-01-04 09:14

【ceph】Rados的客户端RadosClient|MonClient|Osdc

本文介绍Ceph客户端方面的某些模块的实现。
bdview·2024-01-04 09:43

ceph架构核心之RADOS

ceph架构核心之RADOS一、ceph生态系统的概念架构图一：ceph生态系统的概念架构图二：ceph生态系统简化后的分层视图图三：一个简单的ceph生态系统二、Ceph架构核心之RADOS图四：RADOS
S1436006750·2024-01-04 09:37

Ceph入门到精通-数据完整性签名

S3Glacier要求您通过签署请求。若要对请求进行签名，请使用加密哈希计算数字签名功能。加密哈希是一个函数，它根据输入。哈希函数的输入包括请求的文本和密钥访问密钥。哈希函数返回一个哈希值，您将其包含在请求中，作为签名。签名是请求标头的一部分。Authorization收到您的请求后，S3Glacier会使用相同的方法重新计算签名哈希函数和用于对请求进行签名的输入。如果生成的签名与请求中的签名匹配
瓦哥架构实战·2024-01-04 09:36

Ceph源码分析-使用VScode调试ceph-osd教程

前言：本文以cephosd部分为例，为您演示通过第三方社区提供的vscode编辑软件，对cephosd进行进行图形化单步调试以及配置操作。
瓦哥架构实战·2024-01-04 09:36

ceph之rados设计原理与实现第三章：集群的大脑monitor

Monitor和核心是OSDMonitor，利用分布式领域的一致性算法Paxos来维护集群唯一的一张表OSDMap。Monitor采用分担负荷的方式，一个集群可以有多个Monitor节点，任何时刻，任何客户端或者OSD都可以通过和任意一个Monitor进行交互，以索取或者请求更新集群表OSDMap。OSD上下电、故障上报、故障切换等操作都由OSD独立与Monitor通过协商完成，每个操作都有可能多
mxy990811·2024-01-04 09:06

HBase基本概念与基本使用

1.HBase简介1.1什么是HBaseHBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PCServer上搭建起大规模结构化存储集群。
Yobhel·2024-01-04 08:28

C#中Redis使用简单教程

一、Redis简介Redis是一个开源的高级键值存储系统，可以在内存中存储数据，并通过持久化机制将数据保存到磁盘上。Redis支持多种数据结构，如字
Curry30_chen·2024-01-04 05:36

6000 redis requests per hour_Redis概述及安装 - coydone

Redis简介Redis概述Redis：REmoteDIctionaryServer(远程字典服务器)，是当前比较热门的NOSQL系统之一，它是一个开源的使用ANSIc语言编写的key-value存储系统
weixin_39957318·2024-01-04 05:05

cephfs cap机制介绍

一、Cap：概述cap是文件系统层面的，包括元数据、数据操作。cap和mds分布式锁是对应的cap是MDS分配给client对inode的操作能力权限。不同的客户端，或者同一客户端不同时刻，对同一inode持有cap可能是不同的•作用：MDS通过cap对多个客户端操作同一个inode进行权限管理二、基本cap三、Cap和锁四、Cap结构
大隐隐于野·2024-01-04 04:36
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他