分布式存储Ceph

Ceph: 异步信号处理实现

异步信号处理函数原理：创建一个独立的线程，根据信号调用对应的信号处理函数利用管道进行线程之间的通信，在产生信号时，通知信号处理线程，调用信号处理函数主线程中，所有注册的信号的信号处理函数都相同，主要是通知信号处理线程有信号产生信号处理线程收到信号发生的通知时，调用此信号对应的处理函数数据结构structSignalHandler:publicThread{/**监听pipefd[0],用于处理sh
圣地亚哥_SVIP·2023-11-24 10:32

2023年第十六届中国系统架构师大会（SACC2023）-核心PPT资料下载

一、峰会简介本届大会以“数字转型架构演进”为主题，涵盖多个热门领域，如多云多活、海量分布式存储、容器、云成本、AIGC大数据等，同时还关注系统架构在各个行业中的应用，如金融、制造业、互联网、教育等。
百家峰会·2023-11-24 09:08

redis-cluster集群模式

Redis-cluster集群1Redis3.0引入的分布式存储方案2集群由多个node节点组成,redis数据分布在节点之中,在集群之中分为主节点和从节点3集群模式当中,主从一一对应,数据写入和读取与主从模式一样
2301_79410672·2023-11-24 04:49

ceph-deploy bclinux aarch64 ceph 14.2.10【3】vdbench fsd 文件系统测试

接上ceph-deploybclinuxaarch64ceph14.2.10-CSDN博客https://blog.csdn.net/hknaruto/article/details/134347935fsd.conf
hkNaruto·2023-11-24 01:04

bclinux aarch64 ceph 14.2.10 云主机 性能对比FastCFS vdbench

部署参考ceph-deploybclinuxaarch64ceph14.2.10-CSDN博客ceph-deploybclinuxaarch64ceph14.2.10【3】vdbenchfsd文件系统测试
hkNaruto·2023-11-24 01:55

bclinux aarch64 ceph 14.2.10 云主机 4节点 fio

ceph-s由于是基于底层分布式存储的云主机，数据仅供参考本地云盘性能direct=11M读取IOPS=134,BW=134MiB/s[root@ceph-clientrbd]#cd/[root@ceph-client
hkNaruto·2023-11-24 01:55

区块链的下一个风口：IPFS

因此，必须通过其他手段分散存储系统压力，分布式存储和分布式文件系统应运而生。分布式存储多采用普通的硬件设备作为基础设施，因此，单位容量的存储成本也得到大大降低。另外，
阿拉丁先生·2023-11-24 00:56

第六届脑电深度学习入门班（训练营：2023.11.7~11.14）

★课程简介★脑电图（Electroencephalogram,EEG）是脑神经细胞电生理活动在大脑皮层或头皮表面的总体反映，包
茗创科技·2023-11-23 20:48

鲜为人知的故事：《王冠》、爱丽丝公主、弗洛伊德以及精神分析治疗的一件往事

在《王冠》的前两季中，爱丁堡公爵菲利普亲王（PrincePhilip）短暂闪现的童年经历让的观众们大开眼界。菲利普亲王曾被安置在一个装橘子的箱子里从战区偷渡出来。
鹿鸣心理·2023-11-23 19:59

HDFS分布式原理---概念篇

HDFS分布式系统2018年10月9日11:50什么是大数据：短时间内快速的产生海量的多种多样的有价值的数据大数据的技术：分布式存储分布式计算分布式批处理数据积攒一段时间，在未来某一时刻一次性计算一批数据分布式流处理数据实时进行计算
hjy1821·2023-11-23 14:16

第六届脑电深度学习入门班（训练营：2023.11.7~11.14）

★课程简介★脑电图（Electroencephalogram,EEG）是脑神经细胞电生理活动在大脑皮层或头皮表面的总体反映，包
茗创科技·2023-11-23 13:13

redis-cluster集群

1.redis-cluster集群redis3.0引入的分布式存储方案集群由多个node节点组成，redis数据分布在这些节点之中。
小郭902·2023-11-23 13:38

spark算子大全glom_Spark 算子- Value Transformation

，转化为Spark数据块，通过BlockManager管理运行：输入形成RDD后，通过算子操作生成新的RDD，通过Action算子，触发Spark提交作业输出：程序结束数据输出到运行时数据空间，存储到分布式存储或
weixin_39736934·2023-11-23 12:38

一文教你玩转 Apache Doris 分区分桶新功能

过去的单机数据库在大数据量下往往面临存储和IO的限制，而分布式数据库则通过数据划分的规则，将数据打散分布至不同的机器或节点上，形成分布式存储，因此突破了单机存储空间和IO的瓶颈、使库表数据量可以无限拓展
SelectDB技术团队·2023-11-23 10:07

Rook-Ceph 分布式存储系统快速部署

2019独角兽企业重金招聘Python工程师标准>>>Rook-Ceph分布式存储系统快速部署ThisguidewillwalkyouthroughthebasicsetupofaCephclusterandenableyoutoconsumeblock
George_Fal·2023-11-23 09:57

微服务分布式系统中 必须知道的CAP 理论

三者不可同时获得一致性（C）：所有节点都可以访问到最新的数据可用性（A）：每个请求都是可以得到响应的，不管请求是成功还是失败分区容错性（P）：除了全部整体网络故障，其他故障都不能导致整个系统不可用CAP理论就是说在分布式存储系统中
小哇666·2023-11-23 08:33

redis cluster

主从的问题假设我们一台主机有200G的内存,但是业务数据有500G,主从+哨兵只能实现高可用故障切换和冗余备份,但是无法解决容量问题.产生木桶效应.为了最大化利用内存,可以采用cluster集群,就是分布式存储
心似南风·2023-11-23 08:15

bclinux aarch64 openeuler 20.03 LTS SP1 部署 fastCFS

基于已配置好的4个节点部署ceph-0ceph-1ceph-2ceph-3（早期ceph测试环境，名称就不修改了）获取fcfs.shmkdir/etc/fcfscd/etc/fcfswgethttp:/
hkNaruto·2023-11-23 01:32

ceph linux内核配置,centos 7.4-aarch64如何编译Ceph

一、Ceph简介简而言之，Ceph作为一个分布式存储系统设计的目标定位为：①可轻松扩展到数PB级别的容量(Ceph目前的版本可以轻松支持EB级别的存储容量)②能够自动适应多种工作负载的高性能(每秒输入/
weixin_39928787·2023-11-22 22:17

Ceph—报错锦集（mgr2、pgs、mgr依赖缺失等）

Ceph—手动部署Ceph报错锦集（mgr2、pgs、mgr依赖缺失等）报错锦集1.执行./do_cmake.sh时的报错提示2..
梨同学·2023-11-22 22:17

ceph编译_ceph 源码编译in redhat6.4

一.背景由于某地项目需要需要ceph支持redhat6.4，因此需要在redhat6.4basicserver进行源码的编译以及rpm包的生成。
时机-稍纵即逝·2023-11-22 22:17

ceph编译_Ceph 编译（Giant版本）

如今入门Ceph的时候，大家一般用ceph-deploy工具比较多，这个工具的确很强大，很方便，对应的也就是很无脑。
weixin_39639381·2023-11-22 22:17

ceph编译_ceph编译（二） - zrz11的个人空间 - OSCHINA - 中文开源技术交流社区

参考：https://my.oschina.net/linuxhunter/blog/682013一、克隆ceph源码：gitclonehttps://github.com/ceph/ceph.git完成后进入
改之理zcw·2023-11-22 22:46

Ceph10.2.11 configure error解决

https://hub.docker.com/r/haoheipi/ceph_single最近云计算课程有个作业要用到ceph，在编译安装ceph的时候发现缺少各种库，疯狂报错。。。在此记录。
破落之实·2023-11-22 22:16

编译ceph源码

老版本编译（存在autogen.sh）1、从github下载源码，要加上–recursive参数，不然ceph源码内的很多子程序无法下载gitclone--recursivehttps://github.com
supermary0712·2023-11-22 21:13

直接从github上clone ceph 源码，编译 Ceph 的时候报错的解决方法

如果直接使用ceph的src.rpm包，编译成功，没有任何错误。
guzyguzyguzy·2023-11-22 21:11

ceph集群安装

大数据存储课设centos7多节点部署整体设计hostnameiproleadmin192.168.10.101admin–安装ceph-deployceph1192.168.10.110mon/mgr
OwnYoung·2023-11-22 21:10

CEPH iSCSI GateWay 编译部署安装

参考链接：https://docs.ceph.com/en/latest/rbd/iscsi-overview/https://www.enterprisestorageforum.com/storage-hardware
DeamonXiao·2023-11-22 21:08

ceph编译及虚拟机环境搭建

虚拟机前置通用步骤：配置静态ip、更换yum源、安装git。机器配置建议：内存8G以上，硬盘容量40G以上。系统：Centos7配置代理https下载使用export命令，每次重启电脑都需要重新开启代理，可以通过向/etc/profile.d/proxy.sh写入环境变量来持久化ip代理。#ip代理exporthttp_proxy=http://192.168.30.216:7890exporth
DeamonXiao·2023-11-22 21:38

ceph编译报错解决

1.执行./install-deps.sh提示deb无法安装解决方案：直接使用dpkg-i来安装deb，会提示缺失3个库，库名如下：cythonpythondh-systemd其中cython和python手动安装好后，也会依旧报错。此时修改debian/control文件，从文件里去掉这3个库即可。2.执行./install-deps.sh提示pip不存在解决方案：在activate_virtu
rongyongfeikai2·2023-11-22 21:06

Redis： 集群部署

2.Redis集群RedisCluster即Redis集群，是Redis官方在3.0版本推出的一套分布式存储方案。完全去中心化，由多个节点组成，所有节点彼此互联。
Taopper·2023-11-22 18:58

WTable:RocksDB使用技巧之分布式存储扩容演进

1.背景RocksDB是由Facebook公司开源的一款高性能KeyValue存储引擎，目前被广泛应用于业界各大公司的存储产品中，其中就包括58存储团队自研的分布式KV存储产品WTable。RocksDB基于LSMTree存储数据，它的写入都是采用即时写WAL+Memtable，后台Compaction的方式进行。当写入量大时，Compaction所占用的IO资源以及对其读写的影响不容忽视。而对于
爱情小傻蛋·2023-11-22 09:42

漏洞预警|Apache Airflow Hive Provider命令注入漏洞

ApacheAirflowHiveProvider是一个使用SQL读取、写入和管理分布式存储中的大型数据集的工具
棱镜七彩·2023-11-22 06:46

Docker-13：Docker安装Hbase

1.背景HBase是一个分布式的、面向列的开源数据库，该技术来源于FayChang所撰写的Google论文Bigtable：一个结构化数据的分布式存储系统”。
王老邪·2023-11-22 04:30

使用Docker部署HBase并使用Java-API连接

HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PCServer上搭建起大规模结构化存储集群。
当一艘船沉入海底8·2023-11-22 04:56

预约线上发布会 | “星星之火”精彩观点抢先看

星海全闪架构暨星飞存储发布会，到场嘉宾共同见证了全新的分布式全闪架构“星海（XSEA，eXtremeShared-EverythingArchitecture，极速全共享架构）”及星飞（XINFINI）全闪分布式存储的发布
XSKY星辰天合·2023-11-22 04:05

迎接“全全闪”时代 星辰天合发布星海架构和星飞产品

星海全闪架构暨星飞存储发布会，到场嘉宾共同见证了全新的分布式全闪架构“星海（XSEA，eXtremeShared-EverythingArchitecture，极速全共享架构）”及星飞（XINFINI）全闪分布式存储的发布
XSKY星辰天合·2023-11-22 04:04

使用PHP操作MinIO

最近实验了下MinIO，发现这个分布式存储还是很好用的，具体不做赘述。此处记录下使用PHP操作存储桶下的文件及文件夹。
不如喫茶去·2023-11-22 03:51

hadoop、hive、DBeaver的环境搭建及使用

本文主要介绍hadoop、hive的结构及使用，具体的操作步骤见最后的附件；hadoop提供大数据的存储、资源调度、计算，分为三个模块：HDFS、YRAN、MapReduceHDFS提供数据的分布式存储
骑士999111·2023-11-22 03:14

【ceph】ceph集群的故障域是怎么快速修改导入导出

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-11-22 00:59

rook-ceph部署Object Storage后，使用s3cmd消费 Object Storage

背景：本文主要介绍rook-ceph部署ObjectStorage后，使用s3cmd消费ObjectStorage的ConsumetheObjectStorage部分。
晴朗711·2023-11-22 00:28

rook-ceph osd down问题排查

rookcephosd异常(down)问题排查初始化问题显现，如下：[root@rook-ceph-tools-78cdfd976c-dhrlx/]#cephosdtreeIDCLASSWEIGHTTYPENAMESTATUSREWEIGHTPRI-AFF
大鹿小野·2023-11-22 00:28

helm 部署 rook-ceph（腾讯云镜像仓库）

helm安装rook-ceph（腾讯云镜像仓库）1、rook-ceph-operatorhelmrepoaddrook-releasehttps://charts.rook.io/releasehelmrepoupdatehelmsearchreporook-release
Linux云计算+运维开发·2023-11-22 00:58

Kubernetes中分布式存储Rook-Ceph部署快速演练

最近在项目中有涉及到Kubernetes的分布式存储部分的内容，也抽空多了解了一些。
dotNET跨平台·2023-11-22 00:26

基于kubesphere的k8s环境部署单点版本的rook-ceph

文章目录前言一、rook-ceph是什么？
大新新大浩浩·2023-11-22 00:22

rook-ceph部署

rook是云原生存储编排器，本身不提供存储。下载gitclone--single-branch--branchv1.11.4https://github.com/rook/rook.gitcdrook/deploy/examples修改镜像地址images.txtoperator方式部署rookkubectlapply-fcrds.yaml-fcommon.yaml-foperator.yaml部
黑虎含珠·2023-11-22 00:21

电力感知边缘计算网关产品设计方案-业务流程设计

边缘计算数据通信框架图：2.边缘计算数据处理方案边缘计算智能网关通过获取工业生产加工的原始数据，实现数据实时通信、边缘计算控制、分布式运算、分布式存储、网关数据安全防护等功能，为工业流程生
人生淡然·2023-11-21 22:36

Web3 分布式存储 IPFS（Web3项目一实战之四）

IPFS是一种分布式文件存储协议，它允许世界各地的计算机存储和服务文件作为一个巨大的对等网络的一部分来存储和服务文件。世界上任何地方的任何计算机都可以下载IPFS软件并开始托管和提供文件。如果有人在自己的计算机上运行IPFS，并将文件上传到IPFS网络，那么世界上其他任何运行IPFS的人都可以查看和下载该文件。本地安装IPFS我们可以下载官方已经编译好的二进制文件（安装包）：https://doc
甄齐才·2023-11-21 21:01

Ceph工作原理详解

一、Ceph概述这里简单的说一下相关的组件，只是简单介绍组件概念Monitor一个Ceph集群需要多个Monitor组成的小集群，它们通过Paxos同步数据，用来保存OSD的元数据OSDOSD负责相应客户端请求返回具体数据的进程
云计算雷哥·2023-11-21 13:43

ceph的功能组件和架构概述

1、ceph是什么？ceph是可靠的、可扩展的、统一的，分布式的存储系统。ceph是存储系统，底层是用C++语言开发的。2、ceph提供什么?
临风赏月·2023-11-21 13:12
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他