分布式存储-ceph

k8s集群-6（daemonset job cronjob控制器）

DaemonSet的典型用法:例如glusterd、ceph。在每个节点上运行集群存储DaemonSet，在每个节点上运行日志收集DaemonSet，例如f
小米小可爱·2023-10-05 11:12

AI如何实施本地化

Java应用开发中的Maven是对实体本地jar包的一种互联网分布式存储实现。Maven对项目的构建分为清除clean，编译compile,package打包，insta
程序员是干活的·2023-10-05 09:36

1.HDFS基础知识

具备哪些特性（功能、优点、作用）（参考视频-「为什么中国网盘这么难」）分布式分布式存储能-无限扩展-支持海量数据存储分块存储针
敲代码的羊·2023-10-05 05:41

ceph集群和数据库到底是储存数据_Amazon Aurora 数据库集群

AmazonAurora数据库集群包含一个或多个数据库实例以及一个管理这些数据库实例的数据的集群卷。Aurora集群卷是一个跨多个可用区的虚拟数据库存储卷，每个可用区具有一个数据库集群数据副本。Aurora数据库集群由两类数据库实例组成：主数据库实例–支持读取和写入操作，并执行针对集群卷的所有数据修改。每个Aurora数据库集群均有一个主数据库实例。Aurora副本–连接到同一存储卷作为主数据库实
weixin_39898150·2023-10-04 21:20

【es】通过API操作es集群

2.可扩展性强：天然支持分布式存储，可简单实现上千台服务器的分布式横向火绒。3.高可用，容灾性能好：通过主备节点及故障自动检测与恢复，实现高可用。一、关于ES和MySQL的概
Bogon·2023-10-04 16:18

【译】Apache Hadoop 系列之三（用户指南）

概述HDFS是使用Hadoop程序来实现的分布式存储系统。一个HDFS集群主要包含管理文件系统命名空间的Namenode以及存储实际数据的Datanode
Kooola大数据·2023-10-04 16:02

喜讯！滨合云智实力获Filecoin创始人高度认可！亲自为高标准矿场点赞！

2019年，滨合云智研发团队持之以恒专注分布式存储技术以及ipfs/filecoin相关技术研发，积极提交相关代码，积极参与filecoin测试网等各个阶段并帮助File
滨合云智·2023-10-04 10:05

为什么比特币不怕被盗？|区块链专题（7）

比特币的去中心化是用非对称加密技术和分布式存储实现的。这一节我们继续讲比特币的第2个特性（即不可篡改特性）及其技术实现的来源。
黄金小哥·2023-10-04 02:15

Hadoop介绍——HDFS

•Hadoop简介：hadoop官网–分布式存储系统HDFS（HadoopDistributedFileSystem）POSIX•分布式存储系统•提供了高可靠性、高扩展性和高吞吐率的数据存储服务–分布式计算框架
南宫萧言·2023-10-04 01:15

苦荬菜（Ixeris polycephala）

苦荬菜是一种常见的野草，属菊科苦荬菜属。我们老家叫它“延延曲儿”，是羊儿兔儿等牲畜及鸡鸭鹅等家禽爱吃的“好草”。我们割草的时候专挑苦荬菜。苦荬菜有乳汁，割草时把手弄得粘糊糊的。为了家里的羊儿兔儿能吃上好草，我们是不在乎把手弄脏的。苦荬菜不仅是营养丰富的饲用草，也是非常漂亮的野花。它的每一朵“花”其实是很多舌状花簇生在一起形成的头状花序。把“花瓣”放大了看，可以看到顶端有5个锯齿，每一个锯齿才代表了
空空_5343·2023-10-03 00:49

一览IPFS技术与应用 探寻Filecoin激励逻辑

本篇研报将从分布式存储的发展沿革、技术的第一性角度出发阐述IPFS的技术与应用，并延展至建立在IPFS上的Filecoin激励逻辑，展现围绕IPFS展开的生态图景。
17722458029·2023-10-02 22:51

k8s主从自动切换mysql_K8S与Ceph RBD集成-多主与主从数据库示例

参考文章：感谢以上作者提供的技术参考，这里我加以整理，分别实现了多主数据库集群和主从数据库结合CephRDB的实现方式。以下配置只为测试使用，不能做为生产配置。
走召可可·2023-10-02 20:32

ceph设计原理与实现(RBD块存储)

1、通过两种方式访问RBD：librbd、krbdLibrbd基于librados的用户态接口库。krbd集成在LINUX中。2、RBD的块设备称为imageimage.png3、RBD的三种存储方式image.png4、imageimage.png5、RBD支持快照和克隆
SkTj·2023-10-02 19:17

猛犸大陆——区块链核心技术

猛犸大陆显卡矿机；QQ群+770528986跟传统的分布式存储有所不同，区块链的分布式存储的独特性主要体现在两个方面：一是区块链每个节点都按照块链式结构存储完整的数据，传统分布式存储一般是将数据按照一定的规则分成多份进行存储
d719f6b05f08·2023-10-02 16:15

编程随笔-ElasticSearch知识导图(2)：分布式架构

带着图1中的问题我们来探究一下ES集群，ES集群是一个典型的主从结构，从某种意义上来说，符合现今大多数主流分布式存储、分布式计算系统的审美要求。下面我们逐步来了解集群中的这些东东。  
weixin_34186950·2023-10-02 13:40

kolla-ansible在ubuntu部署openstack

使用kolla-ansible部署一个openstackvictoria版集群，然后对接ceph存储。
林凡修·2023-10-02 08:59

组件分享之后端组件——一个简单且高度可扩展的分布式文件系统seaweedfs

组件基本信息组件：seaweedfs开源协议：Apache-2.0License内容本节我们分享一个分布式存储系统seaweedfs，它是一个用于bl
cn華少·2023-10-02 04:55

“去中心化”真的去了中心吗？

去中心化：不需要中心机构来验证交易，而是使用非对称加密技术和分布式存储，依靠所有节点来验证交易真伪。图片:https://images-cdn.shimo.im/RYE
fengtasy·2023-10-02 01:46

Hadoop3.x组件HDFS入门

HDFS，全称HadoopDistributedFileSystem，即Hadoop分布式文件存储系统，是Hadoop核心组件之一，是大数据生态最底层的分布式存储服务。
文景大大·2023-09-30 21:06

Ceph学习---环境搭建

Ceph操作1、准备机器CentOS7四台虚拟机(4C/4G/50G/50G)这个配置是我练习用的，生产请根据实际情况使用2、虚拟机分配如下主机名角色ipNATCephAdminceph-deploy+
一百零八步·2023-09-30 19:03

ceph-rgw读写事务性

背景rgw写一个对象的时候需要更新文件内容，又要更新indexpool中的索引，如何保证多个操作的一致性，也就是如何保证多个操作的事务性。有没可能只更新了文件内容而没更新indexpool，有没可能并发操作下indexpool和文件内容并不一致。分析这里其实有两个问题：1）原子性问题，也就是只更新了index而没更新数据，或者说只更新了数据而没更新index。答：这里实际用了最终一致性。也就是记录
小跑001·2023-09-30 13:08

Ceph源码编译和调试之ceph deploy方式

Ceph版本：14.2.22操作系统：ubuntu18.04前言ceph-deploy默认使用官方发布的ceph安装包来搭建集群，如果想要调试ceph集群，需要安装对应的dbg包，也可以使用本地编译出来的替换相关的二进制文件和动态库
无Q小量·2023-09-30 06:26

分布式算法相关，使用Redis落地解决1-2亿条数据缓存

面试题：1~2亿数据需要缓存，请问如何设计个存储案例回答：单机单台100%不可能，肯定是分布式存储，用redis如何落地？
fiveym·2023-09-29 19:44

virtio 虚拟化系列之一：从 virtio 论文开始(文末有福利~)

SmartX是中国领先的超融合产品与企业云解决方案提供商，拥有国内最顶尖的分布式存储和超融合架构研发团队，在分布式存储、虚拟化计算、微服务、容器、前端开发、自动化测试等领域都做着行业最前沿的实践。
Linux阅码场·2023-09-29 18:12

FastDFS部署

Tracker，Storage，nginx（fastdfs-nginx-module）一个Tracker下可以挂在多个Storage,从而实现分布式存储。
b哈利路亚d·2023-09-29 16:16

读懂Filecoin

@[toc]Filecoin项目介绍Filecoin项目：Filecoin是运行在IPFS上的一个激励层，是一个基于区块链的分布式存储网络，它把云存储变为一个算法市场，通证(FIL)在这里起到了很重要的作用
夏洛的克·2023-09-29 16:03

单机高并发模型设计

背景在微服务架构下，我们习惯使用多机器、分布式存储、缓存去支持一个高并发的请求模型，而忽略了单机高并发模型是如何工作的。
StongFang·2023-09-29 06:00

后端存储实战课笔记

比如说，如何从单机的存储系统逐步演进为分布式存储系统；如何在线平滑的扩容我们的存储系统。在海量数据篇，我们重点解决高
三角形代表重生·2023-09-29 06:29

介绍大数据处理架构Hadoop以及其生态系统

Hadoop的特点1.高可靠性采用冗余数据存储方式，Hadoop采用分布式存储方式，即使一个
转身丶即天涯·2023-09-29 04:40

小米云原生文件存储平台化实践：支撑 AI 训练、大模型、容器平台多项业务

在训练平台的存储方案中，小米曾尝试了多种不同的存储方式，包括Ceph+NFS、HDFS和对象存储挂载等。然而，这些不同的存储方式导致了数据冗余和维护管理成本的增加，同时也带来了扩展性和性能方面的问题。
Juicedata·2023-09-28 21:31

k8s1.19使用ceph14

一、静态pv（rbd）方式1、所有k8s节点安装依赖组件注意：安装ceph-common软件包推荐使用软件包源与Ceph集群源相同，软件版本一致。
大虾别跑·2023-09-28 16:46

分享55个C源码源代码总有一个是你想要的

pwd=8888提取码：88881.项目名称apachesubversion版本控制系统v1.10.3Ceph分布式文件系统v17.2.5clip命令行插图处理器v0.8curve分布式存储系统v1.2.6curve
zdh13370188237·2023-09-28 14:34

分享55个C源码源代码总有一个是你想要的

pwd=8888提取码：88881.项目名称apachesubversion版本控制系统v1.10.3Ceph分布式文件系统v17.2.5clip命令行插图处理器v0.8curve分布式存储系统v1.2.6curve
zdh13370188237·2023-09-28 14:34

Ceph入门到精通-sysctl.conf 配置

sysctl.confUbuntuserveroutofboxisnotoptimizedtomakefulluseofavailablehardware.Thismeans“out-of-box”setupmightfailunderhighload.Soweneedtotweaksystemconfigurationformaximumconcurrancy.SysctlTweaksOpenv
瓦哥架构实战·2023-09-28 11:14

Ceph代码分析---线程池

Ceph中实现了两种类型的线程池类（本质相同），并实现消息队列处理类。其中线程池类负责具体线程创建，维护和销毁。
数据存储张·2023-09-28 11:53

企业级磁盘阵列存储系统由硬到软全析

之所以称其为集中存储是因为相对于分布式存储系统
数据存储张·2023-09-28 11:22

【运维日常】华为云专线实现idc通过nat出网

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-09-28 10:58

【python零基础入门学习】python进阶篇之高阶函数

python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph
向往风的男子·2023-09-28 10:55

Greenplum 对比 Hadoop

Greenplum属于MPP架构，和Hadoop一样都是为了解决大规模数据的并行计算而出现的技术，两者的相似点在于：分布式存储，数据分布在多个节点服务器上分布式并行计算框架支持横向扩展来提高整体的计算能力和存储容量都支持
post_yuan·2023-09-28 08:20

Ceph入门到精通-Linux内核网络参数优化小结

tcp建连优化1tcp建连，降低客户端超时时间net.ipv4.tcp_syn_retries=62tcp建连，服务端避免syn攻击netstat-s|grep"SYNstoLISTEN"1192450SYNstoLISTENsocketsdropped可以考虑增大syn队列net.ipv4.tcp_max_syn_backlog=1024超过上述队列后，启用syncookienet.ipv4.t
瓦哥架构实战·2023-09-28 08:29

[Day 7]老友记S1-04-1 The One With George Stephanopoulos

1.SentencePhoebe:Okay,okay.IfIwereomnipotentforaday,Iwouldwant,um,worldpeace,nomorehunger,goodthingsfortherain-forest
To_QT·2023-09-28 06:50

三台linux服务器部署ceph集群

在每台服务器上安装Ceph软件包:sudoapt-getupdatesudoapt-getinstallceph-deploy在一台服务器上创建Ceph集群：mkdirmy-ceph-clustercdmy-ceph-clusterceph-deploynew
独壹@无贰·2023-09-28 05:55

记一次ceph启动故障

无法使用ceph-s查看状态ceph-mon和ceph-mgr正常启动ceph-osd@ceph-osd.service无法启动/var/log/ceph/ceph-mon-***.log报以下错误原因
小小志爱学习·2023-09-28 00:03

一个小技巧让对象存储的请求速度优化为0s

3.对象存储依赖于cephRADOS设计。拥有数据管理，数据冗余等功能
小小志爱学习·2023-09-28 00:58

Redis进阶

一、Redis集群和分布式锁1.1Redis集群的概念和优势Redis集群是一种分布式系统架构，它将多个Redis实例组成一个逻辑集群，实现数据的分布式存储和高可用性。
青年老年程序员·2023-09-27 20:05

day32 NFS网络共享文件系统

在企业中实现数据存储的其它软件：FTP服务器（windows--server-U）部署安装麻烦/权限设置samba软件，部署安装麻烦windowslinux系统都支持分布式存储Moosefs（mfs）、
娇娜_5eb0·2023-09-27 19:54

openEuler部署Ceph集群(块存储)

openEuler部署Ceph集群1目标2环境2.1服务器信息2.2软件信息3部署流程3.1获取系统镜像3.2创建虚拟机3.3配置虚拟机3.3.1配置互信3.3.2关闭防火墙3.3.3配置免密登录3.3.4
一个码农的前三十年·2023-09-27 13:39

k8s部署单点的mysql实例

管理员密码的配置3.3lost+found配置3.4探针配置总结前言记录一下根据kubernetes.io的范本部署一个mysql实例的过程一、基础环境准备准备一个k8s集群，配置好存储类，我这里使用的是rook-ceph
大新新大浩浩·2023-09-27 09:40

Hadoop笔记（一）

在大数据领域提出了两个概念：分布式文件系统，用于存储大量的数据分布式计算框架MapReduce，高效地分析数据以上两个概念组成了一个名词叫HadoopHadoop的起源谷歌发布了三篇论文：GFS分布式存储系统
lew1sss·2023-09-27 08:50

Ceph入门到精通-常见Nginx服务器故障处理

目的：在Nginx服务器出现故障时，能快速定位并解决相关错误。概述：Nginx常见错误与问题之解决方法技术指南。安装环境：系统环境：redhatenterprise6.564bit1、Nginx常见启动错误有的时候初次安装nginx的时候会报这样的错误sbin/nginx-cconf/nginx.conf报错内容：sbin/nginx:errorwhileloadingsharedlibrarie
瓦哥架构实战·2023-09-27 07:55
上一页 21 22 23 24 25 26 27 28 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他