GridFS分布式存储

Minio分布式存储系统

Minio分布式存储系统Minio简介分布式系统高可用设计分布式设计数据保护高可用限制一致性安全Minio纠删码Minio如何使用纠删码Minio优点位衰减bitrot保护应用场景Minio简介Minio
m0_67403073·2023-10-06 17:50

Keepalived高可用 、 部署Ceph分布式存储

案例链接Keepalived高可用1.1问题部署两台代理服务器，实现如下效果：利用keepalived实现两台代理服务器的高可用配置VIP为192.168.4.80修改对应的域名解析记录1.2方案实验拓扑如图-1所示，做具体实验前请先配置好环境。image图-1备注：实际操作中DNS服务代理服务器部署在同一台主机上（节约虚拟机资源）。主机配置如表-1所示。表-1image1.3步骤实现此案例需要按
秋天丢了李姑娘·2023-10-06 17:13

Redis缓存简述

Redis用缓存:提前把数据取出来保存好(通常保存到读写更快的介质,比如内存),就可以更快地读写缓存分类分布式缓存Redis(分布式缓存)memcached(分布式)Etcd(云原生架构的一个分布式存储
踏遍三十六岸·2023-10-06 09:42

Kafka核心原理

通过分片，将一个大的容器分解为多个小的容器，分布在不同的节点上，从而实现分布式存储。分片的数量没有限制，与节点数量没有关系，分片数量不会超过总节点数量的三倍。
我的棉裤丢了·2023-10-05 21:37

分布式存储的前世今生：Filenet未来发展势不可挡！

Filenet致力于存储和分发有价值的内容。用区块链完成价值交换和价值传递，未来将成为区块链3.0时代内容经济的新风向。从最开始的286计算机，硬盘20M，软盘1M，到后来开始出现了光盘，存储空间700M。再到后来用调制解调器拨号上网，开始有了第一个电子邮箱。设定邮箱的时候有服务器参数填写，这时候大家开始有了服务器概念。邮箱的文件传送是通过服务器来进行的，服务器给用户提供文件的存储，还有为各种论坛
壹五叁说IPFS·2023-10-05 20:24

单机高并发模型设计

背景在微服务架构下，我们习惯使用多机器、分布式存储、缓存去支持一个高并发的请求模型，而忽略了单机高并发模型是如何工作的。
知食份子.·2023-10-05 19:15

AI如何实施本地化

Java应用开发中的Maven是对实体本地jar包的一种互联网分布式存储实现。Maven对项目的构建分为清除clean，编译compile,package打包，insta
程序员是干活的·2023-10-05 09:36

1.HDFS基础知识

具备哪些特性（功能、优点、作用）（参考视频-「为什么中国网盘这么难」）分布式分布式存储能-无限扩展-支持海量数据存储分块存储针
敲代码的羊·2023-10-05 05:41

【es】通过API操作es集群

2.可扩展性强：天然支持分布式存储，可简单实现上千台服务器的分布式横向火绒。3.高可用，容灾性能好：通过主备节点及故障自动检测与恢复，实现高可用。一、关于ES和MySQL的概
Bogon·2023-10-04 16:18

【译】Apache Hadoop 系列之三（用户指南）

概述HDFS是使用Hadoop程序来实现的分布式存储系统。一个HDFS集群主要包含管理文件系统命名空间的Namenode以及存储实际数据的Datanode
Kooola大数据·2023-10-04 16:02

喜讯！滨合云智实力获Filecoin创始人高度认可！亲自为高标准矿场点赞！

2019年，滨合云智研发团队持之以恒专注分布式存储技术以及ipfs/filecoin相关技术研发，积极提交相关代码，积极参与filecoin测试网等各个阶段并帮助File
滨合云智·2023-10-04 10:05

为什么比特币不怕被盗？|区块链专题（7）

比特币的去中心化是用非对称加密技术和分布式存储实现的。这一节我们继续讲比特币的第2个特性（即不可篡改特性）及其技术实现的来源。
黄金小哥·2023-10-04 02:15

Hadoop介绍——HDFS

•Hadoop简介：hadoop官网–分布式存储系统HDFS（HadoopDistributedFileSystem）POSIX•分布式存储系统•提供了高可靠性、高扩展性和高吞吐率的数据存储服务–分布式计算框架
南宫萧言·2023-10-04 01:15

一览IPFS技术与应用 探寻Filecoin激励逻辑

本篇研报将从分布式存储的发展沿革、技术的第一性角度出发阐述IPFS的技术与应用，并延展至建立在IPFS上的Filecoin激励逻辑，展现围绕IPFS展开的生态图景。
17722458029·2023-10-02 22:51

猛犸大陆——区块链核心技术

猛犸大陆显卡矿机；QQ群+770528986跟传统的分布式存储有所不同，区块链的分布式存储的独特性主要体现在两个方面：一是区块链每个节点都按照块链式结构存储完整的数据，传统分布式存储一般是将数据按照一定的规则分成多份进行存储
d719f6b05f08·2023-10-02 16:15

编程随笔-ElasticSearch知识导图(2)：分布式架构

带着图1中的问题我们来探究一下ES集群，ES集群是一个典型的主从结构，从某种意义上来说，符合现今大多数主流分布式存储、分布式计算系统的审美要求。下面我们逐步来了解集群中的这些东东。  
weixin_34186950·2023-10-02 13:40

组件分享之后端组件——一个简单且高度可扩展的分布式文件系统seaweedfs

组件基本信息组件：seaweedfs开源协议：Apache-2.0License内容本节我们分享一个分布式存储系统seaweedfs，它是一个用于bl
cn華少·2023-10-02 04:55

“去中心化”真的去了中心吗？

去中心化：不需要中心机构来验证交易，而是使用非对称加密技术和分布式存储，依靠所有节点来验证交易真伪。图片:https://images-cdn.shimo.im/RYE
fengtasy·2023-10-02 01:46

Hadoop3.x组件HDFS入门

HDFS，全称HadoopDistributedFileSystem，即Hadoop分布式文件存储系统，是Hadoop核心组件之一，是大数据生态最底层的分布式存储服务。
文景大大·2023-09-30 21:06

分布式算法相关，使用Redis落地解决1-2亿条数据缓存

面试题：1~2亿数据需要缓存，请问如何设计个存储案例回答：单机单台100%不可能，肯定是分布式存储，用redis如何落地？
fiveym·2023-09-29 19:44

virtio 虚拟化系列之一：从 virtio 论文开始(文末有福利~)

SmartX是中国领先的超融合产品与企业云解决方案提供商，拥有国内最顶尖的分布式存储和超融合架构研发团队，在分布式存储、虚拟化计算、微服务、容器、前端开发、自动化测试等领域都做着行业最前沿的实践。
Linux阅码场·2023-09-29 18:12

FastDFS部署

Tracker，Storage，nginx（fastdfs-nginx-module）一个Tracker下可以挂在多个Storage,从而实现分布式存储。
b哈利路亚d·2023-09-29 16:16

读懂Filecoin

@[toc]Filecoin项目介绍Filecoin项目：Filecoin是运行在IPFS上的一个激励层，是一个基于区块链的分布式存储网络，它把云存储变为一个算法市场，通证(FIL)在这里起到了很重要的作用
夏洛的克·2023-09-29 16:03

单机高并发模型设计

背景在微服务架构下，我们习惯使用多机器、分布式存储、缓存去支持一个高并发的请求模型，而忽略了单机高并发模型是如何工作的。
StongFang·2023-09-29 06:00

后端存储实战课笔记

比如说，如何从单机的存储系统逐步演进为分布式存储系统；如何在线平滑的扩容我们的存储系统。在海量数据篇，我们重点解决高
三角形代表重生·2023-09-29 06:29

介绍大数据处理架构Hadoop以及其生态系统

Hadoop的特点1.高可靠性采用冗余数据存储方式，Hadoop采用分布式存储方式，即使一个
转身丶即天涯·2023-09-29 04:40

分享55个C源码源代码总有一个是你想要的

pwd=8888提取码：88881.项目名称apachesubversion版本控制系统v1.10.3Ceph分布式文件系统v17.2.5clip命令行插图处理器v0.8curve分布式存储系统v1.2.6curve
zdh13370188237·2023-09-28 14:34

分享55个C源码源代码总有一个是你想要的

pwd=8888提取码：88881.项目名称apachesubversion版本控制系统v1.10.3Ceph分布式文件系统v17.2.5clip命令行插图处理器v0.8curve分布式存储系统v1.2.6curve
zdh13370188237·2023-09-28 14:34

企业级磁盘阵列存储系统由硬到软全析

之所以称其为集中存储是因为相对于分布式存储系统
数据存储张·2023-09-28 11:22

Greenplum 对比 Hadoop

Greenplum属于MPP架构，和Hadoop一样都是为了解决大规模数据的并行计算而出现的技术，两者的相似点在于：分布式存储，数据分布在多个节点服务器上分布式并行计算框架支持横向扩展来提高整体的计算能力和存储容量都支持
post_yuan·2023-09-28 08:20

Redis进阶

一、Redis集群和分布式锁1.1Redis集群的概念和优势Redis集群是一种分布式系统架构，它将多个Redis实例组成一个逻辑集群，实现数据的分布式存储和高可用性。
青年老年程序员·2023-09-27 20:05

day32 NFS网络共享文件系统

在企业中实现数据存储的其它软件：FTP服务器（windows--server-U）部署安装麻烦/权限设置samba软件，部署安装麻烦windowslinux系统都支持分布式存储Moosefs（mfs）、
娇娜_5eb0·2023-09-27 19:54

Hadoop笔记（一）

在大数据领域提出了两个概念：分布式文件系统，用于存储大量的数据分布式计算框架MapReduce，高效地分析数据以上两个概念组成了一个名词叫HadoopHadoop的起源谷歌发布了三篇论文：GFS分布式存储系统
lew1sss·2023-09-27 08:50

云计算 第五章 Hadoop 2.0 主流开源云架构

文章目录5.1引例5.1.1问题概述5.1.2常规解决方案5.1.3分布式下的解决方案1.分布式存储冗余存储与冗余计算5.1.4小结img5.2Hadoop2.0简述5.2.1Hadoop2.0由来5.2.2Hadoop2.0
是我，Zack·2023-09-27 07:23

IPFS和Filecoin的关系？

filecoin是一个分布式存储网络，把云存储变
4fd281c9d96e·2023-09-27 04:46

简述ceph文件储存系统

Ceph是一个统一的分布式存储系统和共享机制，它定义了数据如何存储在一个或多个节点上并呈现给其他机器以供文件访问。
奋豆来袭·2023-09-27 03:17

SpringCloud微服务实战——搭建企业级开发框架（二十九）：集成对象存储服务MinIO+七牛云+阿里云+腾讯云

  微服务应用中图片、文件等存储区别于单体应用，单体应用可以放到本地读写磁盘文件，微服务应用必需用到分布式存储，将图片、文件等存储到服务稳定的分布式存储服务器。
·2023-09-26 21:29

k8s监控实战-部署prometheus

不依赖分布式存储，单个服务器节点是自主的。主要基于HTTP的pull方式主动采
qq_43076479·2023-09-26 17:13

ceph分布式存储

目录一、概述二、组件三、架构图四、搭建一、概述ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
欢愉的猫·2023-09-26 15:43

分布式存储中本地存储引擎

分布式存储中本地存储引擎最近几年存储介质得到了高速发展，单位存储介质的性能越来越高，从原来的机械硬盘不足100IOPS到现在的NVMeSSD一块就能达到50WIOPS，但与之形成反差的是CPU的速度提升并没有那么多
benpao1234567890·2023-09-25 15:15

系分 - 案例分析 - 数据库设计（分布式）

数据库设计（分布式）分布式数据库系统透明性分类两阶段提交协议2PC分区分表分库分区技术数据库主从复制NoSQL非关系型数据库与关系型数据库对比类型缓存技术RedisRedis与Memcache对比Redis分布式存储方案
WorkLee·2023-09-25 13:34

Hadoop初识及信息安全（大数据的分布式存储和计算平台）

目录什么是HadoopHadoop的特点Hadoop优点Hadoop的缺点Hadoop的重要组成信息安全什么是HadoopHadoop是一个适合大数据的分布式存储和计算平台。
墨痕诉清风·2023-09-25 11:40

网易国产开源分布式存储系统——Curve

导读：Curve是一款高性能、易运维、云原生的开源分布式存储系统(CNCFSandbox)。
·2023-09-25 11:26

5W字讲解最新大数据面试题

本文目录：一、Hadoop二、Hive三、Spark四、Kafka五、HBase六、Flink七、数仓业务方面八、算法HadoopHadoop中常问的就三块，第一：分布式存储(HDFS)；第二：分布式计算框架
无精疯·2023-09-24 20:59

【分布式云储存】高性能云存储MinIO简介与Docker部署集群

简介MinIO优势MinIO技术亮点Docker部署MinIO集群docker与docker-compose安装新增nginx配置编写docker-compose.yml文件启动MinIO容器并验证前言分布式存储服务一直以来是中大型项目不可或缺的一部分
小沈同学呀·2023-09-24 10:01

Docker部署FastDFS分布式存储

1、准备工作dockerpullqinziteng/fastdfs:5.05Pwd="/data/software/fastdfs"mkdir${Pwd}/{storage,tracker}-p2、创建TEST容器，将fastdfs目录COPY到本地，方便后续维护管理！dockerrun-id--namefastdfsqinziteng/fastdfs:5.05dockercpfastdfs:/h
神奇的海马体·2023-09-24 06:07

各类分布式文件系统的区别和概述 | HDFS、GFS、Ceph、TFS、Moosefs、IPFS等

shepdogshepdog基本架构CephFastDFSfastDFS介绍Trackerserver追踪服务器Storageserver储存服务器客户端Client读写操作：写入数据下载文件参考开源分布式存储系统的对比
stone_fall·2023-09-23 23:56

分布式文件系统对比与选型参考

HadoopDistributedFileSystem）3.Ceph4.Lustre5.MooseFS6.MogileFS7.FastDFS8.GlusterFS9.TFS（TaobaoFileSystem）10.GridFS11
草莓不苦·2023-09-23 23:55

大数据分布式处理框架Hadoop

Hadoop是什么Hadoop是开源的分布式计算技术框架，用于处理大规模数据和实现分布式存储。
真空零点能·2023-09-23 07:08

ceph分布式存储搭建

目录一、环境搭建1.基础环境2.centos1安装软件3.创建集群4.修改配置文件5.安装软件二、构建集群1.初始化monitor2.同步管理信息3.安装mgr4.安装rgw5.创建mds服务三、安装OSD1.centos1、centos2、centos3、三个虚拟机各加一个磁盘2.热刷新磁盘并格式化3.创建OSD四、安装dashboard1.生成签名和创建安全认证2.启动服务五、创建ceph文件
予安·2023-09-23 05:59
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他