分布式存储

组件分享之后端组件——一个简单且高度可扩展的分布式文件系统seaweedfs

组件基本信息组件：seaweedfs开源协议：Apache-2.0License内容本节我们分享一个分布式存储系统seaweedfs，它是一个用于bl
cn華少·2023-10-02 04:55

“去中心化”真的去了中心吗？

去中心化：不需要中心机构来验证交易，而是使用非对称加密技术和分布式存储，依靠所有节点来验证交易真伪。图片:https://images-cdn.shimo.im/RYE
fengtasy·2023-10-02 01:46

Hadoop3.x组件HDFS入门

HDFS，全称HadoopDistributedFileSystem，即Hadoop分布式文件存储系统，是Hadoop核心组件之一，是大数据生态最底层的分布式存储服务。
文景大大·2023-09-30 21:06

分布式算法相关，使用Redis落地解决1-2亿条数据缓存

面试题：1~2亿数据需要缓存，请问如何设计个存储案例回答：单机单台100%不可能，肯定是分布式存储，用redis如何落地？
fiveym·2023-09-29 19:44

virtio 虚拟化系列之一：从 virtio 论文开始(文末有福利~)

SmartX是中国领先的超融合产品与企业云解决方案提供商，拥有国内最顶尖的分布式存储和超融合架构研发团队，在分布式存储、虚拟化计算、微服务、容器、前端开发、自动化测试等领域都做着行业最前沿的实践。
Linux阅码场·2023-09-29 18:12

FastDFS部署

Tracker，Storage，nginx（fastdfs-nginx-module）一个Tracker下可以挂在多个Storage,从而实现分布式存储。
b哈利路亚d·2023-09-29 16:16

读懂Filecoin

@[toc]Filecoin项目介绍Filecoin项目：Filecoin是运行在IPFS上的一个激励层，是一个基于区块链的分布式存储网络，它把云存储变为一个算法市场，通证(FIL)在这里起到了很重要的作用
夏洛的克·2023-09-29 16:03

单机高并发模型设计

背景在微服务架构下，我们习惯使用多机器、分布式存储、缓存去支持一个高并发的请求模型，而忽略了单机高并发模型是如何工作的。
StongFang·2023-09-29 06:00

后端存储实战课笔记

比如说，如何从单机的存储系统逐步演进为分布式存储系统；如何在线平滑的扩容我们的存储系统。在海量数据篇，我们重点解决高
三角形代表重生·2023-09-29 06:29

介绍大数据处理架构Hadoop以及其生态系统

Hadoop的特点1.高可靠性采用冗余数据存储方式，Hadoop采用分布式存储方式，即使一个
转身丶即天涯·2023-09-29 04:40

分享55个C源码源代码总有一个是你想要的

pwd=8888提取码：88881.项目名称apachesubversion版本控制系统v1.10.3Ceph分布式文件系统v17.2.5clip命令行插图处理器v0.8curve分布式存储系统v1.2.6curve
zdh13370188237·2023-09-28 14:34

分享55个C源码源代码总有一个是你想要的

pwd=8888提取码：88881.项目名称apachesubversion版本控制系统v1.10.3Ceph分布式文件系统v17.2.5clip命令行插图处理器v0.8curve分布式存储系统v1.2.6curve
zdh13370188237·2023-09-28 14:34

企业级磁盘阵列存储系统由硬到软全析

之所以称其为集中存储是因为相对于分布式存储系统
数据存储张·2023-09-28 11:22

Greenplum 对比 Hadoop

Greenplum属于MPP架构，和Hadoop一样都是为了解决大规模数据的并行计算而出现的技术，两者的相似点在于：分布式存储，数据分布在多个节点服务器上分布式并行计算框架支持横向扩展来提高整体的计算能力和存储容量都支持
post_yuan·2023-09-28 08:20

Redis进阶

一、Redis集群和分布式锁1.1Redis集群的概念和优势Redis集群是一种分布式系统架构，它将多个Redis实例组成一个逻辑集群，实现数据的分布式存储和高可用性。
青年老年程序员·2023-09-27 20:05

day32 NFS网络共享文件系统

在企业中实现数据存储的其它软件：FTP服务器（windows--server-U）部署安装麻烦/权限设置samba软件，部署安装麻烦windowslinux系统都支持分布式存储Moosefs（mfs）、
娇娜_5eb0·2023-09-27 19:54

Hadoop笔记（一）

在大数据领域提出了两个概念：分布式文件系统，用于存储大量的数据分布式计算框架MapReduce，高效地分析数据以上两个概念组成了一个名词叫HadoopHadoop的起源谷歌发布了三篇论文：GFS分布式存储系统
lew1sss·2023-09-27 08:50

云计算 第五章 Hadoop 2.0 主流开源云架构

文章目录5.1引例5.1.1问题概述5.1.2常规解决方案5.1.3分布式下的解决方案1.分布式存储冗余存储与冗余计算5.1.4小结img5.2Hadoop2.0简述5.2.1Hadoop2.0由来5.2.2Hadoop2.0
是我，Zack·2023-09-27 07:23

IPFS和Filecoin的关系？

filecoin是一个分布式存储网络，把云存储变
4fd281c9d96e·2023-09-27 04:46

简述ceph文件储存系统

Ceph是一个统一的分布式存储系统和共享机制，它定义了数据如何存储在一个或多个节点上并呈现给其他机器以供文件访问。
奋豆来袭·2023-09-27 03:17

SpringCloud微服务实战——搭建企业级开发框架（二十九）：集成对象存储服务MinIO+七牛云+阿里云+腾讯云

  微服务应用中图片、文件等存储区别于单体应用，单体应用可以放到本地读写磁盘文件，微服务应用必需用到分布式存储，将图片、文件等存储到服务稳定的分布式存储服务器。
·2023-09-26 21:29

k8s监控实战-部署prometheus

不依赖分布式存储，单个服务器节点是自主的。主要基于HTTP的pull方式主动采
qq_43076479·2023-09-26 17:13

ceph分布式存储

目录一、概述二、组件三、架构图四、搭建一、概述ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
欢愉的猫·2023-09-26 15:43

分布式存储中本地存储引擎

分布式存储中本地存储引擎最近几年存储介质得到了高速发展，单位存储介质的性能越来越高，从原来的机械硬盘不足100IOPS到现在的NVMeSSD一块就能达到50WIOPS，但与之形成反差的是CPU的速度提升并没有那么多
benpao1234567890·2023-09-25 15:15

系分 - 案例分析 - 数据库设计（分布式）

数据库设计（分布式）分布式数据库系统透明性分类两阶段提交协议2PC分区分表分库分区技术数据库主从复制NoSQL非关系型数据库与关系型数据库对比类型缓存技术RedisRedis与Memcache对比Redis分布式存储方案
WorkLee·2023-09-25 13:34

Hadoop初识及信息安全（大数据的分布式存储和计算平台）

目录什么是HadoopHadoop的特点Hadoop优点Hadoop的缺点Hadoop的重要组成信息安全什么是HadoopHadoop是一个适合大数据的分布式存储和计算平台。
墨痕诉清风·2023-09-25 11:40

网易国产开源分布式存储系统——Curve

导读：Curve是一款高性能、易运维、云原生的开源分布式存储系统(CNCFSandbox)。
·2023-09-25 11:26

5W字讲解最新大数据面试题

本文目录：一、Hadoop二、Hive三、Spark四、Kafka五、HBase六、Flink七、数仓业务方面八、算法HadoopHadoop中常问的就三块，第一：分布式存储(HDFS)；第二：分布式计算框架
无精疯·2023-09-24 20:59

【分布式云储存】高性能云存储MinIO简介与Docker部署集群

简介MinIO优势MinIO技术亮点Docker部署MinIO集群docker与docker-compose安装新增nginx配置编写docker-compose.yml文件启动MinIO容器并验证前言分布式存储服务一直以来是中大型项目不可或缺的一部分
小沈同学呀·2023-09-24 10:01

Docker部署FastDFS分布式存储

1、准备工作dockerpullqinziteng/fastdfs:5.05Pwd="/data/software/fastdfs"mkdir${Pwd}/{storage,tracker}-p2、创建TEST容器，将fastdfs目录COPY到本地，方便后续维护管理！dockerrun-id--namefastdfsqinziteng/fastdfs:5.05dockercpfastdfs:/h
神奇的海马体·2023-09-24 06:07

各类分布式文件系统的区别和概述 | HDFS、GFS、Ceph、TFS、Moosefs、IPFS等

shepdogshepdog基本架构CephFastDFSfastDFS介绍Trackerserver追踪服务器Storageserver储存服务器客户端Client读写操作：写入数据下载文件参考开源分布式存储系统的对比
stone_fall·2023-09-23 23:56

大数据分布式处理框架Hadoop

Hadoop是什么Hadoop是开源的分布式计算技术框架，用于处理大规模数据和实现分布式存储。
真空零点能·2023-09-23 07:08

ceph分布式存储搭建

目录一、环境搭建1.基础环境2.centos1安装软件3.创建集群4.修改配置文件5.安装软件二、构建集群1.初始化monitor2.同步管理信息3.安装mgr4.安装rgw5.创建mds服务三、安装OSD1.centos1、centos2、centos3、三个虚拟机各加一个磁盘2.热刷新磁盘并格式化3.创建OSD四、安装dashboard1.生成签名和创建安全认证2.启动服务五、创建ceph文件
予安·2023-09-23 05:59

ceph分布式存储

目录前言一、概述（一）、特点（二）、组件（三）、架构图二、搭建（一）、基础环境（二）、准备工作（三）、ceph安装（四）、集群构建（五）、dashboard安装（六）、ceph文件系统创建（七）、客户端挂载总结前言Ceph项目最早起源于Sage就读博士期间的工作（最早的成果于2004年发表），并随后贡献给开源社区。在经过了数年的发展之后，目前已得到众多云计算厂商的支持并被广泛应用。RedHat及O
SCL_78534660·2023-09-23 05:57

hive mysql初始_hive mysql 初始化

我们可以把Hive中海量结构化数据看成一个个的表，而实际上这些数据是分布式存储在HDFS中的。Hive经过对语句进行解析和转换，最终生成一系列基于had
戴舜·2023-09-23 04:14

ceph分布式存储简介

Ceph简介什么是分布式存储？
程序员面试吧·2023-09-22 16:21

实时云渲染：元宇宙技术开发核心之一

元宇宙6个核心技术区块链技术：区块链技术是分布式存储、点对点
·2023-09-22 12:02

Redis的高性能之谜

我们还可以使用集群功能构建分布式存储服务，并实现非强一致性的分布式锁服务。在上述各种情况下，Redis都具有一个共同的优势，即处理速度快（高性能）。Redis有多快？
小技术君·2023-09-22 12:46

大数据-hadoop

三大发行版本:Apache、Cloudera、HortonworksApache版本最原始的版本Cloudera在大型互联网企业中用的较多Hortonworks文档较好1.4架构hadoop由三个模块组成分布式存储
highly2009·2023-09-22 10:59

ceph分布式存储部署

一、概述是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。特点1、统一存储虽然ceph底层是一个分布式文件系统，但由于在上层开发了支持对象和块的接口。
lsqaa·2023-09-22 07:55

ceph分布式存储

目录一、概述1、特点2、组件3、架构图二、分布式部署1、环境拓扑2、实验准备3、ceph安装安装初始化monitor同步管理信息安装mgr（管理守护进程）安装rgw创建mds服务OSD安装4、dashboard安装开启dashboard模块生成签名创建目录启动服务设置访问地址与端口关闭https访问5、ceph文件系统创建创建存储池查看存储池创建文件系统查看文件系统查看mds状态三、在客户端挂载一
黑影680·2023-09-22 07:50

ceph分布式存储

RedHat及OpenStack都可与Ceph整合以支持虚拟机镜像的后端存储是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
载雨舟·2023-09-22 04:44

MQ - 17 集群篇_（性能）分布式存储系统的编程技巧

文章目录导图PrePageCache调优和DirectIO白话概念核心逻辑失效场景优化方案FileChannel和mmapFileChannelmmap预分配文件、预初始化、池化直接内存（堆外）和堆内内存同步刷盘新的存储AEP线程绑核SSD的4KB对齐其他一些优化手段JVM调优减少线程切换Unsafe其他知识点总结<
小小工匠·2023-09-22 01:01

智能运维-从0搭建大规模分布式AIOps系统

文章目录智能运维开源数据采集技术数据采集工具对比轻量级采集工具Filebeat日志采集解析工具分布式消息队列大数据存储技术传统架构基于HDFS的分布式存储分层存储大规模数据离线计算分析经典的离线计算分布式离线计算时序数据分析框架
iwtbs_kevin·2023-09-21 22:28

sqlserver分布式存储过程

useGHFNgo--声明host(地址)、user(用户)、pwd(密码)declare@hostvarchar(20);declare@uservarchar(20);declare@pwdvarchar(20);--赋值声明host(地址)、user(用户)、pwd(密码)set@host='10.1.1.35';set@user='sa';set@pwd='bdxx';--删除已经存在的g
zhouxg1205·2023-09-21 20:31

SQL Server 分布式存储过程事务

首先先要对SQLServerdtc配置打开“控制面板―管理工具―组件服务”（或者运行“Dcomcnfg.exe”）打开“组件服务―计算机”在“我的电脑”上点击右键，点击“属性”在MSDTC选项卡中，点击“安全配置”按钮。操作如下：SETXACT_ABORTON的设置当为ON时，如果你存储中的某个地方出了问题，整个事务中的语句都会回滚为OFF时，只回滚错误的地方跨库操作：execsp_addlink
FroDaniel·2023-09-21 20:27

ELK 企业级日志分析系统

ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。
奇迹也被称为侥幸与横祸·2023-09-21 12:15

免费体验国内首款Kubernetes原生的企业级分布式存储，还有礼品可拿！

近期，SmartX发布正式发布国内首款Kubernetes原生的企业级分布式存储IOMesh1.0企业版，其可无缝融入Kubernetes原生的开发和运维体系，对Kubernetes集群内的存储资源进行整合与管理
码农翻身·2023-09-21 10:24

大数据学习之Hadoop

一、基础概念Hadoop包含HDFS和MapReduce，HDFS实现分布式存储，MapReduce实现数据分布式计算。HDFS：HDFS是由Namenode和Datanode组成。
我问你瓜保熟吗·2023-09-21 04:40

ELK企业级日志分析系统

1.ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索
whtqwq·2023-09-21 00:12
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他