E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式存储系统
HBase的详细介绍(概念以及特性)
1什么是hbaseHBASE是一个高可靠性、高性能、面向列、可伸缩的
分布式存储系统
,利用HBASE技术可在廉价PCServer上搭建起大规模结构化存储集群。
随风奔跑之水
·
2023-11-05 16:35
Hadoop
Mysql与SeaweedFS数据不同步问题产生原因及解决办法
这篇文章将专注于Mysql和SeaweedFS(一种快速、简单和高效的
分布式存储系统
)之间数据不
Dontla
·
2023-11-02 09:00
数据库
mysql
数据库
一文参透
分布式存储系统
Ceph的架构设计、集群搭建(手把手)
1.Ceph概述1.1背景Ceph是一个去中心化的
分布式存储系统
,提供较好的性能、可靠性和可扩展性。
博学谷狂野架构师
·
2023-10-31 22:19
分布式存储系统
Ceph应用组件介绍
1、无中心架构分布式存储CephCeph是一套开源的
分布式存储系统
。具有可靠性高,性能优良,可伸缩,与HDFS不同的地方在于,该架构中没有中心节点。
exitgogo
·
2023-10-31 06:30
分布式
ceph
[大三上]区块链和分布式计算
分布式计算的典型应用包括分布式数据库、
分布式存储系统
、云计算等。分布式计算的优点
卓律涤
·
2023-10-27 12:14
云计算
1024程序员节
Hadoop3.0大数据处理学习2(HDFS)
Hadoop
分布式存储系统
一种允许文件通过网络在多台主机上分享的文件系统,可以让多机器上的用户分享文件和存储空间。
Huathy-雨落江南,浮生若梦
·
2023-10-26 07:25
Hadoop
大数据
hdfs
hadoop
MinIO分布式存储服务
一、前言最近项目中使用到了MinIO的
分布式存储系统
,记录一下Minio服务的相关概念以及使用方法。
大头程序员不头大
·
2023-10-25 18:56
JAVA后端
分布式
后端
存储与数据库 | 字节青训营笔记
存储系统的特点3、RAID技术RAID出现的背景RAID0RAID1RAID0+1二、数据库1、难道数据库和存储系统不一样吗2、数据库vs经典存储三、主流产品剖析1、单机存储本地文件系统key-value存储2、
分布式存储系统
分布式文件系统分布式对象存储
卒获有所闻
·
2023-10-25 09:57
字节跳动青训营
数据库
缓存
后端
hadoop 伪分布式模式学习笔记
我采用的是hadoop-2.8.0,它主要包含3大块:hdfs:
分布式存储系统
HDFS(HadoopDistributedFileSystem)分布式存储层map
金曜软件工程师
·
2023-10-24 16:44
大数据
大数据
大数据学习
hadoop
人工智能
ceph 笔记
Ceph是一个开源的
分布式存储系统
,具有以下优势和特点:可扩展性:Ceph可以轻松地扩展到大规模的存储集群,支持数百或数千个节点,并能够处理PB级别的数据。
The Straggling Crow
·
2023-10-24 04:17
storage
ceph
笔记
一文读懂 HBase 核心原理与应用场景
HBase是大数据NoSQL领域里非常重要的分布式KV数据库,是一个高可靠、高性能、高伸缩的
分布式存储系统
,目前国内知名公司都有在大规模使用,社区也非常活跃。
create17
·
2023-10-24 01:27
分布式
大数据
数据库
java
hadoop
分布式存储系统
——ceph
目录一、分布式存储类型1、块存储2、文件存储3、对象存储二、ceph概述1、ceph简介2、ceph的优势3、ceph架构1)RADOS基础存储系统(Reliab1e,Autonomic,Distributedobjectstore2)LIBRADOS基础库3)高层应用接口4)应用层4、ceph核心组件5、OSD存储方式1)方式一:Filestore2)方式二:Bluestore6、Bluesto
hei-tui
·
2023-10-23 14:27
分布式
ceph
HBase:大数据中的NoSQL
HBase概述Hbase是一个高可靠性、高性能、面向列、可伸缩的
分布式存储系统
,用于存储海量的结构化或者半结构化,非结构化的数据,底层上的数据是以二进制流的形式存储在HDFS上的数据块中的HBase应用场景写密集型应用
CoLiuRs
·
2023-10-21 19:54
Golang
大数据
大数据
hbase
nosql
企业打开云HBase的正确方式,来自阿里云云数据库团队的解读
摘要:一、HBase的历史由来HBase是一个开源的非关系型分布式数据库(NoSQL),基于谷歌的BigTable建模,是一个高可靠性、高性能、高伸缩的
分布式存储系统
,使用HBase技术可在廉价PCServer
猫耳呀
·
2023-10-20 19:54
ceph
分布式存储系统
目录一、存储基础二、单机存储的问题三、分布式存储的类型四、Ceph简介五、Ceph优势六、Ceph架构七、Ceph核心组件八、OSD存储后端九、ceph部署一、存储基础单机存储设备DAS(直接附加存储,是直接接到计算机的主板总线上去的存储)IDE、SATA、SCSI、SAS、USB接口的磁盘所谓接口就是一种存储设备驱动下的磁盘设备,提供块级别的存储NAS(网络附加存储,是通过网络附加到当前主机文件
Besteady
·
2023-10-20 09:22
ceph
HBase 入门
HBase是一个高可靠性、高性能、面向列、可伸缩的
分布式存储系统
,利用HBase技术可在廉价PCServer上搭建起大规模结构化存储集群。
djm猿
·
2023-10-17 12:20
FastDFS
对于存储而言,小视频的存储量以及容量都是非常巨大的所以我们选择自己搭建
分布式存储系统
FastDFS进行存储对于推荐算法,我们将采用多种权重的计算方式进行计算对于加
鼠爷ねずみ
·
2023-10-17 11:21
后端
数据库
java
sql
ceph基础知识
1,ceph介绍ceph是一个可靠的,自动重均衡,自动恢复的
分布式存储系统
。根据场景可以分为三大块:对象存储,块设备存储和文件服务系统。
每天读点书学堂
·
2023-10-17 07:25
ceph
linux
运维
Ceph 相关知识总结整理 | 资料
一、Ceph的原理和架构1.Ceph架构简介及使用场景介绍1.1Ceph简介Ceph是一个统一的
分布式存储系统
,设计初衷是提供较好的性能、可靠性和可扩展性。
更上一层楼!
·
2023-10-17 07:23
云计算
智安网络|边缘计算与分布式存储:数字化时代的新趋势
分布式存储系统
应运而生,成为应对数据存储和处理挑战的解决方案。然而,技术的发展不会止步于此,随着时间的推移,
分布式存储系统
也将迎来新的趋势和变革。
智安网络
·
2023-10-16 04:59
边缘计算
分布式
人工智能
线上线程堆积导致的oom排查思路
背景一个项目文件存储服务选型seaweedfs,一个go实现的
分布式存储系统
,项目使用Java作为开发语言,一个场景是客户通过http上传文件到fileService服务,fileService收到文件之后
hamish-wu
·
2023-10-15 17:50
Java
java
jvm
服务器
分布式存储系统
Ceph应用详解
Ceph的应用一、Ceph存储池(Pool)1.1Ceph存储池的基本概念1.2原理1.3一个Pool资源池应该包含多少PG数?1.4Ceph存储池相关管理命令1.4.1创建1.4.2查看1.4.3修改1.4.4删除二、CephFS文件系统MDS接口三、创建CephFS文件系统MDS接口3.1服务端操作Step1在管理节点创建mds服务Step2查看各个节点的mds服务Step3创建存储池,启用c
白幽幽白
·
2023-10-15 16:46
分布式应用
运维
分布式
ceph
运维
架构
Ceph分布式存储实践应用之概述
1.背景Ceph是一个去中心化的
分布式存储系统
,提供较好的性能、可靠性和可扩展性。
麦神-mirson
·
2023-10-15 12:48
HBase基础
数据量越大,优势越明显;数据量小,比较消耗内存,耗资源;数据量大的时候,可以做到几十亿条数据秒级查询;HBase是一个高可靠性、高性能、面向列、可伸缩的
分布式存储系统
,利用HBASE技术可在廉价PCS
ziyue7575
·
2023-10-15 03:31
hbase
数据库
大数据
国产KylinV10版使用ceph-deploy部署ceph集群
CEPH安装和配置官⽅⽂档是最好的https://ceph.io/install/此文档的ceph版本是nautilus也就是14的版本Ceph:开源的
分布式存储系统
。
wsl12105
·
2023-10-14 13:18
ceph
服务器
Ceph 中的写入放大
新钛云服已累计为您分享769篇技术干货介绍Ceph是一个开源的
分布式存储系统
,设计初衷是提供较好的性能、可靠性和可扩展性。Ceph独一无二地在一个统一的系统中同时提供了对象、块、和文件存储功能。
新钛云服
·
2023-10-14 13:40
ceph
ceph-deploy部署ceph-nautilus
ceph-deploy部署ceph-nautilus借鉴:https://www.e-learn.cn/topic/3678897Ceph介绍Ceph基础Ceph是一个可靠地、自动重均衡、自动恢复的
分布式存储系统
潇洒哥cyx
·
2023-10-14 13:40
ceph
linux
云计算
运维
HBase分布式数据库(NoSQL)
ApacheHBase介绍HBase是一个分布式的、面向列的开源数据库,该技术来源于FayChang所撰写的Google论文“Bigtable:一个结构化数据的
分布式存储系统
”。
敲代码的彭于晏
·
2023-10-13 23:21
大数据
Ubuntu22.04搭建ceph 集群
Ceph是一个开源的、提供软件定义的、统一的
分布式存储系统
,设计初衷是提供较好的性能、可靠性和可扩展性。
高龄码农创业
·
2023-10-13 22:03
ceph
ubuntu
linux
Kubernetes-2018干货盘点
2018年,我跟随着Kubernetes社区,将其升级到了1.13.2版本,推动将GIS服务器第一次迁移到Kubernetes集群化云原生架构,构建了超过400TB的
分布式存储系统
,实现了在Kubernetes
weixin_34090562
·
2023-10-13 04:23
论文阅读笔记(Clover: 计算与存储被动分离的分布式键值存储系统)
DisaggregatingPersistentMemoryandControllingThemRemotely:AnExplorationofPassiveDisaggregatedKey-ValueStores这篇论文的笔记原文链接提出背景传统的
分布式存储系统
中
YoungerChina
·
2023-10-11 01:35
#
存储行业趋势研究
数据存储
Ceph高级工具介绍之ceph-kvstore-tool的使用
0简介Ceph是一个复杂的
分布式存储系统
,有很多组件组成,不光学习成本比较高,而且运维难度也是相当的大。但近几年,它却很受大家的欢迎,越来越多的互联网企业开始采用ceph来构建自己的存储。
瞧见风
·
2023-10-10 22:54
Ceph
ceph-dencoder
leveldb
ceph-test
分布式存储 Ceph 介绍及原理架构
概要本文主要介绍Ceph存储,从架构简介使用场景,以及内部IO流程、心跳机制、通信框架、CRUSH算法、QOS等多个方面逐渐介绍
分布式存储系统
Ceph的特性。
木零行
·
2023-10-10 20:32
分布式存储系统
如何应对SSD硬盘UNC坏块可靠性问题?
UncorrectableBitErrors(UNC),也有时候叫做MediaError(介质错误)是指在闪存设备中出现的无法修复的位错误。MediaError的产生意味着即使硬盘自身已经用尽了所有容错手段(如LDPC解码,retry等),该扇区(LBA)的数据已经无法被正确读出,这些错误是由于闪存单元的物理磨损或损坏所导致的,随着闪存设备使用时间的增长,出现UNC的可能性也逐渐增加。对云数据中心
古猫先生
·
2023-10-10 07:31
分布式
云计算
服务器
阿里云
人工智能
华为
Windows电脑上的多开器与
分布式存储系统
的关系
Windows电脑上的多开器和
分布式存储系统
是两个不同的概念,二者之间没有直接的关系。多开器是一种软件,它可以在Windows电脑上让用户同时运行多个同一应用程序的实例。
kaixingba
·
2023-10-08 19:25
分布式
干货 | 分布式系统的数据分片难题
下面请看具体内容~分布式系统,尤其是
分布式存储系统
,需要解决的两个最主要的问题即数据分片和数据冗余,下图形象生动地解释了其概念和区别:图1来源于:http://book.mixu.net/dis
running_elephant
·
2023-10-08 15:39
大数据
分布式
hash
数据分析
数据库
大数据学习,涉及哪些技术?
分布式存储系统
:如HadoopHDFS、AmazonS3、GoogleCloudStorage等。数据仓库:如AmazonRedshift
金木讲编程
·
2023-10-07 08:14
大数据
学习
大规模
分布式存储系统
:原理解析与架构实战 (大数据技术丛书) - 电子书下载 -(百度网盘 高清版PDF格式)...
大规模
分布式存储系统
:原理解析与架构实战(大数据技术丛书)-杨传辉在线阅读百度网盘下载(89hy)书名:大规模
分布式存储系统
:原理解析与架构实战(大数据技术丛书)作者:杨传辉格式:EPUB,HTMLZ,
xiaohuanglv
·
2023-10-06 20:22
Minio
分布式存储系统
Minio
分布式存储系统
Minio简介分布式系统高可用设计分布式设计数据保护高可用限制一致性安全Minio纠删码Minio如何使用纠删码Minio优点位衰减bitrot保护应用场景Minio简介Minio
m0_67403073
·
2023-10-06 17:50
面试
阿里巴巴
android
前端
后端
【译】Apache Hadoop 系列之三(用户指南)
概述HDFS是使用Hadoop程序来实现的
分布式存储系统
。一个HDFS集群主要包含管理文件系统命名空间的Namenode以及存储实际数据的Datanode
Kooola大数据
·
2023-10-04 16:02
Hadoop介绍——HDFS
•Hadoop简介:hadoop官网–
分布式存储系统
HDFS(HadoopDistributedFileSystem)POSIX•
分布式存储系统
•提供了高可靠性、高扩展性和高吞吐率的数据存储服务–分布式计算框架
南宫萧言
·
2023-10-04 01:15
组件分享之后端组件——一个简单且高度可扩展的分布式文件系统seaweedfs
组件基本信息组件:seaweedfs开源协议:Apache-2.0License内容本节我们分享一个
分布式存储系统
seaweedfs,它是一个用于bl
cn華少
·
2023-10-02 04:55
后端存储实战课笔记
比如说,如何从单机的存储系统逐步演进为
分布式存储系统
;如何在线平滑的扩容我们的存储系统。在海量数据篇,我们重点解决高
三角形代表重生
·
2023-09-29 06:29
极客时间学习笔记
java
分享55个C源码源代码总有一个是你想要的
pwd=8888提取码:88881.项目名称apachesubversion版本控制系统v1.10.3Ceph分布式文件系统v17.2.5clip命令行插图处理器v0.8curve
分布式存储系统
v1.2.6curve
zdh13370188237
·
2023-09-28 14:34
源码
开发语言
分享55个C源码源代码总有一个是你想要的
pwd=8888提取码:88881.项目名称apachesubversion版本控制系统v1.10.3Ceph分布式文件系统v17.2.5clip命令行插图处理器v0.8curve
分布式存储系统
v1.2.6curve
zdh13370188237
·
2023-09-28 14:34
c语言
开发语言
企业级磁盘阵列存储系统由硬到软全析
之所以称其为集中存储是因为相对于
分布式存储系统
数据存储张
·
2023-09-28 11:22
存储技术从入门到精通
存储
Linux
文件系统
存储技术
Hadoop笔记(一)
在大数据领域提出了两个概念:分布式文件系统,用于存储大量的数据分布式计算框架MapReduce,高效地分析数据以上两个概念组成了一个名词叫HadoopHadoop的起源谷歌发布了三篇论文:GFS
分布式存储系统
lew1sss
·
2023-09-27 08:50
简述ceph文件储存系统
Ceph是一个统一的
分布式存储系统
和共享机制,它定义了数据如何存储在一个或多个节点上并呈现给其他机器以供文件访问。
奋豆来袭
·
2023-09-27 03:17
项目框架技术
ceph
ceph分布式存储
目录一、概述二、组件三、架构图四、搭建一、概述ceph是一个统一的
分布式存储系统
,设计初衷是提供较好的性能、可靠性和可扩展性。
欢愉的猫
·
2023-09-26 15:43
ceph
分布式
网易国产开源
分布式存储系统
——Curve
导读:Curve是一款高性能、易运维、云原生的开源
分布式存储系统
(CNCFSandbox)。
·
2023-09-25 11:26
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他