E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式存储
KVM+GFS
分布式存储
系统构建KVM高可用
一、案列分析1.1案列概述本章案例主要使用之前章节所学的KVM及GlusterFs技术,结合起来从而实现KVM高可用。利用GlusterFs分布式复制卷,对KVM虚拟机文件进行分布存储和冗余。分布式复制卷主要用于需要冗余的情况下把一个文件存放在两个或两个以上的节点,当其中一个节点数据丢失或者损坏之后,KVM仍然能够通过卷组找到另一节点上存储的虚拟机文件,以保证虚拟机正常运行。当节点修复之后,Glu
henan程序媛
·
2024-09-16 00:17
分布式
GFS
高可用
KVM
Hadoop
它具有高度的可扩展性、容错性和高效的
分布式存储
与计算能力。
傲雪凌霜,松柏长青
·
2024-09-16 00:16
后端
大数据
hadoop
大数据
分布式
Web3入门指南:从基础概念到实际应用
与以往依赖中心化服务器和大公司控制的数据模式不同,Web3通过区块链技术实现了数据的
分布式存储
和处理。这一去中心化
dingzd95
·
2024-09-14 23:01
去中心化
web3
区块链
人工智能
智能合约
HBase介绍
概述HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable:一个结构化数据的
分布式存储
系统》。
mingyu1016
·
2024-09-14 21:47
数据库
KVM+GFS
分布式存储
系统构建 KVM 高可用
一、案例分析本案例主要使用KVM及GlusterFS技术,结合起来从而实现KVM高可用。利用GlusterFs分布式复制卷,对KVM虚拟机文件进行分布存储和冗余。分布式复制卷主要用于需要冗余的情况下把一个文件存放在两个或两个以上的节点,当其中一个节点数据丢失或者损坏之后,KVM仍然能够通过卷组找到另一节点上存储的虚拟机文件,以保证虚拟机正常运行。当节点修复之后,GlusterFS会自动同步同一组卷
wkysdhr
·
2024-09-12 00:53
分布式
ELK架构介绍
Elasticsearch提供
分布式存储
和搜索能力;Logstash负责数据收集和处理,而Kibana则提供数据可视化和分析界面。
星河漫漫l
·
2024-09-09 11:40
elk
elasticsearch
运维
服务器
Hbase、hive以及ClickHouse的介绍和区别?
HBase的设计灵感来源于Google的Bigtable论文,它通过提供类似于Bigtable的能力,在Hadoop之上构建了一个高可靠性、高性能、面向列、可伸缩的
分布式存储
系统。
damokelisijian866
·
2024-09-08 23:43
hbase
hive
clickhouse
java 实现前后端分离_详解前后端分离之Java后端
那么问题来了,用户很多时,服务器压力很大,如果采用
分布式存储
session,又可能会出现不同步问题,那么前后端分离就很好的
bfecoder
·
2024-09-08 13:08
java
实现前后端分离
先进制造业数字化转型:典型场景存储需求及实践解析
本文将从先进制造企业数字化转型中典型场景的存储需求出发,结合XSKY
分布式存储
的实际案例,看
分布式存储
如何帮助企业进行存储转型,满足相关的数据使用需求。01 本地硬盘存储方案的
XSKY星辰天合
·
2024-09-07 16:08
云计算
【初出江湖】分布式之什么是
分布式存储
?
目录标题
分布式存储
分布式存储
系统特点
分布式存储
原理
分布式存储
的应用场景
分布式存储
和集中式存储的区别
分布式存储
分布式存储
是一种将数据分散存储在多个节点上的存储方式。
无休居士
·
2024-09-03 15:05
微服务与分布式
分布式
分布式存储
分布式存储的应用场景
集中式存储
分布式数据库
分布式文件系统
缓存读写策略 Cache Aside Pattern,开发必备
我们在前面讲到了当我们业务面临大量写并发的时候,将数据库开发成
分布式存储
系统,然后又介绍了NoSql数据库与关系型数据库互相配合,以用来更好的服务与我们的业务发展。
架构师修炼
·
2024-09-02 12:20
缓存
缓存
java
读写策略
分布式
经验笔记:Hadoop
Hadoop经验笔记一、Hadoop概述Hadoop是一个开源软件框架,用于
分布式存储
和处理大规模数据集。其设计目的是为了在商用硬件上运行,具备高容错性和可扩展性。
漆黑的莫莫
·
2024-09-02 03:54
随手笔记
笔记
hadoop
大数据
京存
分布式存储
强势助力自动驾驶行业!
随着自动驾驶技术的快速发展,数据存储已成为该领域的关键技术之一。自动驾驶系统涉及的数据类型繁多,包括车辆状态信息、环境感知数据、高精度地图数据、道路基础设施数据等,其规模庞大,需要高效、稳定的数据存储解决方案来满足不断增长的数据存储需求。在需求方面,自动驾驶行业要求存储系统具备高性能、高可靠性和高可用性,以支持实时数据处理和快速决策。例如,自动驾驶汽车需要实时访问大量的传感器数据、地图数据和其他相
京存高性能存储
·
2024-08-31 14:32
分布式
自动驾驶
人工智能
服务器
科技
极客天成签署 CCLA,携手openEuler社区共拓信创AI新天地
极客天成以高通量分布式集群存储为先锋,围绕软件定义、智能化、安全可靠,全链RDMA构建了完全自主可控的
分布式存储
产品线和解决方案,主要解决用户海量数据下的高性能低时延数据读写难题,可为用户的数据中心提供
极客天成ScaleFlash
·
2024-08-31 14:32
人工智能
中标 | 极客天成
分布式存储
软件成功中标华泰证券并行文件系统软件项目
2023年9月21日,北京极客天成科技有限公司
分布式存储
软件V3.0通过代理商成功中标华泰证券并行文件系统软件项目。
极客天成ScaleFlash
·
2024-08-31 14:31
分布式
如何在Web3.0应用中实现数据的安全存储?
在Web3.0应用中,可以通过以下几种方式实现数据的安全存储:一、
分布式存储
技术1.IPFS(InterPlanetaryFileSystem,星际文件系统):-IPFS是一种去中心化的分布式文件存储系统
alankuo
·
2024-08-31 09:31
生成式人工智能AIGC
人工智能
单机 安装 ELK 日志分析系统
Elasticsearch是一个基于Lucene的、支持全文索引的
分布式存储
和索引引擎,主要负责将日
TheFlsah
·
2024-08-30 21:40
Linux
Python知识点:如何使用HBase与HappyBase进行
分布式存储
使用HBase与HappyBase进行
分布式存储
是处理大规模数据的有效方式。HBase是一个基于Hadoop的开源分布式数据库,可以处理非常大的表。
杰哥在此
·
2024-08-29 15:51
Python系列
分布式
python
hbase
编程
面试
学习笔记六:ceph介绍以及初始化配置
k8s对接cephceph是一种开源的分布式的存储系统,包含以下几种存储类型:块存储(rbd)文件系统cephfs对象存储
分布式存储
的优点:Ceph核心组件介绍安装Ceph集群初始化配置Ceph安装源安装基础软件包安装
风车带走过往
·
2024-08-27 23:49
K8S相关应用
学习
笔记
ceph
秋招Java后端开发——非关系型数据库篇(Redis)
分布式架构天生支持
分布式存储
和计算,能够跨多个
番茄炒西红柿炒蛋
·
2024-08-27 13:19
秋招Java后端
数据库
数据库
nosql
redis
基于Hadoop的海量图像检索
Hadoop的海量图像检索文章目录基于Hadoop的海量图像检索摘要第一章引言1.1研究背景1.2研究意义1.3国内外研究现状1.4研究内容与方法1.5论文结构第二章相关技术介绍2.1Hadoop框架2.2
分布式存储
与计算
usp1994
·
2024-08-24 13:12
hadoop
eclipse
大数据
从零到一建设数据中台 - 关键技术汇总
一、数据中台关键技术汇总语言框架:Java、Maven、SpringBoot数据分布式采集:Flume、Sqoop、kettle数据
分布式存储
:HadoopHDFS离线批处理计算:MapReduce、Spark
我码玄黄
·
2024-08-24 12:09
数据中台
数据挖掘
数据分析
大数据
选型搜索引擎之参考Elasticsearch
Elasticsearch的特点包括:
分布式存储
和搜索:Elasticsear
剑飞的编程思维
·
2024-03-09 18:17
elasticsearch
ElasticSearch为什么快?
ElasticSearch是一个高性能,分布式搜索引擎,它之所以快,主要有以下几个原因:1.
分布式存储
:ElasticSearch使用
分布式存储
技术,将数据存储在多个节点上从而减少单个节点的压力,提高整体性能
z.jiaminf
·
2024-03-06 19:14
ElasticSearch
elasticsearch
大数据
搜索引擎
Java架构师之路四、分布式系统:分布式架构、分布式数据存储、分布式事务、分布式锁、分布式缓存、分布式消息中间件、
分布式存储
等。
目录分布式架构:分布式数据存储:分布式事务:分布式锁:分布式缓存:分布式消息中间件:
分布式存储
:Java架构师之路三、网络通信:TCP/IP协议、HTTP协议、RESTfulAPI、WebSocket、
述清-架构师之路
·
2024-02-27 01:09
Java架构师之路
java
分布式
架构
Python专家指南:全面揭示文件操作的核心机制与实战技巧
无论是在日常的数据处理、配置文件管理、大规模数据分析,还是在复杂软件开发、网络通信及
分布式存储
解决方案中,对文件的操作能力都是程序员必备的基本功。
极客代码
·
2024-02-20 06:05
玩转Python
python
以内存为核心的开源
分布式存储
系统
是一个以内存为核心的开源
分布式存储
系统,也是目前发展最迅速的开源大数据项目之一。
这次靠你了
·
2024-02-20 05:26
大数据
Tachyon
hdfs
大数据
云计算基础-存储虚拟化(深信服aSAN
分布式存储
)
什么是存储虚拟化
分布式存储
是利用虚拟化技术“池化”集群存储卷内通用X86服务器中的本地硬盘,实现服务器存储资源的统一整合、管理及调度,最终向上层提供NFS、ISCSI存储接口,供虚拟机根据自身的存储需求自由分配使用资源池中的存储空间
比特微联
·
2024-02-19 13:19
云计算
腾讯云OSS文件上传功能
它具有以下特点和优势:高可靠性:采用
分布式存储
架构,数据会在多个设备上进行冗余备份,确保数据的高可靠性和持久性。弹性扩展:支持根据业务需求自动扩展存储容量,无需担心存储空间不足的问题。
奋力向前123
·
2024-02-19 10:37
java
腾讯云
java
服务器
Hive入门,Hive是什么?
它是建立在Hadoop生态系统之上的,利用Hadoop的
分布式存储
和计算能力来处理和分析数据。
JayGboy
·
2024-02-19 10:31
hive
hadoop
数据仓库
论文阅读-Pegasus:通过网络内一致性目录容忍
分布式存储
中的偏斜工作负载
论文名称:Pegasus:ToleratingSkewedWorkloadsinDistributedStoragewithIn-NetworkCoherenceDirectories摘要高性能
分布式存储
系统面临着由于偏斜和动态工作负载引起的负载不平衡的挑战
向来痴_
·
2024-02-14 06:10
分布式
03-03 elasticsearch
入门篇使用场景海量存储:支持
分布式存储
实时搜索:lucene倒排索引,海量数据下近乎实时搜索a.日志分析,es+logstash+kibanab.Github代码数据分析:支持数据分析及处理基本功能分布式的搜索引擎和数据分析引擎全文检索
nan得糊涂
·
2024-02-13 19:26
Kubernetes深度实践(三)
先说一下存储的选择,一般的话有一个
分布式存储
+Localstorage基本就够了。
哦呵呵_3579
·
2024-02-13 05:07
DL4J中文文档/DataVec/读取器
读取器实现对于复杂的文件类型或
分布式存储
机制是有用的。读取器返回记录记录中每一列的Writable类。这些类用于将每个记录转换为张量/NDArray格式。使用每个读取器实现都扩展了BaseRec
hello风一样的男子
·
2024-02-12 22:18
Glusterfs
分布式存储
目录一、简介二、特点1、扩展性和高性能2、高可用性3、全局统一命名空间4、弹性卷管理5、基于标准协议三、专业术语四、GlusterFS构成五、GlusterFS的工作流程1、工作流程2、弹性HASH算法六、GlusterFS常用分布式简介1、分布式卷2、条带卷(Stripevolume)3、复制卷(Replicavolume)4、分布式条带卷(DistributeStripevolume)5、分布
忙碌滴比特流
·
2024-02-12 14:55
运维
linux基础
运维
如何搭建glusterfs
分布式存储
系统
目录前言什么是
分布式存储
分布式存储
的优点本章重点glusterfs相关术语glusterfs的逻辑卷类型准备6台测试服务器storage服务器安装glusterfs软件并启动分布式集群的结构配置可信池pool
MssGuo
·
2024-02-12 14:55
存储篇
分布式
运维
glusterfs
陪标材料制作
(1)陪标时会以不同于主投方的产品与应标,如此次陪标是用Lenvon的
分布式存储
,超融合服务器,交换
吴亮16
·
2024-02-11 20:15
Ceph入门到精通-sysctl参数优化
Ceph是一种开源的、高度可扩展的
分布式存储
系统,它可以在商业硬件上提供对象、块和文件系统的存储。
·
2024-02-11 18:09
SpringCloud微服务实战——搭建企业级开发框架(三十六):使用Spring Cloud Stream实现消息中间件功能
在进行框架设计的时候,我们考虑是否能够和之前实现的短信发送、
分布式存储
等功能一样,抽象统一消息接口,屏蔽底层实现,在用到消息队列时,使用统一的接口代码,然后在根
·
2024-02-11 17:42
Ceph入门到精通-sysctl参数优化
Ceph是一种开源的、高度可扩展的
分布式存储
系统,它可以在商业硬件上提供对象、块和文件系统的存储。
·
2024-02-11 17:41
ClickHouse的特征,性能,优点,缺点,应用场景以及什么是OLAP,Clickhouse的相关优化
1.什么是clickhouse:提供了sql结构化的查询语言;clickhouse是一款分布式数据库;clickhouse可以存储海量数据;因为clickhouse是
分布式存储
海量数据,所以解决了高并发的问题
晓晓很可爱
·
2024-02-11 08:15
clickhouse
大数据
分布式存储
系统学习笔记(三)—分布式键值系统(1)—Amazon Dynamo
1.概述Dynamo以很简单的键值方式存储数据,不支持复杂的查询。Dynamo中存储的是数据值的原始形式,不解析数据的具体内容。Dynamo主要用于Amazon购物车和S3云存储服务。Dynamo通过组合P2P的各种技术打造了线上可运行的分布式键值系统,下表列出了Dynamo设计时面临的问题及最终采取的解决方案:2.数据分布Dynamo采用一致性哈希将数据分布到多个存储节点中(博文:一天不学习我浑
不会算命的赵半仙
·
2024-02-11 02:34
架构
分布式
分布式系统
MFS
分布式存储
MFS
分布式存储
MooseFS是一个具备冗余容错功能的分布式网络文件系统,它将数据分别存放在多个物理服务器或单独磁盘或分区上,确保一份数据有多个副本,然而对于访问MFS的客户端或者用户来说,整个分布式文件系统集群看起来就像一个资源一样
中门对狙
·
2024-02-11 01:30
DolphinScheduler-3.2.0 集群搭建
DolphinScheduler-3.2.0生产集群高可用搭建,DolphinScheduler原数据存储mysql设置,
分布式存储
采用h
爱吃辣条byte
·
2024-02-10 01:23
任务调度
大数据
数据仓库
2022-12-02 Redis Cluster (1)通信机制
原文链接https://mp.weixin.qq.com/s/tlocdMlyI4Sx8UxfbuVjTw能提供的能力高可用更高的QPS
分布式存储
大量数据分散网络流量压力基本架构分区方式虚拟槽分区虚拟槽分区示意图
圆方的鱼
·
2024-02-09 21:05
编程随笔-ElasticSearch知识导图(1):全景
但我最初了解ES却是从NoSQL数据库开始,在使用、研究了ES一段时间后,我发现这是一个优秀的分布式部署软件,不仅是一个全文搜索引擎、还是一个
分布式存储
系统、一个分布式数据库。
weixin_33868027
·
2024-02-09 18:58
数据库
大数据
json
Raft算法在Curve中的实践
110006508【嵌牛导读】:本文介绍了RAFT算法的特点和基本应用【嵌牛鼻子】:Curve实践【嵌牛模块】:RAFT算法概念、特点、应用场合【嵌牛正文】:urve作为高性能、高可用、高可靠的新一代
分布式存储
系统
xx_d18b
·
2024-02-08 19:45
使用 Kubernetes,基础设施层面如何优化?分享一些解决方案
重点内容搭配SmartX自主研发的Kubernetes服务、
分布式存储
、Kubernetes原生存储等产品,用户既可基于SmartX超融合构筑全栈Kubernetes基础设施,也可选择为部署在裸金属、其他虚拟化平台或混合环境的
志凌海纳SmartX
·
2024-02-08 07:51
kubernetes
云原生
大热的区块链到底牛在哪
现在各行业都在布局区块链,包括金融、数字货币、医疗、物流等等,区块链之所以这么牛,其实取决于它的这三个特点:1.
分布式存储
记录数据存储在多个地方,没有一个固定的中心点,安全指数高,
二呱子
·
2024-02-07 16:26
SmartX 超融合和
分布式存储
支持哪些信创硬件?如何选型配置?
为了推动IT基础架构国产化转型,不少用户都使用SmartX超融合和
分布式存储
构建信创云基础设施。其中,信创硬件的选型与配置往往是用户在规划与部署环节关注的重点:国产CPU/存储怎么选?
志凌海纳SmartX
·
2024-02-06 21:46
超融合
云计算
分布式
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他