E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式存储系统
天合翔宇荣获“2022 科技赋能 金融业数字化转型突出贡献奖”
27日,由中国人民银行主管的《金融电子化》杂志社主办的“2022中国金融科技年会暨第十三届金融科技应用创新奖颁奖典礼”成功在线上举办,会上揭晓了2022年金融科技应用创新奖,XSKY星辰天合“天合翔宇
分布式存储系统
XSKY星辰天合
·
2023-03-24 02:43
云计算
Redis(一)CAP+BASE、数据类型和常用关键字
CAP的理论就是说在
分布式存储系统
中,最多只能实现上面的两点。而由于在分布式的项目下,不同的服务器之间的网络
布莱斯Bryce
·
2023-03-23 20:37
Redis
分布式
redis
java
云原生
分布式存储系统
FastCFS 安装简明教程
上一篇文章我们对余老师开发的
分布式存储系统
FastCFS做了一个简单的介绍,具体看这个链接:https://www.jianshu.com/p/f09953393b1e今天我讲自己部署FastCFS集群并和
jerry的技术与思维
·
2023-03-16 04:49
BlockManager
架构简介BlockManager是一个嵌入在spark中的key-value型
分布式存储系统
,是为spark量身打造的,BlockManager在一个spark应用中作为一个本地缓存运行在所有的节点上,
搞什么呀
·
2023-03-15 13:30
分布式存储glusterfs
如谷歌的分布式文件系统GFS、分布式表格系统googleBigtable,亚马逊的对象存储AWS,阿里的TFS等都是很好的代表,同时也催生了一大批优秀的开源
分布式存储系统
,包括ceph、swift、Lustre
唯爱熊
·
2023-03-10 07:37
谷歌三大论文中文版之一:Bigtable:一个分布式的结构化数据存储系统
修正了alex翻译版的几个欠妥之处Bigtable:一个分布式的结构化数据存储系统摘要Bigtable是一个管理结构化数据的
分布式存储系统
,它被设计用来处理海量数据:分布在数千台通用服务器上的PB级的数据
shijinupc
·
2023-03-09 16:03
云计算
存储系统
服务器
存储
google
mapreduce
集群
详解一致性哈希算法
在单机系统中,所有的数据都存储在同一个服务器下,当数据量越来越多的时候,超过了单机存储容量的上限,就需要使用
分布式存储系统
,在
分布式存储系统
重,数据会被拆分到不同的存储服务下,减少单机服务的压力。
小码code
·
2023-03-09 11:44
哈希算法
算法
数据结构
【图文详解】HBase 的数据模型与架构原理详解
HBase的设计思想,来源于FayChang所撰写的Google论文“Bigtable:一个结构化数据的
分布式存储系统
”。HBase使用HadoopHDFS作为其
禅与计算机程序设计艺术
·
2023-02-18 11:16
十三天精通超大规模
分布式存储系统
架构设计——浅谈B站对象存储(BOSS)实现(下)
背景BLOB(binarylargeobject)存储,通常也被称为对象存储(OSS,objectstorageservice)。一般用来存储文件,如视频文件、音频文件等。目前,各个云计算厂商都对外提供对象存储服务,其中以亚马逊的S3系统最著名,S3系统也成为行业的事实标准。各个云计算厂商推出的对象存储服务,也纷纷兼容S3标准。B站由于其内容的独特性(视频网站),对象存储也有着非常多的需求。下面我
webxiaohua
·
2023-02-17 00:03
Geo-replication: 从 Copysets 到 Tiered Replication
对于
分布式存储系统
,我们都会使用多副本的机制来保证数据的安全性。譬如对于TiKV来说,我们默认会使用3个副本,如果需要更高等级的安全性,譬如在银行领域,我们则会使用5个副本。
siddontang
·
2023-02-06 22:48
架构师训练营第6周作业
参考《海量
分布式存储系统
Doris的高可用架构设计分析.pdf》1.请简述CAP原理。
丿追灬
·
2023-02-06 17:56
Hbase工具介绍,安装,使用
1、HBase简介HBase是一个高可靠性、高性能、面向列、可伸缩的
分布式存储系统
,利用HBase技术可在廉价PCServer上搭建大规模结构化的存储集群。
longlong1
·
2023-02-06 03:42
原创保护伞,区块链+版权会带来哪些改变?
白皮书显示,版权内容信息将存储于百度
分布式存储系统
中,图腾的内容版权链将登记确权、维权线索、交易信息等存储在版权链上。图腾被内部人士称为区块链的“集团先锋”,并且“绝对不会是唯一
情已殤
·
2023-02-05 03:43
读书笔记——大数据浪潮
可访问性公有云,私有云,混合云云计算改变了IT架构,大数据影响业务决策,影响在业务层数据中心零拷贝技术硬件基础架构必须具备伸缩性和动态重新配置功能,以针对不同的应用环境存储系统应尽可能具备更多的接口功能
分布式存储系统
八月秋风早
·
2023-02-04 23:31
云计算期末考试知识点
答:Google云计算技术包括:Goge分布式文件系统GFS,分布式计算编程模型MapReduce,分布式锁服务Chubby,分布式结构化数据表Bigtable,
分布式存储系统
Megastore,分布式监控系统
Suzie_Xie
·
2023-02-04 19:10
读书笔记
一文章讲透分布式存储
为了简化用户端的使用,提供了一个分布式缓存系统来提供对此
分布式存储系统
的访问接口以及本地数据缓冲以降低网络压力。分布式存储简介
分布式存储系统
,是将数据分散存储在多台独立的设备上。
进击的程序猿呀
·
2023-02-04 05:26
网易数帆开源
分布式存储系统
Curve
作者|陈利鑫头图|CSDN下载自东方IC出品|CSDN(ID:CSDNnews)也许是厂家+“云”的后缀会让人产生这些厂商都是竞争关系的错觉,网易云最近宣布品牌全面升级为网易数帆。当然背后的真正原因,正如网易副总裁、网易杭州研究院执行院长兼网易数帆总经理汪源所说,还是在这个时刻,网易数帆积攒的基础软件能力,需要一次汇聚式的释放。他介绍到,品牌升级后,网易数帆下包含了四大模块:第一,云原生软件生产力
weixin_39690105
·
2023-02-03 14:05
四大开源分布式存储
网易数帆开源
分布式存储系统
Curve
作者|陈利鑫头图|CSDN下载自东方IC出品|CSDN(ID:CSDNnews)也许是厂家+“云”的后缀会让人产生这些厂商都是竞争关系的错觉,网易云最近宣布品牌全面升级为网易数帆。当然背后的真正原因,正如网易副总裁、网易杭州研究院执行院长兼网易数帆总经理汪源所说,还是在这个时刻,网易数帆积攒的基础软件能力,需要一次汇聚式的释放。他介绍到,品牌升级后,网易数帆下包含了四大模块:第一,云原生软件生产力
CrisAppleYan
·
2023-02-03 14:27
网易
数据库
分布式
大数据
编程语言
大数据入门知识总结
大数据入门知识总结一、大数据部门及流程二、数据仓库1、数据仓库的基本概念2、数据仓库的主要特征3、数据仓库与数据库区别5、数据仓库——ETL三、Hadoop——HDFS
分布式存储系统
1、Hadoop简介
长不大的大灰狼
·
2023-02-02 14:25
大数据
数据仓库
大数据
hadoop
数据库
k8s挂载使用ceph集群
我们都知道ceph集群是一个开源的
分布式存储系统
,支持对象存储,块存储,文件系统。本篇文章就是要讲解下k8s下如何挂载使用ceph的块存储系统。
Mr.Lilh
·
2023-02-01 12:50
ceph
docker
linux
kubernetes
云原生
从全链路优化设计单机存储引擎
另一方面,最近几年出现了非常多基于rocksdb构建的
分布式存储系统
,但在一些功能的衔接
bloody
·
2023-02-01 09:58
[论文笔记] Cassandra - A Decentralized Structured Storage System
Intro&RelatedWorkCassandra来自于Facebook的
分布式存储系统
,目的是取得可拓展性和高可用性,一开始主要为了InboxSearch这个功能设计,该功能要求系统能处理高频的写入吞吐量
Young.Chen
·
2023-02-01 09:24
Paper
Reading
Distributed
System
Cassandra
论文笔记
分布式系统
大数据技术发展史
2004年,整个互联网界还处于懵懂时代,Google发布了三篇论文,分别是分布式文件系统GFS,大数据分布式计算框架MapReduce,
分布式存储系统
bigTable。
ks宁
·
2023-01-30 00:17
PureFlash存储系统介绍与上手指南
PureFlash是一个开源的
分布式存储系统
,项目起始于2016年。本文介绍将介绍PureFlash系统的主要特点,以及基于容器的快速上手体验。
乐乐_6272
·
2023-01-29 00:55
Ceph介绍及原理架构分享
1.Ceph架构简介及使用场景介绍1.1Ceph简介Ceph是一个统一的
分布式存储系统
,设计初衷是提供较好的性能、可靠性和可扩展性。
苍山雪麓
·
2023-01-28 13:20
Ceph介绍及原理架构分享
1.Ceph架构简介及使用场景介绍1.1Ceph简介Ceph是一个统一的
分布式存储系统
,设计初衷是提供较好的性能、可靠性和可扩展性。
老朱-yubing
·
2023-01-28 08:02
系统架构
ceph
架构
swift
分布式存储系统
分布式存储系统
特性可扩展性低成本高性能易用面临的问题数据分布一致性容错负载均衡易用性压缩/解压缩分布式存储分类根据存储的数据类型(非结构化数据、结构化数据、半结构化数据)可以将
分布式存储系统
分为分布式文件系统
似水之星
·
2023-01-26 05:40
python
分布式存储系统
_基于Python的分布式文件共享系统的实现
基于Python的分布式文件共享系统的实现朱亚林;【期刊名称】《智能计算机与应用》【年(卷),期】2015(005)004【摘要】大数据时代,信息的分享与传播越来越受到重视。人们更加专注于提高信息的分享效率、提升信息的传播速度。在日常工作中,组建一个开放的自主式、智能式、有着较强安全性能的文件共享系统,可以大幅提高工作效率,节约工作成本。本文将借助于Python语言,采用分布式程序设计理念搭建一个
张之光
·
2023-01-11 14:41
python分布式存储系统
一篇文章了解 StarRocks
StarRocks充分吸收关系型OLAP数据库和
分布式存储系统
在大数据时代的优秀研究成果,在业界实践的基础上,进一步改进优化、升级架构,并增添了众多全新功能,形成了全新的企业级产品。StarR
Shockang
·
2023-01-10 21:11
大数据技术体系
starrocks
doris
数据分析
Curve 分布式存储在 KubeSphere 中的实践
Curve是一个高性能、轻量级操作、本地云的开源
分布式存储系统
。
·
2023-01-03 18:35
云计算
七种分布式系统的解决方案,一次性讲给你听!
那啥又是
分布式存储系统
呢?天哪!某台机器宕机了咋办?Master节点如何感知到数据副本消失?如何复制副本保持足够副本数量删除多余副本又该怎么做呢?
石杉的架构笔记
·
2022-12-30 17:34
面试求职
分布式
Java
后端
分布式
java
基于容器的块存储使用
分布式存储系统
,为业务与数据在集群内漂移提供了自由保障,满足企业对于不受约束的系统环境要求。同时,平台仅保存迁移被改动的数据,而非整体增加数据量,实现增量备份。
LinkWAN互联
·
2022-12-26 07:40
容器专栏
docker
容器
块存储
赛博哈希CyberHash获得融资 或是分布式存储独角兽
Lemon资本长期专注于互联网领域的投资,对Web3.0的投资规划已有数月时间,CyberHash是一家分布式存储领域的创新公司,核心团队来自AWS,主要业务是基于IPFS的
分布式存储系统
搭建,通过IPFS
FoxFinance
·
2022-12-23 03:20
哈希算法
分布式
区块链
HBase2.2.2安装和编程实践
如果你正在安装,请用hadoop用户HBase介绍HBase是一个分布式的、面向列的开源数据库,源于Google的一篇论文《BigTable:一个结构化数据的
分布式存储系统
》。
CHILDE Ley
·
2022-12-15 11:59
bug挖掘机
hbase
hadoop
大数据
Linux企业运维之k8s(集群部署)
文章目录一、k8s简介二、k8s部署二、安装kubeadam、kubelet、kubectl一、k8s简介k8s设计架构•Kubernetesmaster由五个核心组件组成:•etcd:本身是
分布式存储系统
moumumu
·
2022-12-03 08:35
Linux企业运维
kubernetes
ceph:消息通信机制小记--研读
AsyncConnection的状态转换AsyncMessenger启动接收线程AsyncMessenger类图SendIOReceiveIO原文:https://zhuanlan.zhihu.com/p/111914519
分布式存储系统
bandaoyu
·
2022-12-01 15:32
存储
ceph
聊聊
分布式存储系统
中的心跳机制以及主节点下发指令给从节点
同时
分布式存储系统
中经常会采用master-slave架构(也即主从架构),从节点通常会使用心跳技术向主节点汇报自身的健康状况,或者其他请求,主节点处理接收到的心跳信息,并响应给从节点一些操作指令,从节点收到这些操作
叹了口丶气
·
2022-11-29 17:33
Spark实战
HDFS全方位实战
java
Alluxio
hdfs
hadoop
分布式存储
万字长文!对比分析了多款存储方案,KeeWiDB最终选择自己来
“三驾马车”指的是Google发布的三篇论文,介绍了Google在大规模数据存储与计算方向的工程实践,奠定了业界大规模
分布式存储系统
的理论基础,如今市场上流行的几款国产数据库都有参考这三篇论文。
腾讯云数据库
·
2022-11-29 16:58
腾讯云
数据库
什么是分布式_什么是分布式存储?分布式云存储有什么优势?
分布式存储系统
,它可以在多个独立的设备上分布数据。传统的网络存储系统采用集中式存储服务器来存储所有数据。存储服务器已成为制约系统性能的瓶颈和可靠性、安全性的焦点,已不能满足大规模存储应用
weixin_39568597
·
2022-11-28 07:47
什么是分布式
Bigtable 结构化数据的
分布式存储系统
Bigtable数据的存储格式Bigtableisasparse,distributed,persistentmultidimensionalsortedmap.Bigtable是一个稀疏的、分布式的、持久化存储的多维度排序映射表.表中的数据通过一个行关键字(RowKey)、一个列关键字(ColumnKey)以及一个时间戳(TimeStamp)进行索引.在Bigtable中一共有三级索引.行关键字
Maestro_T
·
2022-11-22 05:44
大数据知识学习
分布式
Hive与数据仓库——知识总结
Hive介绍:Hive建立在Hadoop上的数据仓库基础框架,提供了一系列工具,存储,查询和分析存储在
分布式存储系统
中的大规模数据集,可以将结构化的数据文件映射为一张数据库表如(csv),并提供类SQL
PineApple_Chan
·
2022-11-18 09:28
BigData
数据仓库
hive
大数据
数据库
Cassandra - A Decentralized Structured Storage System
Cassandra是一个
分布式存储系统
,管理分布在很多商业服务器节点上的非常大量的结构化数据,同时提供无单点失效的高可用服务。
西西弗的小蚂蚁
·
2022-11-16 11:05
分布式系统
Hbase2.x源码分析
HBASE是一个高可靠性、高性能、面向列、可伸缩的
分布式存储系统
,利用HBASE技术可在廉价PCServer上搭建起大规模结构化存储集群。
中国好胖子、
·
2022-11-11 22:07
hbase
K8s不同node如何共享存储&&nfs 搭建(markdown版本)
pod中产生了数据,数据通过存储插件(通常是一个容器)将数据写入远程的
分布式存储系统
ceph,当pod迁移或是升级K8s集群,即无论你在其他哪个宿
MyySophia
·
2022-11-10 10:20
#
k8s
大数据存储
kubernetes
docker
运维
阿里Tablestore概览
Bigtable分布式数据存储系统是Google为其内部海量的结构化数据开发的云存储技术,是Google的第三项云计算关键技术,是所有云时代
分布式存储系统
的开发蓝本,已经在超
早睡早起的黑猫
·
2022-11-02 11:26
面试官让我讲讲分布式系统容错架构,结果。。。
啥又是
分布式存储系统
?某台机器宕机了咋办?Master节点如何感知到数据副本消失?如何复制副本保持足够副本数量?删除多余副本又该怎么做呢?
石杉的架构笔记
·
2022-10-08 07:46
面试求职
分布式
Java
架构
分布式
java
分布式存储系统
之Ceph集群存储池、PG 与 CRUSH
优质资源分享学习路线指引(点击解锁)知识定位人群定位Python实战微信订餐小程序进阶级本课程是pythonflask+微信小程序的完美结合,从项目搭建到腾讯云部署上线,打造一个全栈订餐系统。Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统前文我们了解了ceph集群状态获取常用命令以及通过cephdaemon、cephtell动态配置ceph组件、ceph.c
u012804784
·
2022-10-06 07:25
android
分布式
ceph
计算机
学一点Ceph知识:初识Ceph
Ceph是一个开源的
分布式存储系统
,可大规模扩展、高性能、无单点故障,在普通的服务器上可以支持到PB级容量,商用机器上支持的容量可以达到EB级别。
·
2022-09-30 11:32
云存储
腾讯云——轻量数据库服务
日志即数据库:智能计算存储,由
分布式存储系统
自动管理数据的多
华宇云计算
·
2022-09-29 07:46
大数据
分布式系统面试连环炮
他们有共同的一个问题,就是都没怎么搞过分布式系统,现在互联网公司,一般都是做分布式的系统,大家都不是做底层的分布式系统、
分布式存储系统
HadoopHDFS、分布式计算系统HadoopMapReduce/
@司马懿
·
2022-09-22 19:12
分布式服务
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他