集群存储

HDFS文件系统以及Hbase、Cassendra、TiDB比较

实际应用中已有很多集群存储的数据达到PB级别。根据Hadoop官网，Yahoo！的Hadoop集群约有10万颗CPU，运行在4万个机器节点上。
小giaogiao·2020-07-16 05:16

集群存储比传统NAS和SAN强在何处

传统的SAN与NAS分别提供的是数据块与文件两个不同级别的存储服务，集群存储也分为提供数据块与文件两个不同级别存储服务的集群存储系统。
weixin_34186950·2020-07-15 05:32

kafka理论知识

Kafka集群存储的
墨染繁华执念心悠·2020-07-14 18:54

Red Hat Enterprise Linux 5 序列号

2007年03月29日星期四上午02:06作系统版本的第四次重要版本发布,RedHat酝酿发布RHEL5已经超过了两年,主要变化包括Linux内核由2.6.9升级为2.6.18,支持Xen虚拟化技术,集群存储等
imnol·2020-07-14 11:54

看“不要让集群存储成为被忽视的角落”总结

===============================当多种应用并发访问同一个LUN(逻辑单元号)存储区域文件并发共享的情况时，一般传统的SAN,NAS存储架构解决方案，不能得到很好的解决，但集群存储的方案却解决了应用并发访问同一个
guiyiying·2020-07-14 11:01

集群存储高可用方法

集群存储是一种横向扩展（Scale-out）存储架构，具有容量和性能线性扩展的优势，已经得到市场的广泛认
刘爱贵·2020-07-14 01:07

CentOS7.4环境下搭建--Gluster分布式集群存储

环境如下：OS：Centos7.4x86_64IP地址如下：Daasbank1:192.168.1.102---CentOS7.4x86_64Daasbank2:192.168.1.103---CentOS7.4x86_64Daasbank3:192.168.1.105---CentOS7.4x86_64Client:192.168.1.106---CentOS7.4x86_642．修改每一台主机
延瓒@Cyz·2020-07-13 11:05

从Docker到Kubernetes——Kubernetes设计解读之DaemonSet、ConfigMap、Job

比如：在每台节点上运行一个集群存储服务，例如运行glusterd，ceph。在每台节点上运行一个日志收集服务，例如fluentd，logstash。
No_Game_No_Life_·2020-07-13 01:54

Zookeeper数据查看工具ZooInspector

Zookeeper作为常用的集群协调者组件被广泛应用，尤其是在大数据生态圈中；Zookeeper集群存储各个节点信息，包括：Hadoop、Hbase、Storm、Kafka等等；二、查询ZK数据的方式那如何查看
Arno-wei·2020-07-11 08:48

FusionCompute存储虚拟化

文章目录存储虚拟化相关概念及技术FC中存储的基本概念FC存储虚拟化架构VIMS虚拟集群存储文件系统VIMS分布式锁VIMS心跳FC磁盘技术存储虚拟化功能原理快照快照原理链接克隆存储热迁移存储资源裸设备映射
TKE_chenf·2020-07-09 15:44

基于ZooKeeper的配置信息同步方案

ZooKeeper服务器集群存储配置信息,在服务器上创建一个保存数据的节点(创建节点操作);配置管理程序提供一个配置管理的UI界面或者命令行方式,
wcnmbcsd·2020-07-09 14:52

【SpringCloudAlibaba】之Nacos集群搭建Demo练习（Linux版本Docker镜像构建）

为了解决这个问题，Nacos采用了集群存储的方式来支持集群化部署，目前只支持mysql的存储。Nacos支
总是幸福的老豌豆·2020-07-07 21:16

MySQL技术内幕-INNODB

INNODB概述各版本之间的比较后台线程关键特性存储引擎innodb支持事务；行锁；MVCC获取高并发性；聚簇索引；myisam不支持事务；表锁；支持全文索引；数据、索引文件分离，数据文件压缩；ndb集群存储引擎
达文西大话互联网·2020-07-06 17:31

MySQL中MyISAM和InnoDB对B-Tree索引不同的实现方式

作为索引中最为常见的一种类型，B-Tree索引大都采用的是B+Tree数据结构来存储数据（NDB集群存储引擎内部实际上采用T-Tree结构存储这种索引）。
yyyiue·2020-07-06 15:47

高可用NAS集群技术

高可用NAS集群技术目录高可用NAS集群技术一、前言二、集群NAS的介绍（一）什么是集群NAS（二）集群NAS的主流架构（三）集群NAS的分类三、集群存储高可用技术（一）什么是集群高可用（二）常用高可用技术介绍
易阳天·2020-07-05 17:47

【HDFS】存储balancer到底咋回事

最近集群存储倾斜，个别节点存储超过85%，启动balancer之后效果明显，但是有时候balancer启动也不能解决问题。
年轻的海员·2020-07-05 15:55

Ceph 集群管理-入门篇

存储集群存储设备有两个在磁盘上存储数据的Ceph守护程序：CephOSD是大多数数据存储在Ceph中的地方。一般而言，每个OSD都由单个存储设备支持。
红尘世间·2020-07-01 16:35

MongoDB 分片集群搭建

由于云数据中心需要存储海量数据且系统并发访问量大，所以需要使用MongoDB分片集群存储数据，这里将使用三台机器来搭建MongoDB分片集群，其部署方式如下图所示。
张哲BJUT·2020-07-01 08:31

淘宝分布式文件系统TFS设计

TFS被广泛地的应用在淘宝的各项业务中，目前已部署的最大集群存储文件数已近千亿。TFS已在TaoCode上开源(项目主页：ht
xiaogugood·2020-06-30 00:51

NoSQL数据库－redis集群搭建

NoSQL002redis集群Redis集群1部署管理主机二查看集群信息三检查集群主机信息四集群存储数据工作原理五访问集群＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊环境准备/etc/init.d
～上善若水～～·2020-06-29 15:12

019.Kubernetes二进制集群存储longhorn

一Longhorn存储部署1.1Longhorn概述Longhorn是用于Kubernetes的开源分布式块存储系统。提示：更多介绍参考：https://github.com/longhorn/longhorn。1.2Longhorn部署1[root@master01~]#cd/opt/k8s/work/2[root@master01work]#source/root/environment.sh
IT中国人·2020-06-29 11:00

019.Kubernetes二进制集群存储longhorn

一Longhorn存储部署1.1Longhorn概述Longhorn是用于Kubernetes的开源分布式块存储系统。提示：更多介绍参考：https://github.com/longhorn/longhorn。1.2Longhorn部署1[root@master01~]#cd/opt/k8s/work/2[root@master01work]#source/root/environment.sh
木二·2020-06-29 11:00

Redis 代理服务Twemproxy

1、twemproxyexplore当我们有大量Redis或Memcached的时候，通常只能通过客户端的一些数据分配算法（比如一致性哈希），来实现集群存储的特性。
宵蓝·2020-06-27 15:11

GitHub使用elasticsearch遇到的一些问题及解决方法

数据以分片方式跨越整个集群存储，每个分片（sh
wbj0110·2020-06-27 14:48

Kafka入门介绍（一）

Kafka集群存储的记录类别称为主题。Kafka四个核
zuci·2020-06-27 04:47

Kubernetes（k8s）概念学习、集群安装

1、Kubernetes（k8s）架构图，如下所示：1）、etcd的官方将它定位成一个可信赖的分布式键值存储服务，它能够为整个分布式集群存储一些关键数据，协助分布式集群的正常运转。
小段大帅·2020-06-27 01:41

KubeSphere 部署安装

使用kubeadm搭建的Kubernetes1.15.2版本集群Helmv2.12.2版本使用NFS作为集群存储后端#下载安装脚本mkdir/root/kubeSphere&&cd/root/kubeSpheregitclonehttps
断了的军刀·2020-06-27 00:54

Kubernetes（k8s）概念学习、集群安装

1、Kubernetes（k8s）架构图，如下所示：1）、etcd的官方将它定位成一个可信赖的分布式键值存储服务，它能够为整个分布式集群存储一些关键数据，协助分布式集群的正常运转。
别先生·2020-06-26 05:44

Twemproxy-Redis集群代理

1、twemproxyexplore当我们有大量Redis或Memcached的时候，通常只能通过客户端的一些数据分配算法（比如一致性哈希），来实现集群存储的特性。
马万明·2020-06-24 13:14

云计算（1.3）Google云计算三大核心技术 - 分布式结构化数据表BigTable

（分布式数据处理）接下来学习最后一个技术：分布式结构化数据表BigTable谷歌技术"三宝"之BigTableGoogleBigtable中文版引进BigTableGFS（2003年发表）使用商用硬件集群存储海量数据
有机后浪·2020-06-24 00:10

ceph系列三、可用空间计算

随着集群存储文件的增多，为什么两者的呈现的可用容量会不一致，应该以那个为准。一、cephdf获取cephpool信息因为文件默认都存在data的pool，所以我们获取pool的相关信息。
沉舟已过·2020-06-23 06:41

Kuebernetes之DaemonSet

当需要在集群内每个node运行同一个pod，使用DaemonSet是有价值的，以下是典型使用场景：运行集群存储守护进程，如glusterd、ceph。运行集群日志收集守护
五星上炕·2020-06-23 04:31

提前突击了这近200道大数据面试题，果然头条、京东都给了Offer

还是多集群独立维护的，如果是多集群存储数据，它们之间数据是如何打通进行关联的？如果仅是一个集群的话，我想知道这个集群的NameNode上的配置，是如何Hol
大数据研习社·2020-06-23 02:00

大数据面试系列之——Hbase

Hbase是一个分布式的列式存储的数据库1.说说Hbase的特点1.分布式架构，Hbase通过集群存储数据，数据最终会落到HDFS上2.是一种NoSQL的非关系型数据库，不符合关系型数据库的范式3.面向列存储
潜心_守道·2020-06-21 22:52

k8s之安装环境知识点三-资源

删除DaemonSet将会删除它创建的所有Pod使用DaemonSet的一些典型用法：运行集群存储daemon，例如在每个Node上运行glusterd、ceph在每个Node上运行日志收集daemon
chenshiying007·2020-06-21 04:38

第七章----RabbitMQ集群和镜像队列

集群中的所有节点都会备份所有的元数据信息：队列元数据：队列的名称及属性交换器：交换器的名称及属性绑定关系元数据：交换器与队列或者交换器与交换器之间的绑定关系vhost元数据：为vhost内的队列、交换器和绑定提供命名空间及安全属性集群存储关系
枫子夜·2020-04-24 15:57

daemonset-k8s

使用DaemonSet的一些典型用法：运行集群存储daemon，例如在每个节点上运行glusterd、ceph。在每个节点上运行日志收集daemon，例如fluentd、logstash。在每个
Lust4Life·2020-04-21 15:00

Zookeeper数据查看工具ZooInspector简介

一、背景Zookeeper作为常用的集群协调者组件被广泛应用，尤其是在大数据生态圈中；Zookeeper集群存储各个节点信息，包括：Hadoop、Hbase、Storm、Kafka等等；二、查询ZK数据的方式那如何查看
__豆约翰__·2020-04-13 08:07

HBase储备知识三：基本信息

这个分布式文件系统简称GFS，它使用商用硬件集群存储海量数据。文件系统将数据在节点之间冗余复制，这样的话，即使一台存储服务器发生故障，也不会影响数据的可用性。
云山之巅·2020-04-06 18:00

045.集群存储-CSI存储机制

一CSI存储机制1.1CSI简介Kubernetes从1.9版本开始引入容器存储接口ContainerStorageInterface（CSI）机制，用于在Kubernetes和外部存储系统之间建立一套标准的存储管理接口，通过该接口为容器提供存储服务。1.2CSI的设计背景Kubernetes通过PV、PVC、Storageclass已经提供了一种强大的基于插件的存储管理机制，但是各种存储插件提供
木二·2020-04-03 15:00

044.集群存储-StorageClass

一StoragClass1.1StorageClass概述StorageClass作为对存储资源的抽象定义，对用户设置的PVC申请屏蔽后端存储的细节，一方面减少了用户对于存储资源细节的关注，另一方面减轻了管理员手工管理PV的工作，由系统自动完成PV的创建和绑定，实现了动态的资源供应。基于StorageClass的动态资源供应模式将逐步成为云平台的标准存储配置模式。StorageClass的定义主要
木二·2020-04-03 11:00

043.集群存储-共享存储

一共享存储1.1共享存储作用Kubernetes对于有状态的容器应用或者对数据需要持久化的应用，不仅需要将容器内的目录挂载到宿主机的目录或者emptyDir临时存储卷，而且需要更加可靠的存储来保存应用产生的重要数据，以便容器应用在重建之后仍然可以使用之前的数据。1.2共享存储资源为了能够屏蔽底层存储实现的细节，便于使用和管理，Kubernetes从1.0版本就引入PersistentVolume（
木二·2020-03-26 12:00

转载:Etcd超全解：原理阐释及部署设置的最佳实践

它是许多分布式系统的主干，为跨服务器集群存储数据提供可靠的方式。它适用于各种操作系统，
meng_philip123·2020-03-22 23:46

Infortrend CS分布式NAS集群优势之---高可用篇

分布式作为大规模的集群存储产品，要具备更加全面的防范措施，应对宕机、断电等故障的发生。
吾与·2020-02-28 15:38

Redis集群模式

1、常见的三种数据的集群存储模式full-mirror：全量镜像模式，单纯备份模式，各个节点数据相同，都包含了全量数据，仅主节点可写，保证了数据冗余和读的负载均衡。
JaxYoun·2020-02-20 18:00

Redis集群模式

1、常见的三种数据的集群存储模式full-mirror：全量镜像模式，单纯备份模式，各个节点数据相同，都包含了全量数据，仅主节点可写，保证了数据冗余和读的负载均衡。
JaxYoun·2020-02-20 18:00

使用KyBot优化Apache Kylin存储

既然是预计算，势必需要占用一定的集群存储资源；如果使用不当，可能造成大量的资源浪费。如何优化存储资源占用，就是本文讨论的话题。关于存储资源ApacheKylin使用“空间换时间”极大提高了查询效率。
Kyligence·2020-02-19 03:03

深入学习MongoDB

MongoDB集群，指导用户设置和使用集群存储大量数据并高效访问数据，了解如何让应用程序兼容分布式数据库系统。
Mango_yes·2020-01-04 20:08

Ceph —— 均衡PG

Ceph——均衡PG日常工作中，我们常常会发现PG不均衡，而集群中只要有一个OSD先达到full的状态，则整个集群都无法写入数据，所以为了尽可能的提高集群存储空间的利用率，我们都希望PG尽可能的均匀分布在
君无颜·2020-01-04 17:00

大型网站技术架构（六）伸缩性

大型网站技术架构核心原理与案例分析读书笔记伸缩性架构一、设计不同功能的物理分离纵向分离：网站具体产品可复用业务服务基础技术服务数据库横向分离：横向分离的粒度可以非常小，电商网站每个页面都会独立部署单一功能通过集群伸缩应用服务器集群缓存服务器集群存储服务器集群二
俊杰的简书·2019-12-28 01:31
上一页 1 2 3 4 5 6 7 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他