集群存储

（五）IBMMQ集群初识

1.适用版本5.1以上的版本2.为什么要使用集群集群可以在集群中的队列和队列管理器之间进行消息分配来达到消息负载均衡的目的，可以提升系统的容灾能力以及提高系统的性能3.集群的组成3.1.集群存储库集群存储库是集群成员的队列管理器的集合
ILYPTING·2022-12-08 07:05

部署k8s集群存储类 必懂storageclass

是什么storageclass连接存储插件，根据PVC的消费动态生成PV，简言之，就是在创建pod之前，NFS的另一种形式存储，只要一次定义一个类，以后不用声明，会自动挂载此类NFS示例提示：node节点也要下载nfs-utils，否则将不能挂载步骤：1、开启NFSvim/etc/exports/nfsdata*(rw,sync,no_root_squash)[root@master~]#syst
Friends of the wind·2022-12-05 16:18

Redis—大key问题讨论及解决方案

主要包括：1、单个简单的key存储的value很大2、hash，set，zset，list中存储过多的元素3、一个集群存储了上亿的keybigkey会带来一些问题，如：1.读写bigkey会导致超时严重
人至中年666·2022-11-29 15:13

【Redis】集群存储算法

集群存储算法一、集群存储算法1.1、分布式存储算法1.2、哈希取余算法分区1.3、一致性哈希算法1.4、哈希槽分区1.5、Redis集群存储策略一、集群存储算法1.1、分布式存储算法分布式存储的常见算法
擅长开发Bug的Mr.NaCl·2022-11-14 09:53

分布式存储系统之Ceph集群存储池、PG 与 CRUSH

优质资源分享学习路线指引（点击解锁）知识定位人群定位Python实战微信订餐小程序进阶级本课程是pythonflask+微信小程序的完美结合，从项目搭建到腾讯云部署上线，打造一个全栈订餐系统。Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统前文我们了解了ceph集群状态获取常用命令以及通过cephdaemon、cephtell动态配置ceph组件、ceph.c
u012804784·2022-10-06 07:25

6.Docker_Swarm集群

个核心组件：安全集群/编排引擎企业级安全集群编排引擎使用1.1/多个docker节点连接，用户以集群方式管理1.将应用定义在声明式配置文件中使用原生docker命令完成微服务应用部署等操作内置2.内置分布式集群存储
anfieldqi·2022-08-15 07:52

k8s学习-DaemonSet（模板、创建、更新、回滚、删除等）

使用DaemonSet的场景运行集群存储的daemon，比如ceph或者glusterd节点的CNI网络插件：calico节点日志的收集：fluentd或者是filebeat节点
lady_killer9·2022-08-14 07:44

Docker三剑客之Docker Swarm

Swarm默认内置有加密的分布式集群存储（encrypteddistributedclusterstore）、加密网络（EncryptedNetwork）、公用TLS（Mutual
initialmanager·2022-08-11 09:29

Elasticsearch实战之亿级架构演进

Elasticsearch作为一款功能强大的分布式搜索引擎，支持近实时的存储、搜索数据，在京东到家订单系统中发挥着巨大作用，目前订单中心ES集群存储数据量达到10亿个文档，日均查询量达到5亿。
000X000·2022-08-01 10:53

记一次十亿级时延敏感集群+索引引起的业务抖动及快速恢复方法

线上某MongoDB集群存储影响公司收入流水的核心数据，本文分享该集群为何多个索引串行后台会引起集群抖动，并且部分节点出现了连接数耗光等问题。
JavaMonsterr·2022-07-02 17:55

docker-compose部署多个微服务，ELK日志收集方案

方案：在日志所在服务器安装filebeat，通过filebeat将日志发送到logstash集群，日志经logstash过滤处理生成索引并发送到ES集群存储，最后通过
六月-杏花村·2022-06-04 02:43

分布式数据存储系统的三要素

随着数据量和访问量的增加，单机性能已经不能满足用户需求，分布式集群存储成为一种常用方式。把数据分布在多台存储节点上，可以为大规模应用
·2021-12-27 17:54

04.kubernetes笔记 Pod控制器(三) DaemonSet、Job、CronJob、StatefulSet

删除DaemonSet将会删除它创建的所有Pod使用DaemonSet的一些典型用法：运行集群存储daemon，例如在每个Node上运行glusterd、ceph在每个Node上运行日志收集daemon
·2021-09-12 01:54

proxmox ve集群备份故障

一直通过使用集群存储添加NFS设备（威联通nas）进行集群虚拟机备份，今天发现，不知是何原因显示nas不在线。登录nas查看状态正常。
悟空的花果山呀·2021-06-11 09:30

kafka学习入门 什么是kafka

2.基本概念1.kafka作为集群运行在一个或者多个服务器上2.kafka集群存储的消息是以topic为类别记录的3.kafka存储的消息是k-v键值对，k是offset偏移量，v就是消息的内容4.topic
酱油和醋·2021-05-14 15:59

容器监控实践—Prometheus存储机制

为了解决单节点存储的限制，prometheus没有自己实现集群存储，而是提供了远程读写的接口
徐亚松_v·2021-05-02 00:27

Zookeeper数据查看工具ZooInspector简介

一、背景Zookeeper作为常用的集群协调者组件被广泛应用，尤其是在大数据生态圈中；Zookeeper集群存储各个节点信息，包括：Hadoop、Hbase、Storm、Kafka等等；二、查询ZK数据的方式那如何查看
数据萌新·2021-04-20 21:05

##大数据系列（1）——Hadoop集群坏境搭建配置

来举个例子：假如我们当前可以确定的存量数据量有1TB，然后每天大约增长10GB的数据量，那么当前集群未来一年之内集群存储大小计算方式为：（1TB+10GB365天）
葡萄喃喃呓语·2021-04-20 13:59

Hadoop Security三板斧

文章目录前言HadoopSecurity要解决的问题HadoopSecurity三板斧参考资料前言在企业大规模量级的Hadoop集群中，数据的安全性是十分重要的，尤其当集群存储的是一些敏感数据的时候。
Android路上的人·2021-03-08 17:58

Redis大key多key拆分实现方法解析

背景业务场景中经常会有各种大key多key的情况，比如：1：单个简单的key存储的value很大2：hash，set，zset，list中存储过多的元素（以万为单位）3：一个集群存储了上亿的key，Key
·2020-11-27 14:02

浅析MysQL B-Tree 索引

B-Tree索引不同的存储引擎也可能使用不同的存储结构，i如，NDB集群存储引擎内部实现使用了T-Tree结构存储这种索引，即使其名字是BTREE；InnoDB使用的是B+Tree。
·2020-11-23 11:25

MysQL B-Tree 索引

B-Tree索引不同的存储引擎也可能使用不同的存储结构，i如，NDB集群存储引擎内部实现使用了T-Tree结构存储这种索引，即使其名字是BTREE；InnoDB使用的是B+Tree。
林慫慫·2020-11-21 10:34

MysQL B-Tree 索引

B-Tree索引不同的存储引擎也可能使用不同的存储结构，i如，NDB集群存储引擎内部实现使用了T-Tree结构存储这种索引，即使其名字是BTREE；InnoDB使用的是B+Tree。
林慫慫·2020-11-21 09:42

基于hadoop创建lucene索引（一）编程模型一

Hdfs为提高集群存储的效率，目前只支持顺序写，不支持随机写，即：只能从文件末尾追加写入，不支持随机修
dongjinyong·2020-09-14 18:57

我的RHCA之路随想

闲话不说，先上图：·我的RHCA之路：在这里先介绍一下RHCA，RHCA是Redhat的顶级认证系统架构师，包括集群存储、系统调优、服务安全、目录服务、红帽网络5大部分，要获得RHCA需通过以上5门内容的考试才能获得
weixin_33795806·2020-09-10 23:57

基于RocksDB实现精准的TTL过期淘汰机制

1.Parker简介Parker具有如下特性：支持海量存储：单个集群存储容
OPPO互联网技术·2020-08-24 16:24

k8s nfs

虽然有Rook、CephFS、Gluster、Swift、Cinder、HDFS等集群存储系统以及Google、微软、百度的网盘，但NFS使用简单，性能也还不错，是快速自建集群的存储的首选方案，而且通过
白石皓皓·2020-08-24 15:34

Hadoop——HDFS Federation、File System Snapshots、集中式缓存管理、Distributed Copy、YARN HA简单讲解

HDFSFederation假设实际的环境中有一个Hadoop集群存储这多个不同的业务的数据（日志信息，消费行为信息，客户行为等），并且这些业务的数据的元数据信息由同一个namespace中的namenode
he_321·2020-08-23 23:46

EhCache配置文件

对于Terracotta集群的缓存，一组CacheManager名称和cache名称唯一的鉴定了一个特定的存储于Terracotta集群存储器的缓存。
lwx2615·2020-08-23 01:59

虚拟化平台proxmox集群和HA配置

>>>一.前言proxmox是一个开源的虚拟化管理平台,支持集群管理和HA.在存储方面,proxmox除了支持常用的lvm,nfs,iscsi,还支持集群存储glusterfs和ceph,这也是我们选择它的原因
weixin_34018169·2020-08-20 19:13

Zookeeper数据查看工具ZooInspector简介

一、背景Zookeeper作为常用的集群协调者组件被广泛应用，尤其是在大数据生态圈中；Zookeeper集群存储各个节点信息，包括：Hadoop、Hbase、Storm、Kafka等等；二、查询ZK数据的方式那如何查看
天空win·2020-08-20 16:58

第一课 Zookeeper数据查看工具ZooInspector简介

一、背景Zookeeper作为常用的集群协调者组件被广泛应用，尤其是在大数据生态圈中；Zookeeper集群存储各个节点信息，包括：Hadoop、Hbase、Storm、Kafka等等；二、查询ZK数据的方式那如何查看
Arroganter·2020-08-20 05:12

kubernetes pod资源控制器（二）

DaemonSet控制器简单来说DaemonSet控制器就是确保集群中的每个节点都仅运行一个特定pod，而后续的加入的节点也会自动创建其特定podDaemonSet控制运行应用，例如：1、运行集群存储的守护进程
憨憨学运维·2020-08-17 19:11

Spring boot与Redis存储图片

本文主要是在Springboot中采用Redis集群存储图片。一.环境工具：IDEA、Poatman、jdk1.8技术：Springboot
m_sophia·2020-08-15 23:16

MHA实现图书借阅系统的后端mysql集群存储且利用Zabbix+OA实现云警告

在学校的数据库课程实验中老师让做一个程序，要求必须连接mysql，然后我就写了一个python程序，实现了一个简单的图书借阅系统，具体请看python连接数据库实现简单的图书借阅系统。在实验后，我就想到既然已经使用数据库存储数据了，那么作为一个想要成为运维工程师的我来说何不利用所学知识，将整个后端数据库做的复杂一点，模拟企业中的mysql的集群，利用mha实现mysql的GTID的主从复制，高可用
Breeze_pi·2020-08-14 12:16

记录一次ELK集群优化

性能测试及调优基本情况每台应用服务器上部署日志agent，监控多个日志目录，将目录下的日志收集到ELK-Redis服务器中缓冲，在ELK-Redis服务器上开启logstash对缓冲的日志解析并提交到ES集群存储
莱昂纳多达芬奇·2020-08-14 10:52

什么是hadoop？

一Hadoop是一个开源的框架；二Hadoop能够进行大规模数据集地分布式处理；三Hadoop能够用计算机集群存储海量数据；四Hadoop可以从单一服务器扩展到成千上万的服务器，这些服务都能够提供本地化的存储和计算
chujianjuan0247·2020-08-11 03:19

轻松学Linux系列课程-赵永刚-专题视频课程

主要研究方向Linux系统管理，集群存储，网络安全;熟练
尚观教育·2020-08-10 01:17

初试 Kubernetes 动态卷配置使用 RBD 作为 StorageClass

目录KubernetesStorageClass介绍环境、软件准备Kubernetes使用RBD作为StorageClass1、KubernetesStorageClass介绍Kubernetes集群存储
hxpjava1·2020-08-08 16:56

解决Failed to provision volume with StorageClass "xxx": failed to create rbd image(PVC一直是pending)

紫气旋面双凤阁青松还有万年枝目录问题描述问题解决问题描述在rancher上部署应用时使用存储类创建的pvc状态一直是pending状态，应用的pod一直提示：podhasunboundPersistentVolumeClaims集群存储类状态是
_雨落山岚·2020-08-08 12:52

kafka教程：基础概念、win10下安装与配置、Java中使用kafka

kafka作为一个集群运行在一个或多个服务器上，kafka集群存储的消息是以topic为类别记录的，每个消息是由一个key，一个value和时间戳构成。
一步szh·2020-08-03 11:25

Hadoop的体系结构

充分利用分布式集群存储和计算能力来实现用户的需求。Hadoop架构最核心的两个设计师HDFS（HadoopDistributedFileSystem）和MapReduce。HDF
翁松秀·2020-08-01 14:54

传统NAS和SAN相比 集群存储的优势何在

传统的SAN与NAS分别提供的是数据块与文件两个不同级别的存储服务，集群存储也分为提供数据块与文件两个不同级别存储服务的集群存储系统。
peter_cloud·2020-07-28 04:31

MySQL的分支和演化

MySQL数据库;Drizzle：MySQL的6.0的演化;GoogleCloudSQL：谷歌云的MySQL数据库;MariaDB：MySQL的增强版嵌入式替代品;MySQLCluster：使用NDB集群存储引擎的
chikailiao6191·2020-07-27 20:14

集群存储高可用方法

原文：http://blog.csdn.net/liuben/article/details/8882141云存储和大数据背景下，数据呈现爆炸式增长趋势。根据研究显示，2020年数字宇宙将达到35.2ZB，比2009年的0.8ZB猛增44倍，这其中80%以上为非结构化数据。高性能计算、医学影像、石油和天然气勘探、数字媒体和社会化WEB等大量数据密集型应用导致数据的井喷，不断对存储方法提出新的严峻挑
Jack-changtao·2020-07-27 20:36

CentOS6.5Ceph部署测试

Ceph的核心是RADOS（ReliableAutonomicDistributedObjectStore)，一个对象集群存储，本身
mrz001·2020-07-27 12:40

Hadoop集群存储空间治理

下面主要介绍对hadoop集群存储空间的一些治理方法。治理方法：1.降低备份数为保证数据的高可用，hdfs集群使用三副本策略，一份数据会占用三份大小的存储空间。
风筝Lee·2020-07-27 11:36

百PB级Hadoop集群存储空间治理

现在这个世道，随便什么公司什么人都张嘴闭嘴大数据，连做个几十人的问卷都敢叫大数据调查分析。真是无知者无畏。但也真有不少公司是真的有足够大的数据量的，也确实是在用心做大数据。这些公司通常规模不小，但盈利不一定理想。就算能稳定盈利，也一定有不小的成本压力。因为，大数据如果真的够大，是真的很费钱。以我所在的公司为例，每年的服务器采购成本就已经好几千万，眼看奔着8位数去了。因此我们有很强的节省成本的动力。
Hadoop技术博文·2020-07-27 11:20

百PB级Hadoop集群存储空间治理方案

现在这个世道，随便什么公司什么人都张嘴闭嘴大数据，连做个几十人的问卷都敢叫大数据调查分析。真是无知者无畏。但也真有不少公司是真的有足够大的数据量的，也确实是在用心做大数据。这些公司通常规模不小，但盈利不一定理想。就算能稳定盈利，也一定有不小的成本压力。因为，大数据如果真的够大，是真的很费钱。以我所在的公司为例，每年的服务器采购成本就已经好几千万，眼看奔着8位数去了。因此我们有很强的节省成本的动力。
流一恩典·2020-07-27 10:45

Kafka 入门（一）--安装配置和 kafka-python 调用

Kafka有以下三个基本概念：Kafka作为一个集群运行在一个或多个服务器上；Kafka集群存储的
TM0831·2020-07-22 11:00
上一页 1 2 3 4 5 6 7 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他