分布式存储集群服务

分布式存储系统学习笔记(三)—分布式键值系统(1)—Amazon Dynamo

1.概述Dynamo以很简单的键值方式存储数据，不支持复杂的查询。Dynamo中存储的是数据值的原始形式，不解析数据的具体内容。Dynamo主要用于Amazon购物车和S3云存储服务。Dynamo通过组合P2P的各种技术打造了线上可运行的分布式键值系统，下表列出了Dynamo设计时面临的问题及最终采取的解决方案：2.数据分布Dynamo采用一致性哈希将数据分布到多个存储节点中(博文：一天不学习我浑
不会算命的赵半仙·2024-02-11 02:34

MFS 分布式存储

MFS分布式存储MooseFS是一个具备冗余容错功能的分布式网络文件系统，它将数据分别存放在多个物理服务器或单独磁盘或分区上，确保一份数据有多个副本，然而对于访问MFS的客户端或者用户来说，整个分布式文件系统集群看起来就像一个资源一样
中门对狙·2024-02-11 01:30

DolphinScheduler-3.2.0 集群搭建

DolphinScheduler-3.2.0生产集群高可用搭建，DolphinScheduler原数据存储mysql设置，分布式存储采用h
爱吃辣条byte·2024-02-10 01:23

2022-12-02 Redis Cluster （1）通信机制

原文链接https://mp.weixin.qq.com/s/tlocdMlyI4Sx8UxfbuVjTw能提供的能力高可用更高的QPS分布式存储大量数据分散网络流量压力基本架构分区方式虚拟槽分区虚拟槽分区示意图
圆方的鱼·2024-02-09 21:05

编程随笔-ElasticSearch知识导图(1)：全景

但我最初了解ES却是从NoSQL数据库开始，在使用、研究了ES一段时间后，我发现这是一个优秀的分布式部署软件，不仅是一个全文搜索引擎、还是一个分布式存储系统、一个分布式数据库。  
weixin_33868027·2024-02-09 18:58

Raft算法在Curve中的实践

110006508【嵌牛导读】：本文介绍了RAFT算法的特点和基本应用【嵌牛鼻子】：Curve实践【嵌牛模块】：RAFT算法概念、特点、应用场合【嵌牛正文】：urve作为高性能、高可用、高可靠的新一代分布式存储系统
xx_d18b·2024-02-08 19:45

使用 Kubernetes，基础设施层面如何优化？分享一些解决方案

重点内容搭配SmartX自主研发的Kubernetes服务、分布式存储、Kubernetes原生存储等产品，用户既可基于SmartX超融合构筑全栈Kubernetes基础设施，也可选择为部署在裸金属、其他虚拟化平台或混合环境的
志凌海纳SmartX·2024-02-08 07:51

大热的区块链到底牛在哪

现在各行业都在布局区块链，包括金融、数字货币、医疗、物流等等，区块链之所以这么牛，其实取决于它的这三个特点：1.分布式存储记录数据存储在多个地方，没有一个固定的中心点，安全指数高，
二呱子·2024-02-07 16:26

什么是集群服务器

近一段时间来，集群服务器被广大站长热议，所谓集群服务器就是指很多台服务器把它们集中在一起来进行同一种服务。
互联网哪些事情·2024-02-07 15:26

promtheus监控kubernetes

而一旦在生产环境中大量基于Kubernetes部署和管理应用程序后，作为系统管理员，还需要充分了解应用程序以及Kubernetes集群服务运行质量如何，通过对应用以及集群运行状态数据的收集和分析，持
长空~·2024-02-07 13:02

SmartX 超融合和分布式存储支持哪些信创硬件？如何选型配置？

为了推动IT基础架构国产化转型，不少用户都使用SmartX超融合和分布式存储构建信创云基础设施。其中，信创硬件的选型与配置往往是用户在规划与部署环节关注的重点：国产CPU/存储怎么选？
志凌海纳SmartX·2024-02-06 21:46

盛科交换机配置基于DSCP的RoCEv2-无损网络

简介当前HPC高性能计算、分布式存储、AI人工智能等应用采用RoCEv2网络替代传统的TCP/IP网络，来降低CPU的处理和延迟，提升应用的性能。
Songxwn·2024-02-06 21:31

性能实测：分布式存储 ZBS 与集中式存储 HDS 在 Oracle 数据库场景表现如何

在《分布式存储支持数据仓库业务系统性能验证》文章中，我们对比了SmartX分布式存储ZBS与全闪集中式存储（EMCPowerStore）执行数仓跑批任务的效率。为了帮助用
志凌海纳SmartX·2024-02-06 18:40

kubeadm部署k8s集群

kubeadm部署k8s集群服务器环境：(2GB或更多RAM，2个CPU或更多CPU）KubernetesMaster1节点：172.20.26.34KubernetesMaster2节点：172.20.26.36KubernetesNode1
lqcbj_IT老混混·2024-02-06 14:37

zk集群--集群请求处理

2.主节点2.1.主节点开启对外集群服务//对外服务需要这个zxid，用于为每个请求设置zxidlastCommitted=zk.getZxid();leaderStart
raindayinrain·2024-02-06 12:35

分布式存储ceph——（4）openstack对接ceph存储后端

一、使用rbd方式提供存储如下数据：（1）image：保存glanc中的image；（2）volume存储：保存cinder的volume；保存创建虚拟机时选择创建新卷；image（3）vms的存储：保存创建虚拟机时不选择创建新卷；image二、实施步骤：（1）客户端也要有cent用户：useraddcent&&echo"123"|passwd--stdincentecho-e'Defaults:
WickJohn·2024-02-06 01:38

手写分布式存储系统v0.3版本

引言承接手写分布式存储系统v0.2版本，今天开始新的迭代开发。
林崇辉·2024-02-05 16:44

虚拟机中配置centos静态IP地址

平时测试的时候，不管是使用Redis的的集群服务还是使用mysql的主从服务，还是连接centos，都会出现ip地址不断地变化的情况，导致需要重新配置，非常的不方便。
雾林小妖·2024-02-05 13:10

云原生数据库 GaiaDB 的核心技术演进和解析

新的技术架构带来新的问题和挑战，百度智能云的云原生数据库GaiaDB采用Quorum分布式协议、高性能网络、高可靠分布式存储引擎等技术实现更高的性能和可用性。
大数据和云计算技术·2024-02-05 06:23

各类云产品功能，适用场景介绍

ChinaunicomKubernetesEngine)3.镜像仓库CCR()4.对象存储COS（CloudObjectStorage，COS)对象存储（CloudObjectStorage，COS）是腾讯云提供的一种存储海量文件的分布式存储服务
Programmer boy·2024-02-04 15:33

区块链技术的应用难点和缺点

隐私问题：虽然区块链技术通过加密和分布式存储确保了数据的安全性，但一旦数据上链，就无法被删除或修改，导致隐私泄露的风险。尤其是公共区块链网络，所有交易信息对所有参与者都是可见的，无法
M1r4n·2024-02-04 15:20

转：微服务技术发展的现状与展望

用户对软件系统的需求趋于多样化，面向服务的体系架构(serviceorientedarchitecture,SOA)需要在服务稳定集成与需求灵活适配之间寻求平衡.基于此，拥有独立进程、具备独立部署能力的微服务技术应运而生，它具有分布式存储
weixin_45614689·2024-02-03 23:34

Redis-数据淘汰策略&持久化方式(RDB/AOF)&Redis与Memcached区别

分布式：Mencached不支持分布式，只能在客户端使用一致性hash来实现分布式存储，这种方
Fly_Fly_Zhang·2024-02-03 15:49

手写分布式存储系统v0.1版本

引言这是手写分布式存储系统v0.1版本，只有一个目标就是支持通过tcp接收数据并落地到磁盘文件(单机模式)，那接下来就开始吧一、设计实现一个系统，设计是最过瘾的过程没有之一，类似你搭积木前在脑海设计构建一副大致的
林崇辉·2024-02-03 01:10

手写分布式存储系统v0.2版本

引言上回说到手写分布式存储系统v0.1版本，已经实现了通过监听TCP端口并将数据写到本地磁盘的功能，今天咱们就继续往上面添砖加瓦v0.2版本大致做以下功能实现滚动写文件代码优化一、滚动写文件实现由于咱们写文件是用的
林崇辉·2024-02-03 01:10

Hadopp未授权访问导致RCE

它基于Google的MapReduce算法和GoogleFileSystem（GFS）的论文，旨在提供一个可靠、可扩展、分布式存储和处理大规模数据的解决方案。
安鸾彭于晏·2024-02-02 22:27

ETCD数据库入门小案例

etcd和redis的区别etcd是一种分布式存储，更强调的是各个节点之间的通信，同步，确保各个节点上数据和事务的一致性，使得服务发现工作更稳定，本身单节点的写入能力并不强。
福海鑫森·2024-02-02 18:06

TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读

ATC2023Paper分布式元数据论文汇总问题Ceph是一个广泛部署的分布式存储系统，Ceph中的集群级去重设计，由于一些缺点难以在生产环境中使用：（1）去重唯一数据会导致过多的元数据消耗；（2）串行层次化机制对前台
妙BOOK言·2024-02-02 18:26

Hadoop原理

MapReduce即Hadoop内提供的进行分布式计算的组件分布式资源调度-YARN即Hadoop内提供的进行分布式资源调度的组件Hadoop原理-HDFS相关1.HDFS原理--分布式介绍问题1:为什么要用分布式存储
我走之後·2024-02-02 14:25

Nginx RTC服务SFU级联的实现

横向扩展：在大主播场景下，一个主播对应成千上万的观众，服务器的性能和带宽限制了观众人数的上限，为了能够支持更多的观众，需求从单个服务器扩展到集群服务器。
龙--技术总结分享·2024-02-02 09:13

Karmada中使用coredns+multicluster实现跨集群访问探索

一、实践官方例子按照官网例子配置多集群服务发现，详细操作如下：1、部署业务以部署deployment与service为例。
紫神·2024-02-02 07:10

HBase详细安装指南

HBase–HadoopDatabase，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在
嘎嘎嘎啊哈·2024-02-02 06:59

1 初识Ceph

从2004年新建第一个文件夹至今，经历了多次迭代，目前已是分布式存储的首选。
DaemonXiao·2024-02-01 21:21

面对垫后的Filecoin，SIA需砥砺前行

传统数据服务商即云存储商由于中心化特性，需花费大量成本搭建基础服务平台，在数据交易中自然增加了交易成本，且随着中心化云服务商屡屡爆出数据泄露事件，表明在安全上无绝对保障，因此分布式存储在市场上蔓延。
老猫___·2024-02-01 20:02

2022-06-21 七十二更 元宇宙创新技术的发展方向

首先是区块链，包含以下几个⽅⾯，第⼀是分布式的计算，也叫分布式的账本，已经⾮常成熟；第⼆是分布式的存储，分布式存储⽬前来说还是⾮常基础的，还没有到⾮常⾼效率、可靠和⼤规模的程度，潜在需求很大；第三个就是分布式的
随光和尘·2024-02-01 17:14

Cloudera Manager开启kafka JMX监控

在ClouderaManager上创建了3节点的kafka集群服务，想要外部连接kafkaJMX监控kakfa数据，需要修改kakfa配置：-Dcom.sun.management.jmxremote.host
Troyong·2024-02-01 13:28

经典论文研读：《Bigtable: A Distributed Storage System for Structured Data》

一概述BigTable是以大神JeffreyDean为首的Google团队在2006年公开的分布式存储系统，是Google“三驾马车”论文中（GFS、MapReduce、BigTable）中最后公开的。
WanderingScorpion·2024-02-01 12:02

Bigtable: A Distributed Storage System for Structured Data_中文翻译

作为分布式数据库的经典文献，个人在学习的过程中参考其它译文进行翻译：参考译文：https://blog.csdn.net/u010359965/article/details/49795133）摘要Bigtable是一个分布式存储系统
冷冽的火花·2024-02-01 12:31

Hadoop 大数据技术原理与应用

Hadoop大数据技术原理与应用大数据概述定义特征大量，多样，高速，价值研究意义应用场景医疗，金融，零售Hadoop概述历史优势扩容能力强，成本低，高效率，可靠性，高容错Hadoop生态分布式存储系统（
kk8_·2024-02-01 04:33

SpringBoot中集成Minio高性能分布式存储文件服务入门

区别于分布式存储系统，minio的特色在于简单、轻量级，对开发者
霸道流氓气质·2024-01-31 16:17

spdk技术原理简介和实践经验

一、导读与机械硬盘相比，NVMe-ssd在性能、功耗和密度上都有巨大的优势，并且随着固态存储介质的高速发展，其价格也在大幅下降，这些优势使得NVMe-ssd在分布式存储中使用越来越广泛。
大隐隐于野·2024-01-31 16:14

华为助力区块链互操作标准化 获评工业和信息化部团体标准应用示范项目——华为云BCS的经验与启示

区块链作为一种分布式账本技术，具多方共识、分布式存储、难以篡改等特点，在金融科技、政务民生、司法存证、供应链协同、税务发票、版权保护等领域展现出广阔应用前景。
华为云PaaS服务小智·2024-01-31 15:14

Elasticsearch Windows版安装配置

Lucene的调用比较复杂，所以Elasticsearch就再次封装了一层，并且提供了分布式存储等一些比较高级的功能。基
liaozk_c·2024-01-31 08:07

Docker进阶篇-reids集群

一、集群存储算法分布式存储的常见算法：哈希取余分区一致性哈希算法分区哈希槽分区1、哈希取余分区描述：每次读写操作都是根据公式：Hash(key)%N（其中，key是要存入Redis的键名，N是Redis
陪我养猪吧·2024-01-31 07:53

大数据 ---分布式并行计算框架MapReduce

大数据为什快横向扩展移动程序到数据端多个数据副本分布式存储（减小磁盘IO的瓶颈）分布
谪仙逍遥·2024-01-31 06:21

3台服务器+StarVCenter，搭建“超融合云平台”-完美体验-跑100台虚拟机

这种模式不需要专用的存储设备，它采用分布式存储软件，利用每台计算节点上的本地硬盘构成存储集群。这样计算节点即有高可用的计算能力，又有高可用的存储能力。
wtyuiohxvm·2024-01-31 04:49

什么叫超融合基础架构？

超融合基础架构是一种软件定义的IT基础架构，包括虚拟化计算，虚拟化存储（一般为分布式存储）、虚拟化
greatrooster·2024-01-31 04:17

深信服超融合

aSAN作为超融合基础架构（HCI）的重要组成部分，使用分布式存储技术为上层应用提供了高性能、高可靠的存储服务，在aCloud不同演进版本中合
轻云望月笑容常挂·2024-01-31 04:47

超融合架构介绍

超融合架构，其实就是“服务器虚拟化+分布式存储”架构，即超融合技术包含了服务器虚拟化技术和分布式存储技术。
头大的一批·2024-01-31 04:16

软硬兼施：亚信安慧AntDB创造更多可能性

它采用了先进的分布式架构，能够充分发挥多台服务器的协同作用，实现数据的分布式存储和处理。与此同时，亚信安慧AntDB还具备灵活的扩展性，可以根据需求进
亚信安慧AntDB数据库·2024-01-31 04:01
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他