分布式存储集群服务

Web3 分布式存储 IPFS（Web3项目一实战之四）

IPFS是一种分布式文件存储协议，它允许世界各地的计算机存储和服务文件作为一个巨大的对等网络的一部分来存储和服务文件。世界上任何地方的任何计算机都可以下载IPFS软件并开始托管和提供文件。如果有人在自己的计算机上运行IPFS，并将文件上传到IPFS网络，那么世界上其他任何运行IPFS的人都可以查看和下载该文件。本地安装IPFS我们可以下载官方已经编译好的二进制文件（安装包）：https://doc
甄齐才·2023-11-21 21:01

Kubernetes Gateway API 攻略：解锁集群流量服务新维度！

KubernetesGatewayAPI刚刚GA，旨在改进将集群服务暴露给外部的过程。这其中包括一套更标准、更强大的API资源，用于管理已暴露的服务。
Seal软件·2023-11-21 21:03

Kubernetes Gateway API 攻略：解锁集群流量服务新维度！

KubernetesGatewayAPI刚刚GA，旨在改进将集群服务暴露给外部的过程。这其中包括一套更标准、更强大的API资源，用于管理已暴露的服务。
液态不合群·2023-11-21 14:58

Ceph分布式存储系列（一）：Ceph工作原理及架构浅析梳理

一、Ceph简介众所周知，ceph是一种分布式存储系统，是有着“ceph之父”之称的SageWeil读博期间的研究课题，项目诞生于2004年，在2006年基于开源协议开源了Ceph的源代码，在经过了数年的发展之后
诸葛钢铁云·2023-11-21 12:08

技术实践｜高斯集群服务器双缺省网关故障分析

导语：当前国产化数据库使用范围越来越广泛，在GaussDB数据库的使用过程中难免会遇到一些问题，有的问题是由于在安装过程中没有注意细节而产生的，多数隐患问题都是在特定场景下才会暴露出来，且暴露的时间未知，这就给数据库的运维工作带来极大的挑战。本文就是基于一次数据库安装过程中出现的故障而形成的，文中主要阐述了网络基础知识、数据库环境、故障分析、问题解决、总结等内容，供各位同僚在日后的服务器安装过程中
中电金信·2023-11-21 10:26

Redis集群模式1-主从复制+哨兵机制

单个Redis服务如果宕机的话，服务就不可用了，为了解决这种问题，redis也提供有集群服务。传统的Redis集群采用的主从复制模式，一般为一主多从，主节点有读写权限，但是从节点只有读的权限。
轻轻敲醒沉睡的心灵·2023-11-21 04:03

分布式架构关键技术

分布式的概念所谓分布式，狭义的指代以Google的三驾马车，GFS、Map/Reduce、BigTable为框架核心的分布式存储和计算系统。
talentluke·2023-11-20 20:53

分布式存储系统Minio

多主机、多硬盘模式（分布式)适合存储大容量非结构化的数据该模式是Minio服务最常用的架构，通过共享一个accesskey和secretkey,在多台（2-32）服务器上搭建服务，且数据分散在多块（大于4块，无上限）磁盘上，提供了较为强大的数据冗余机制（Reed-Solomon纠删码）。
zty_1995·2023-11-20 18:54

dfs hdfs 修改文件名称_第五讲：hadoop的分布式存储HDFS常见操作

HDFS是一个分布式文件系统，像任何其它文件系统，允许用户使用shell命令操作文件系统。首先启动hdfs，启动方式可见上一个博文，或者单独启动hdfs，方式就是运行start-dfs.sh启动成功后，输入jps可以看到至少一个namenode和至少一个datanode和一个jps一、创建路径mkdir如果你的HDFShome目录不存在，则需要创建，我们后续都是用hdfs命令操作。首先cd命令进入
西岸先生·2023-11-20 12:31

四、hdfs文件系统基础操作-保姆级教程

启动集群:start-dfs.sh关闭集群:stop-dfs.sh2、文件系统构成（1）基础介绍其实hdfs作为分布式存储的文件系统，其构成和Linux文件系统构成差不多一样，均是以“/”作为根目录的组织形式
弦之森·2023-11-20 12:20

国产联盟链 Fisco-Bcos 调技术研报告

两翼指的是支持并行计算模型和分布式存储，并行计
smilejiasmile·2023-11-20 11:37

【成长日记】无币区块链，应该了解一些内容

比特币技术中通过分布式存储、共识机制、激励机制这些手段去完成。（三）思考这里面如果没有
能学多少学多少·2023-11-20 08:48

javaapi 访问 hbase

Hbase介绍HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PCServer上搭建起大规模结构化存储集群。
数据萌新·2023-11-20 05:35

数据结构与算法之美学习笔记：22 | 哈希算法（下）：哈希算法在分布式系统中有哪些应用？

目录前言应用五：负载均衡应用六：数据分片应用七：分布式存储解答开篇&内容小结前言本节课程思维导图今天，我们再来看剩余三种应用：负载均衡、数据分片、分布式存储。
浊酒南街·2023-11-19 23:43

CnosDB有主复制演进历程

分布式存储系统的复杂性涉及数据容灾备份、一致性、高并发请求和大容量存储等问题。本文结合CnosDB在分布式环境下的演化历程，分享如何将分布式理论应用于实际生产，以及不同实现方式的优缺点和应用场景。
CnosDB·2023-11-19 22:12

GFS分布式文件系统

分布式存储优点：增加存储容量加快读写效率保证文件高可用GFS介绍GFS：glusterFS开源的分布式的文件系统存储服务器，客户端，网络（用NFS/samba组成网关）传统式老的分布式系统元服务器，元服务器保存存储节点的目录树信息
aaa.com·2023-11-19 01:19

redis持久化储存（RDB、AOF）和主从复制

持久化储存（RDB、AOF）和主从复制一、持久化储存RDB触发方式优势与劣势AOFAOF持久化流程频率设置优势与劣势二、主从复制概念准备工作薪火相传反客为主哨兵模式设置哨兵哨兵服务集群搭建使用命令启动集群服务命令故障恢复优点
见面吃火锅·2023-11-18 22:13

MySQL InnoDB Buffer Pool 概览

InnoDBBufferPool浅析庄泽超互联网民工／关注分布式存储／数据库内核／wower已关注BufferPool简介InnoDB中的数据访问是以Page为单位的，每个Page的大小默认为16KB，
lixora·2023-11-17 06:37

【系统架构设计】架构核心知识： 3.5 Redis和ORM

目录一Redis1Redis与MemCache2Redis分布式存储方案3Redis集群切片的方式4Redis数据分片
Jackilina_Stone·2023-11-17 04:08

Gbase8a第一阶段测试-试题整理

A.关闭的集群进程会自动被gcmonitor拉起B.仅关闭当前节点的集群进程C.只有操作系统管理员root可以使用D.关闭整个集群服务3、监控集群模组工作状态的工具是（B）？
ElanJie·2023-11-16 20:21

qt实现拓扑图_基于QT的PLC梯形图编辑系统设计与实现

李驰骎王庭有李应春杨安园摘要：为了探索PLC梯形图编辑系统的设计方法，从梯形图编程系统设计需求出发，分析传统梯形图网络的不足，采用一种高自由度的网络拓扑结构描述梯形图网络，并根据该网络拓扑结构提出一种分布式存储方案
weixin_39971172·2023-11-16 08:25

Hadoop的概述

Hadoop是一个基于海量数据的分布式存储和分布式计算
新手小农·2023-11-16 08:46

1.1 Ceph基础及集群的搭建

1.Ceph基础ceph是可靠的、自动重均衡、自动恢复的分布式存储系统。
xiaoyizi311·2023-11-15 15:52

使用cephadm部署单节点ceph集群，后期可扩容（基于官方文档，靠谱，读起来舒服）

使用条件服务器有外网访问能力服务器没有外网访问能力安装cephadmcephadm的功能两种安装方式基于curl安装cephadm各自linux发行版的特定安装方法在部署ceph前先花10分钟给各位看官扫盲（原创）ceph分布式存储的整体架构一些
上海一亩地·2023-11-15 15:16

ceph集群移除物理节点

1.概述ceph分布式存储在生产或者实验环境，经常涉及到物理节点加入或者删除，本文仅对移除物理节点的相关步骤做了操作记录，以方便需要时查阅。
牛角上的男孩·2023-11-15 15:37

算法之哈希算法

哈希函数的应用安全加密唯一标识数据校验散列函数负载均衡数据分片分布式存储问题总结：参考资料前言哈希算法和散列函数其实很多同学可能会混淆，一头雾水，其实散列函数只是哈希算法的一种实践应用。
遇见更好的自己、·2023-11-15 13:35

docker部署Prometheus+Cadvisor+Grafana实现服务器监控

Prometheus1：介绍：Prometheus是一个在SoundCloud上构建的开源系统监视和警报工具包2：特点多维度数据模型-由指标键值对标识的时间序列数据组成；PromQL，一种灵活的查询语言；不依赖分布式存储
huaweichenai·2023-11-15 11:48

DataSophon——国产开源一站式运维平台

致力于快速实现部署、管理、监控以及自动化运维大数据服务组件和节点的能力，帮助您快速构建起稳定，高效的大数据集群服务。3、DataSophon是什么？
罗少说·2023-11-15 10:52

谈谈对微服务的理解(PHP面试理论题)

二、出现原因三、体系四、微服务架构的优点五、微服务的缺点六、学习路线简介参考的学习链接微服务设计云原生分布式存储基石：etcd深入解析Docker技术入门与实战每天5分钟玩转Kubernetes左耳听风从
后端常规开发人员·2023-11-15 08:57

mysql之高可用架构——MHA

2.2MHA的功能2.3MHA的工作原理3.MHA实现集群服务管理1.什么是Mysql高可用系统？
lllyr(ฅ>ω<*ฅ)·2023-11-15 05:05

Kubernetes-yaml文件使用笔记

目录1.语法规则2.资源属性3.使用DockerCompose生成k8s资源4.简单示例：从私有仓库拉取镜像并部署5.如何使用外部变量6.对外映射端口7.存储VolumePVPVC8.有状态集群服务StatefulSetHeadlessService1
雲等風來·2023-11-14 18:15

Istio学习笔记-部署模型

如果要部署多个集群（更具体地说是在隔离的网络中），是否要将它们连接到单个多集群服务网格
wangqiaowq·2023-11-14 14:23

业务集群的冗余、备份、监控

业务集群的冗余设计原则是为了确保业务的连续性和可靠性，避免因单点故障而导致整个集群服务失效。
编织幻境的妖·2023-11-14 04:59

linux ssh免密登录配置

在hadoop集群搭建的过程中，通常会对集群服务进行群启/群停的操作，而集群中的主机执行启动命令通常需要通过ssh登录到其它主机，为了解决ssh时不输入用密码的问题，在这里研究了下ssh免密登录，操作步骤记录如下
ths512·2023-11-13 22:56

“颠覆·挑战·极致”华瑞指数云ExponTech WDS新一代产品重新定义企业存储和数据架构

国内数据存储领域领先厂商华瑞指数云ExponTech自主研发的高性能、高可靠的分布式存储产品ExponTechWDS成为优秀之选11月10日，主题为“颠覆·挑战·极致——重新定义企业存储和数据架构”华瑞指数云
CSDN云计算·2023-11-13 22:23

ceph集群—部署（附错误点解析 ）

ceph-deploy6.部署ceph集群7.osd共享磁盘服务存储类型：DAS直连存储（satasas）NAS（网络附加存储）sambanfsftp文件系统SAN（存储区域网络）iscsi块（SDS）软件定义存储分布式存储传统的存储
吃饭就用盆·2023-11-13 13:06

分布式存储Ceph部署

分布式存储Ceph1、Ceph简介Ceph使用C++语言开发，遵循LGPL协议开源。SageWeil(Ceph论文发表者)于2011年创立了以Inktank公司主导Ceph的开发和社区维护。
Ymaint·2023-11-13 13:35

基于GTID的半同步主从复制MySQL高性能集群

目录项目名称项目环境项目描述项目步骤1.规划设计整个集群的网络拓扑结构，按照规划为每台服务器配好IP2.在中控机上部署ansible服务，通过SSH与MySQL集群建立免密通道，编写playbook在4台主从复制集群服务器上二进制安装
钰儿yu1228·2023-11-13 06:01

云数据库MongoDB监控指标解读与关注

演讲嘉宾简介：陈柯任（花名：莫归），阿里巴巴高级开发工程师，曾在大众点评从事MongoDB与MySQL相关运维和自动化研发，现主要致力于分布式存储和NoSQL数据库相关领域以下内容根据演讲嘉宾视频分享以及
Winsdons·2023-11-12 13:44

CentOS7下搭建Ceph分布式存储架构

(1).Ceph概述Ceph是为了优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统，并且还是一个开源的分布式文件系统。因为其支持块存储、对象存储，所以很自然的被用做云计算框架openstack或cloudstack整个存储的后端。当然Ceph也可以单独作为存储，例如部署一个集群作为对象存储、SAN存储、NAS存储等。Ceph中文开源社区地址：Ceph中国社区–TheFutureofSto
假面生·2023-11-12 12:52

谈谈桌面虚拟化

“一项好的技术不会消亡，它只是会不断的以新的形式重新出现”--我自己现如今流行的各种热门技术--云计算，大数据，深度学习，分布式存储，等等等等，其实都不是某一年突然从石头里面蹦出来的。
weixin_34200628·2023-11-12 11:26

深入浅出分布式存储的设计与优化之道

随着信息化程度的不断提高，全球数据日益膨胀。面对当前PB级的海量数据存储需求，传统的存储系统在容量和性能的扩展上存在瓶颈。云存储以其扩展性强、性价比高、容错性好等优势得到了业界的广泛认同。由于其前瞻性，众多企业都将其作为进军云计算的第一步。分布式文件系统和分布式块存储作为云存储中重要的技术，成为奠定云存储发展的重要基石。对于大多数专注于云计算本身的IT技术人员来说，对分布式文件系统和分布式块存储未
UCloud_TShare·2023-11-12 05:43

IBM AIX平台的通用保护错误Thread Dump案例分析

问题描述某客户OracleAgilePLM的集群服务器中的一个节点突然crash掉，在javacore(ThreadDump)中记录了GPF错误。
zigzagsoft·2023-11-11 18:57

关于微服务下的负载均衡

1.什么是负载均衡在高并发的访问下，单一服务器性能不足以满足正常需求，我们往往会引入分布式集群服务器来提高服务质量，提高网站整体性能。那么，这时一个请求到这个服务,就需要确定访问哪一个服务器。
Leon_coding·2023-11-11 12:27

探索淘宝订单号生成方案

2、集群服务启动后，通过mysql的悲观锁(forupdate)各个服务先后获取段的max_id,并更新保存新的
luck_man911·2023-11-11 11:19

一致性算法介绍（二）

1.4.NWRN：在分布式存储系统中，有多少份备份数据W：代表一次成功的更新操作要求至少有w份数据写入成功R：代表一次成功的读数据操作要求至少有R份数据成功读取NWR值的不同组合会产生不同的一致性效果，
狠情·2023-11-11 08:26

外部访问K8S集群内部的kafka集群服务 —— 筑梦之路

外部访问k8s中的kafka集群如果直接在云厂商提供的实例上搭建kafka集群可以说很简单，一般不会有什么困难。当我们选择把kafka部署到k8s里，希望利用k8s提供的编排能力来帮助我们更方便的管理kafka集群。在这种情况下部署会变得复杂起来，主要两个问题有状态的服务部署从k8s集群外访问zookeeper部署我们都知道kafka依赖zk,所以首先需要在k8s集群部署zookeeper。zoo
筑梦之路·2023-11-11 07:58

外部访问K8S集群内部的kafka集群服务

不许转载kafka部署把kafka部署到k8s后，我们肯定是通过service从k8s外部访问kafaka。这里的service要么是NodePort，要么是LoadBalancer类型。我们使用的方式是LoadBalancer。我们先看下面这张图，这是kafka在集群中的网络拓扑。当我们通过地址12.345.67:31090访问到kafka后，kafka返回的访问地址是类似这样的endpoint
Michaelwubo·2023-11-11 07:53

云架构师学习------云存储白皮书深入理解

云存储白皮书深入理解行业描述数字经济时代的到来1、基础设施的云化2、核心技术互联网化3、应用数据化和智能化存储行业的变革1、存储服务网络的巨变2、云原生对云存储的新要求3、智能与存储的交相辉映技术产品（阿里云为例）自研分布式存储技术
Avery123123·2023-11-11 03:32

智能物联网时代里信息存储、处理和传输方式的变化浅谈

因此，分布式存储技术将得到更广泛的应用，如区块链技术、云存储技术等。这些技术将使数据存储更加安全、可靠和高效。2、处理方式的变化：物联网设备数量
成都亿佰特电子科技有限公司·2023-11-10 19:08
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他