分布式存储

ETCD中的分布式设计思想和WAL

分布式存储：etcd使用分布式存储来存储数据。数据被分散存
卢延吉·2023-07-15 03:37

【LDAP】LDAP注入漏洞与防御

随着互联网的广泛使用，web应用的数量呈爆炸式的增长，而这些应用的资源和数据呈分布式存储于目录中。
XINO丶·2023-07-15 01:14

8.分布式存储

文章目录分布式存储存储基础单机存储设备单机存储的问题分布式存储（软件定义的存储SDS）分布式存储的数据类型总结CephCeph概念Ceph优势Ceph架构Ceph核心组件OSD存储后端Ceph数据的存储过程
夜海赤竹·2023-07-15 00:02

ceph--cephFS的使用

ceph分布式存储—cephFS的使用1、cephfs的概念cephFS即cephfilesystem，可以实现文件系统共享功能,客户端通过ceph协议挂载并使用ceph集群作为数据存储服务器。
优质&青年·2023-07-14 19:47

关于CEPH的简单畅谈

CEPH是什么CEPH是一个先进的分布式存储系统，它具有高度可靠性、可扩展性和性能。CEPH旨在解决传统存储系统中存在的诸多挑战，如单点故障、难以扩展、数据丢失风险等。
IT小辉同学·2023-07-14 18:47

分布式ELK 企业级日志分析系统

ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。Elasticsearch是用Java开发的，可通过RESTfulWeb接口
瓜皮小菜·2023-07-14 18:40

NDN Protocol 介绍

一、简介NDNProtocol是基于NDNLink网络和区块链技术的分布式存储聚合协议,其核心功能是数据流量预言机和数据交易撮合，进而在NDNLink网络中完成安全高效的数据路由和传输。
币圈三少·2023-07-14 16:19

Apache Kudu

ApacheKudu是一种开源的分布式存储和分析引擎，它可以快速地存储和分析大规模的结构化数据。
ItisNagatoYuki·2023-07-14 13:14

ELk日志平台搭建

2.组件●ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。Elasticsearch是用Java开发的，可通过R
尴尬的只有别人·2023-07-14 12:33

【Hadoop 01】简介

1Hadoop简介Hadoop适合海量数据分布式存储和分布式计算Hadoop3.x的细节优化：Java改为支持8及以上HDFS支持纠删码HDFS支持多NameNodeMR任务级本地优化多重服务默认端口变更
不菜不菜·2023-07-14 11:56

ELK 企业级日志分析系统

ElasticSearch、Logstash和Kiabana三个开源工具配合使用，完成更强大的用户对日志的查询、排序、统计需求2）ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎
狮子跑了·2023-07-14 10:37

直播 | SDS 容灾方案，让制品数据更安全

近日，腾讯CODINGWePack制品管理系统V1以及腾讯CODINGDevOps研发效能管理平台V7与XSKY星辰天合的统一数据平台XEDP及天合翔宇分布式存储系统完成互相兼容认证，在数据层面满足了共同客户敏捷开发的高可用建设合规要求
腾云 CODING·2023-07-14 09:11

什么是CDN？对前端有什么好处？

①“分布式存储”：将中心平台的内容分发到各地的边缘服务器，使用户能够就近获取所需内容，降低网络用时，提高用户访问响应速度和命中率。利
小草莓蹦蹦跳·2023-07-14 08:58

如何系统学习分布式？

目前做存储比较热门的是分布式存储方向，有NoSQL的也有关系型数据库的，比如腾讯就有TDSQL，PingCAP也有TIDB、也有分布式KV存储TIKV。
python小小Q·2023-07-14 03:58

HHU云计算期末复习（上）Google、Amazon AWS、Azure

云计算2.1Google文件系统（GFS）2.2MapReduce和Hadoop2.3分布式锁服务Chubby2.4分布式结构化数据表Bigtable存储形式主服务器子表Bigtable相关优化技术2.5分布式存储系统
丸丸丸子w·2023-07-13 21:54

checkpoint 机制具体实现示例详解

目录checkpoint机制的具体实现BackNode节点冷备份checkpoint的实现checkpoint机制的具体实现我们都知道为了优化分布式存储系统中NameNode的重启性能，我们引进了checkpoint
·2023-07-13 16:20

Ulord链云生态-再读Ulord白皮书 3.0

而结合区块链技术的分布式存储开启了去中心化云服务的新时代。Ulord链云存储生态利用区块链技术+共享模式
李磊ulord广州社区·2023-06-24 08:48

k8s 集群部署尝试

部署简单方便且高效二进制源码包的部署方式使用二进制源码包的方式部署会比较麻烦，大概分为如下几步：获取源码包部署在master节点和worker节点上启动相应节点的关键服务master节点上api-server，分布式存储例如
·2023-06-24 00:06

【性能设计篇】数据库拓展

前两篇文章介绍了分布式存储的机制，为保证数据的高性能以及可拓展，采用分片/分区机制。为保证数据的高可用性，采用复制/镜像机制存储数据。一份数据存储多份。而这两种方式在数据中，就是分片/分区机制。
qxlxi·2023-06-23 12:54

BNB Greenfield 成存储赛道“新贵”，BNB 生态的野心与破局

在今年的2月1日，币安发布了分布式存储链BNBGreenfield，根据白皮书信息，它的特别之处在于其不仅具备基于SP（分布式存储商，可以理解为存储节点）获得的分布式存储的能力，它还具备可编程可计算的能力
区块链小八歌·2023-06-23 04:59

COS对象存储

title:COS对象存储什么是对象存储腾讯云叫COS，在阿里云叫OSS，是一样的对象存储（CloudObjectStorage，COS）是腾讯云提供的一种存储海量文件的分布式存储服务，具有高扩展性、低成本
l10711097061·2023-06-22 23:38

哈希算法原理与应用：确保数据完整性和安全性的关键技术

哈希算法的应用广泛，例如在密码学中用于验证数据完整性和数字签名，也用于检索数据和进行散列分布式存储。下面将详细介绍哈希算法的原理和应用。
蓝色心灵-海·2023-06-22 19:12

es知识点 一

针对于es的语言的学习es是由java编写的，restfullapihttp+json支持分布式存储，每个字段被索引，被搜索基于lucene的强大的全文搜索能力可以实时搜索和聚合分析，自动发现新的和失败的节点
苗苗大佬·2023-06-22 16:15

HPC-CAE应用场景下文件读写IO分析

我们需要分别测试三种条件下文件的写效率：本地文件读写，本地都是SSD设备万兆网络，通过NFS共享方式，A共享文件夹，B作为客户端向文件夹中写文件万兆网络，通过Beegfs分布式存储，A提供存储空间，B作为客户端向存储中写入文件测试工具
wolfwolfgod·2023-06-21 22:31

再谈全局网HBase八大应用场景

另外由于自身的并发能力、存储能力，可以说是具有最为竞争力的引擎HBase概述HBase是一个分布式存储、数据库引擎，可以支持千万的QPS、PB级别的存储，这些都已经在生产环
·2023-06-21 20:57

TBB 开源库及并发 Hashmap 的使用

康俊老师在Raft一致性协议优化、分布式存储与调度、高可用双活容灾、多Region地理分区等分布式处理模块研发领域具备丰富经验，现负责KaiwuDB基础数据结构研发与设计。
KaiwuDB·2023-06-21 11:27

【分布式】分布式存储架构

文章目录一、集中存储结构二、分布式存储2.1、分布式存储的兴起2.2、分布式存储的重要性2.3、分布式存储的种类和比较三、分布式理论浅析3.1、一致性和可用性3.2、数据分布哈希分布（Swift）顺序分布
逆流°只是风景-bjhxcc·2023-06-21 06:16

分布式存储Swift原理分析

在“分布式系列之分开源分布式存储技术分析”中曾提到swift是完全无中心架构，采用一致性哈希算法获得数据的位置。
solihawk·2023-06-21 02:33

分布式存储技术解读系列之三：Swift | 架构进阶

1.什么是Swift？首先，我们从OpenStack的官方网站上，可以看到Swift的定义：“TheOpenStackObjectStoreproject,knownasSwift,offerscloudstoragesoftwaresothatyoucanstoreandretrievelotsofdatawithasimpleAPI.It'sbuiltforscaleandoptimizedf
米朵儿技术屋·2023-06-21 02:32

阿里云中块存储、对象存储、文件存储区别

块存储可以作为云盘挂载到云服务器实例上，也可以作为分布式存储系统使用。对象存储（ObjectStorage）：以对象为单位进行存储，适用于海量数据的存储、管理和访问。
MM不要山·2023-06-20 22:47

Spark基础入门之深入理解RDD

它代表一个不可变、可分区、里面的元素可并行计算的集合）-**R(Resilient)**:表示弹性，rdd内部的元素可以存在磁盘也可存在内存中-**D(Distributed)**:它内部的元素进行了分布式存储
我家浪猫初长成·2023-06-20 11:59

分布式数据保护策略——多副本和纠删码怎么选？

在之前的《一文读懂分布式存储》文章中，我们介绍了什么是分布式存储。但谈到存储，安全就是一个绕不开的话题。没有数据安全的存储毫无意义。所以数据保护技术对于分布式存储来说非常重要。▉为什么需要数据保护？
了不起的云计算V·2023-06-20 08:22

Vue中如何进行分布式存储与对象存储

Vue中如何进行分布式存储与对象存储随着云计算和大数据时代的到来，分布式存储和对象存储越来越受到关注。在Vue中，我们可以使用不同的分布式存储和对象存储技术来存储和管理数据。
程序媛-徐师姐·2023-06-20 08:06

分布式入门

分布式入门前言分布式概述分布式节点通信技术分布式存储MapReduceSpark前言小白一枚，首先感谢本校大三时期李老师开的分布式计算课程。
长门yuki·2023-06-19 15:59

TBB 开源库及并发 Hashmap 的使用

康俊老师在Raft一致性协议优化、分布式存储与调度、高可用双活容灾、多Region地理分区等分布式处理模块研发领域具备丰富经验，现负责KaiwuDB基础数据结构研发与设计。
·2023-06-19 12:27

系统架构设计师笔记第18期：NoSQL数据库

可扩展性：NoSQL数据库通常采用分布式存储和并行处理技
Evaporator Core·2023-06-19 12:34

关于ceph笔记

ceph笔记：一，ceph介绍ceph:就是一个能提供的文件存储,块存储和对象存储的分布式存储系统,它提供了一个可无限伸缩的Ceph存储集群.RADOS:Ceph的高可靠,高可拓展,高性能,高自动化都是由这一层来提供的
Noah_徐·2023-06-19 01:55

CentOS7 搭建ceph集群

CentOS7搭建ceph集群前言：本来准备的是Ubuntu20，搞了半天上头了把我笔记本正在用的Ubuntu操作系统直接搞崩了，hhhhhh，所以换了CentOS1分布式文件存储系统CephCeph是一个统一的分布式存储系统
weixin_46051525·2023-06-19 01:55

python分布式存储系统_分布式存储系统Ceph : 简介

1Ceph简介及使用场景介绍1.1Ceph简介定义：Ceph是一个统一的分布式存储系统。特点：高性能、高可靠性、高可扩展性。三种存储接口：块存储、文件存储、对象存储。
weixin_39640687·2023-06-19 01:25

Ceph分布式存储笔记

文章目录ceph分布式存储存储分类分布式存储分类HadoopHDFS(大数据分布式文件系统)OpenStack的对象存储Swift公有云对象存储GlusterFSGPFS和HDFS的区别Cephcephg
Salute_Lch·2023-06-19 01:54

进阶知识体系之你不能不知道的CDN

依靠部署在各个地方的边缘服务器，通过分布式存储、负载均衡、网络请求的重定向和内容管理等功能模块，以就近性和服务器负载的判断，确保内容以一种极为高效的方式为用户请求提供所需要的资源。
IT沐华·2023-06-18 23:38

Java Spark 操作 Apache Kudu

一、ApacheKuduApacheKudu是一种列式分布式存储引擎，它的设计目标是支持快速分析和高吞吐量的数据访问，同时也能够支持低延迟、实时查询和更新操作。
小毕超·2023-06-18 18:03

nfs-ganesha将rgw导出为nfs文件接口

概述我们知道ceph是统一的分布式存储系统，其可以提供给应用三种访问数据的接口：对象(RGW)、块(RBD)和文件(CEPHFS)接口。我们在使用对象接口的时候通常都是基于HTTP协议来存取数据。
ypdai·2023-06-18 16:22

什么是AI计算平台？

AI计算平台通常包括多个处理器、专用加速器和高速互联网络，可以快速地进行大量并行计算，同时利用分布式存储和内存层次结构提供高效的数据管理功能。
文慧的科技江湖·2023-06-18 14:08

分布式存储与并行处理环境配置：Hadoop、HBase和Spark等

本文介绍Linux系统中配置Hadoop、HBase和Spark环境，包括安装Java运行环境、下载安装包、进行配置和测试。通过这种方式，可以搭建一个强大的分布式计算环境，用于处理大规模数据集。为了成功配置Hadoop、HBase和Spark环境，需要理解它们之间的关系和各自的组件。配置虚拟机测试环境使用vmwareworkstationpro软件在Windows系统中创建一个虚拟机（后续构建多节
runepic·2023-06-18 08:50

Ceph分布式存储知识总结

Ceph一.deploy-ceph部署投入使用ceph前，要知道一个很现实得问题，ceph对低版本内核得客户端使用非常不友好，低内核是指小于等于3.10.0-862，默认的centos7.5及以下的系统都是小于此类内核，无法正常使用ceph的文件存储（cephFS）块存储（RBD）。ceph部署一定要考虑好版本问题，经测试如果想使用ceph16版本，那你的客户端操作系统内核小于3.10.0-862
张现伟的成长之路·2023-06-18 07:07

分布式常见面试题详解

1.2说一说你对高并发的理解1.3如何实现分布式存储？1.4说一说你对分布式事务的了解1.5分布式系统如何保证最终一致性？1.6谈谈你对分布式的单点问题的了解1.7HTTP和RPC有什么区别？
Redemption&·2023-06-18 06:18

区块链名词图文详解

数字货币就是用区块链技术建立的，区块链技术的匿名性、不可复制性、分布式存储计算等特点是传统互联网技术所不具备的特性。从今天开始，就来给大家普及一下区块链中的一些名词，供大家饭后谈资。
解析区块链·2023-06-18 03:39

k8s 集群部署尝试

部署简单方便且高效二进制源码包的部署方式使用二进制源码包的方式部署会比较麻烦，大概分为如下几步：获取源码包部署在master节点和worker节点上启动相应节点的关键服务master节点上api-server，分布式存储例如
阿兵云原生·2023-06-18 01:28

Spark 2：Spark Core RDD算子

Distributed：RDD中的数据是分布式存储的，可用于分布式计算。Dataset：一个数据集合，用于存放数据的。RDD的五大特性RDD数据结构内部有五个
ZhaoXiangmoStu·2023-06-18 01:27
上一页 16 17 18 19 20 21 22 23 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他