ceph-分布式存储

盛科交换机配置基于DSCP的RoCEv2-无损网络

简介当前HPC高性能计算、分布式存储、AI人工智能等应用采用RoCEv2网络替代传统的TCP/IP网络，来降低CPU的处理和延迟，提升应用的性能。
Songxwn·2024-02-06 21:31

性能实测：分布式存储 ZBS 与集中式存储 HDS 在 Oracle 数据库场景表现如何

在《分布式存储支持数据仓库业务系统性能验证》文章中，我们对比了SmartX分布式存储ZBS与全闪集中式存储（EMCPowerStore）执行数仓跑批任务的效率。为了帮助用
志凌海纳SmartX·2024-02-06 18:40

分布式存储ceph——（4）openstack对接ceph存储后端

一、使用rbd方式提供存储如下数据：（1）image：保存glanc中的image；（2）volume存储：保存cinder的volume；保存创建虚拟机时选择创建新卷；image（3）vms的存储：保存创建虚拟机时不选择创建新卷；image二、实施步骤：（1）客户端也要有cent用户：useraddcent&&echo"123"|passwd--stdincentecho-e'Defaults:
WickJohn·2024-02-06 01:38

手写分布式存储系统v0.3版本

引言承接手写分布式存储系统v0.2版本，今天开始新的迭代开发。
林崇辉·2024-02-05 16:44

云原生数据库 GaiaDB 的核心技术演进和解析

新的技术架构带来新的问题和挑战，百度智能云的云原生数据库GaiaDB采用Quorum分布式协议、高性能网络、高可靠分布式存储引擎等技术实现更高的性能和可用性。
大数据和云计算技术·2024-02-05 06:23

各类云产品功能，适用场景介绍

ChinaunicomKubernetesEngine)3.镜像仓库CCR()4.对象存储COS（CloudObjectStorage，COS)对象存储（CloudObjectStorage，COS）是腾讯云提供的一种存储海量文件的分布式存储服务
Programmer boy·2024-02-04 15:33

区块链技术的应用难点和缺点

隐私问题：虽然区块链技术通过加密和分布式存储确保了数据的安全性，但一旦数据上链，就无法被删除或修改，导致隐私泄露的风险。尤其是公共区块链网络，所有交易信息对所有参与者都是可见的，无法
M1r4n·2024-02-04 15:20

转：微服务技术发展的现状与展望

用户对软件系统的需求趋于多样化，面向服务的体系架构(serviceorientedarchitecture,SOA)需要在服务稳定集成与需求灵活适配之间寻求平衡.基于此，拥有独立进程、具备独立部署能力的微服务技术应运而生，它具有分布式存储
weixin_45614689·2024-02-03 23:34

Redis-数据淘汰策略&持久化方式(RDB/AOF)&Redis与Memcached区别

分布式：Mencached不支持分布式，只能在客户端使用一致性hash来实现分布式存储，这种方
Fly_Fly_Zhang·2024-02-03 15:49

手写分布式存储系统v0.1版本

引言这是手写分布式存储系统v0.1版本，只有一个目标就是支持通过tcp接收数据并落地到磁盘文件(单机模式)，那接下来就开始吧一、设计实现一个系统，设计是最过瘾的过程没有之一，类似你搭积木前在脑海设计构建一副大致的
林崇辉·2024-02-03 01:10

手写分布式存储系统v0.2版本

引言上回说到手写分布式存储系统v0.1版本，已经实现了通过监听TCP端口并将数据写到本地磁盘的功能，今天咱们就继续往上面添砖加瓦v0.2版本大致做以下功能实现滚动写文件代码优化一、滚动写文件实现由于咱们写文件是用的
林崇辉·2024-02-03 01:10

Hadopp未授权访问导致RCE

它基于Google的MapReduce算法和GoogleFileSystem（GFS）的论文，旨在提供一个可靠、可扩展、分布式存储和处理大规模数据的解决方案。
安鸾彭于晏·2024-02-02 22:27

ETCD数据库入门小案例

etcd和redis的区别etcd是一种分布式存储，更强调的是各个节点之间的通信，同步，确保各个节点上数据和事务的一致性，使得服务发现工作更稳定，本身单节点的写入能力并不强。
福海鑫森·2024-02-02 18:06

TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读

ATC2023Paper分布式元数据论文汇总问题Ceph是一个广泛部署的分布式存储系统，Ceph中的集群级去重设计，由于一些缺点难以在生产环境中使用：（1）去重唯一数据会导致过多的元数据消耗；（2）串行层次化机制对前台
妙BOOK言·2024-02-02 18:26

Hadoop原理

MapReduce即Hadoop内提供的进行分布式计算的组件分布式资源调度-YARN即Hadoop内提供的进行分布式资源调度的组件Hadoop原理-HDFS相关1.HDFS原理--分布式介绍问题1:为什么要用分布式存储
我走之後·2024-02-02 14:25

HBase详细安装指南

HBase–HadoopDatabase，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在
嘎嘎嘎啊哈·2024-02-02 06:59

1 初识Ceph

从2004年新建第一个文件夹至今，经历了多次迭代，目前已是分布式存储的首选。
DaemonXiao·2024-02-01 21:21

面对垫后的Filecoin，SIA需砥砺前行

传统数据服务商即云存储商由于中心化特性，需花费大量成本搭建基础服务平台，在数据交易中自然增加了交易成本，且随着中心化云服务商屡屡爆出数据泄露事件，表明在安全上无绝对保障，因此分布式存储在市场上蔓延。
老猫___·2024-02-01 20:02

2022-06-21 七十二更 元宇宙创新技术的发展方向

首先是区块链，包含以下几个⽅⾯，第⼀是分布式的计算，也叫分布式的账本，已经⾮常成熟；第⼆是分布式的存储，分布式存储⽬前来说还是⾮常基础的，还没有到⾮常⾼效率、可靠和⼤规模的程度，潜在需求很大；第三个就是分布式的
随光和尘·2024-02-01 17:14

经典论文研读：《Bigtable: A Distributed Storage System for Structured Data》

一概述BigTable是以大神JeffreyDean为首的Google团队在2006年公开的分布式存储系统，是Google“三驾马车”论文中（GFS、MapReduce、BigTable）中最后公开的。
WanderingScorpion·2024-02-01 12:02

Bigtable: A Distributed Storage System for Structured Data_中文翻译

作为分布式数据库的经典文献，个人在学习的过程中参考其它译文进行翻译：参考译文：https://blog.csdn.net/u010359965/article/details/49795133）摘要Bigtable是一个分布式存储系统
冷冽的火花·2024-02-01 12:31

Hadoop 大数据技术原理与应用

Hadoop大数据技术原理与应用大数据概述定义特征大量，多样，高速，价值研究意义应用场景医疗，金融，零售Hadoop概述历史优势扩容能力强，成本低，高效率，可靠性，高容错Hadoop生态分布式存储系统（
kk8_·2024-02-01 04:33

SpringBoot中集成Minio高性能分布式存储文件服务入门

区别于分布式存储系统，minio的特色在于简单、轻量级，对开发者
霸道流氓气质·2024-01-31 16:17

spdk技术原理简介和实践经验

一、导读与机械硬盘相比，NVMe-ssd在性能、功耗和密度上都有巨大的优势，并且随着固态存储介质的高速发展，其价格也在大幅下降，这些优势使得NVMe-ssd在分布式存储中使用越来越广泛。
大隐隐于野·2024-01-31 16:14

华为助力区块链互操作标准化 获评工业和信息化部团体标准应用示范项目——华为云BCS的经验与启示

区块链作为一种分布式账本技术，具多方共识、分布式存储、难以篡改等特点，在金融科技、政务民生、司法存证、供应链协同、税务发票、版权保护等领域展现出广阔应用前景。
华为云PaaS服务小智·2024-01-31 15:14

Elasticsearch Windows版安装配置

Lucene的调用比较复杂，所以Elasticsearch就再次封装了一层，并且提供了分布式存储等一些比较高级的功能。基
liaozk_c·2024-01-31 08:07

Docker进阶篇-reids集群

一、集群存储算法分布式存储的常见算法：哈希取余分区一致性哈希算法分区哈希槽分区1、哈希取余分区描述：每次读写操作都是根据公式：Hash(key)%N（其中，key是要存入Redis的键名，N是Redis
陪我养猪吧·2024-01-31 07:53

大数据 ---分布式并行计算框架MapReduce

大数据为什快横向扩展移动程序到数据端多个数据副本分布式存储（减小磁盘IO的瓶颈）分布
谪仙逍遥·2024-01-31 06:21

3台服务器+StarVCenter，搭建“超融合云平台”-完美体验-跑100台虚拟机

这种模式不需要专用的存储设备，它采用分布式存储软件，利用每台计算节点上的本地硬盘构成存储集群。这样计算节点即有高可用的计算能力，又有高可用的存储能力。
wtyuiohxvm·2024-01-31 04:49

什么叫超融合基础架构？

超融合基础架构是一种软件定义的IT基础架构，包括虚拟化计算，虚拟化存储（一般为分布式存储）、虚拟化
greatrooster·2024-01-31 04:17

深信服超融合

aSAN作为超融合基础架构（HCI）的重要组成部分，使用分布式存储技术为上层应用提供了高性能、高可靠的存储服务，在aCloud不同演进版本中合
轻云望月笑容常挂·2024-01-31 04:47

超融合架构介绍

超融合架构，其实就是“服务器虚拟化+分布式存储”架构，即超融合技术包含了服务器虚拟化技术和分布式存储技术。
头大的一批·2024-01-31 04:16

软硬兼施：亚信安慧AntDB创造更多可能性

它采用了先进的分布式架构，能够充分发挥多台服务器的协同作用，实现数据的分布式存储和处理。与此同时，亚信安慧AntDB还具备灵活的扩展性，可以根据需求进
亚信安慧AntDB数据库·2024-01-31 04:01

你知道隐私保护在Web3.0中的重要性吗？

敏感的用户数据可以从任何用户平台安全地共享到云端或分布式存储，并通过代理重加密或属性加密自动授予对该数据的访问。在这个过程中，有必要确保数据的可用性。
77920f849a64·2024-01-30 18:45

云原生数据库GaiaDB的核心技术演进

新的技术架构带来新的问题和挑战，GaiaDB在自研过程中采用Quorum分布式协议、高性能网络、高可靠分布式存储引擎等技术实现更高的性能和可用性。
郎岳樟·2024-01-30 14:08

filenet市值将在2023年超过比特币，区块链有ipfs会更好

ipfs的中文名称是“星际文件系统”，它本质上是一种点对点的分布式存储，传输协议
区小楼·2024-01-30 07:35

3步体验在DAYU200开发板上完成OpenHarmony对接华为云IoT

特点：（1）分布式：支持分布式计算和分布式存储，可以在多个设备之间进行任务调度和数据共享。（2）可裁剪：支持根据设备的需求进行裁剪，以满足不同设备的资源限制。（3）安全：提供了安全机制
OpenHarmony_小贾·2024-01-30 06:57

分布式协调服务-zookeeper

数据库、分布式存储无序性进程之间的消息通信，会出现顺序不一致问题分布式环境下面临的问题网络通信网络本身的不可靠性，因此会涉及到一些网络通信的问题网络分区（脑裂）当网络发生异常倒是分布式系统中部分节点之间的网络延时不断增大
猿日记·2024-01-30 01:14

浅析大数据汇总

传统的数据库技术已经无法满足对这些海量数据的存储和处理需求，因此出现了分布式存储和计算技术，如Hadoop、HBase等。
shinelord明·2024-01-29 19:10

HDFS

是Hadoop核心组件之一，作为最底层的分布式存储服务而存在。
VincentLeon·2024-01-29 08:44

redis cluster水平扩容中的客户端处理逻辑

作为一个分布式K-V存储，rediscluster通过将数据切分为16384个slot进行分布式存储，用公式表示如下：作为一个支持水平扩容的分布式系统，redis集群在扩容时通常遵循如下步骤：1.在新节点启动
kakaweb·2024-01-28 22:15

大数据处理系统的架构

Lambda架构的主要组成部分包括：批处理层（BatchLayer）：存储：使用分布式存储系统（如ApacheHadoopHDFS）
demo123567·2024-01-28 14:58

etcd技术解析：构建高可用分布式系统的利器

2.etcd简介etcd是一个开源的、分布式的键值存储系统，使用Go语言编写，基于Raft一致性算法实现数据的分布式存储和管理。它主要用于在分布式系统中存储配置信息、元数据等关键数据，提供了强
Memory_2020·2024-01-27 20:38

apache 前30个开源项目

个具有代表性的项目序号项目名称功能描述业务范围活跃度（参考性描述）1ApacheHTTPServer高性能Web服务器提供HTTP服务支持非常活跃2ApacheTomcatJava应用服务器部署JavaWeb应用程序非常活跃3ApacheHadoop分布式存储和计算框架大数据处理非常活跃
临水逸·2024-01-27 17:35

Ceph分布式存储自动化运维平台开发实践

文章目录1.背景介绍1.1什么是Ceph？1.1.1Ceph的核心组件1.1.2Ceph的优势1.2自动化运维的需求目标2.平台架构设计和组件版本2.1平台架构设计2.2组件版本2.3模块划分（已经脱敏处理）2.3.1当前版本V1.0支持功能2.3.2前后端代码结构tree图2.3.3工作流程2.3.4模块算法和处理逻辑（举几个典型场景）2.3.4.1自动对因高危场景停止的osd降低权重至x%2.
抛物线.·2024-01-27 12:34

一文了解Ceph原理以及常见ceph指令

一、Ceph介绍什么是分布式存储？与集中式存储相反，分布式存储通常采用存储单元集群的形式。并且具有在集群节点之间进行数据同步和协调的机制。
听说唐僧不吃肉·2024-01-26 13:08

二 Ceph存储工作原理及实现

认识Cephceph是一个能提供文件存储，快存储和对象存储的分布式存储系统。
假面生·2024-01-26 13:38

什么是超融合？

二、超融合原理2.1、超融合三大组件2.2、超融合和传统架构对比2.3、传统方案和超融合软件架构与资源管理模式对比三、超融合与SDS、分布式存储关系3.1、SDS是什么？3.2、分布式存储是什么？
IT搬砖我最拿手·2024-01-26 11:27

从Elasticsearch来看分布式系统架构设计

这篇文章中，重点会讨论下分布式数据系统的设计，比如分布式存储系统，分布式搜索系统，分布式分析系统等。我们先来简单看下Elasticsearch的架构。
大叶子不小·2024-01-26 10:11

教你三步实现CDH到星环TDH的平滑迁移

TranswarpDataHub（TDH）是星环科技自主研发的企业级一站式多模型大数据基础平台，其领先的多模型技术架构提供统一的接口层，统一的计算引擎层，统一的分布式存储管理层，统一的资源调度层，以及异构存储引擎层
星环科技·2024-01-26 07:08
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他