E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式存储
盛科交换机配置基于DSCP的RoCEv2-无损网络
简介当前HPC高性能计算、
分布式存储
、AI人工智能等应用采用RoCEv2网络替代传统的TCP/IP网络,来降低CPU的处理和延迟,提升应用的性能。
Songxwn
·
2024-02-06 21:31
网络
性能实测:
分布式存储
ZBS 与集中式存储 HDS 在 Oracle 数据库场景表现如何
在《
分布式存储
支持数据仓库业务系统性能验证》文章中,我们对比了SmartX
分布式存储
ZBS与全闪集中式存储(EMCPowerStore)执行数仓跑批任务的效率。为了帮助用
志凌海纳SmartX
·
2024-02-06 18:40
数据库
分布式
oracle
分布式存储
ceph——(4)openstack对接ceph存储后端
一、使用rbd方式提供存储如下数据:(1)image:保存glanc中的image;(2)volume存储:保存cinder的volume;保存创建虚拟机时选择创建新卷;image(3)vms的存储:保存创建虚拟机时不选择创建新卷;image二、实施步骤:(1)客户端也要有cent用户:useraddcent&&echo"123"|passwd--stdincentecho-e'Defaults:
WickJohn
·
2024-02-06 01:38
手写
分布式存储
系统v0.3版本
引言承接手写
分布式存储
系统v0.2版本,今天开始新的迭代开发。
林崇辉
·
2024-02-05 16:44
分布式
分布式存储
服务发现
Java
手写
云原生数据库 GaiaDB 的核心技术演进和解析
新的技术架构带来新的问题和挑战,百度智能云的云原生数据库GaiaDB采用Quorum分布式协议、高性能网络、高可靠
分布式存储
引擎等技术实现更高的性能和可用性。
大数据和云计算技术
·
2024-02-05 06:23
云原生
数据库
各类云产品功能,适用场景介绍
ChinaunicomKubernetesEngine)3.镜像仓库CCR()4.对象存储COS(CloudObjectStorage,COS)对象存储(CloudObjectStorage,COS)是腾讯云提供的一种存储海量文件的
分布式存储
服务
Programmer boy
·
2024-02-04 15:33
腾讯云
云计算
区块链技术的应用难点和缺点
隐私问题:虽然区块链技术通过加密和
分布式存储
确保了数据的安全性,但一旦数据上链,就无法被删除或修改,导致隐私泄露的风险。尤其是公共区块链网络,所有交易信息对所有参与者都是可见的,无法
M1r4n
·
2024-02-04 15:20
水文
区块链
转:微服务技术发展的现状与展望
用户对软件系统的需求趋于多样化,面向服务的体系架构(serviceorientedarchitecture,SOA)需要在服务稳定集成与需求灵活适配之间寻求平衡.基于此,拥有独立进程、具备独立部署能力的微服务技术应运而生,它具有
分布式存储
weixin_45614689
·
2024-02-03 23:34
微服务
microservices
架构
Redis-数据淘汰策略&持久化方式(RDB/AOF)&Redis与Memcached区别
分布式:Mencached不支持分布式,只能在客户端使用一致性hash来实现
分布式存储
,这种方
Fly_Fly_Zhang
·
2024-02-03 15:49
手写
分布式存储
系统v0.1版本
引言这是手写
分布式存储
系统v0.1版本,只有一个目标就是支持通过tcp接收数据并落地到磁盘文件(单机模式),那接下来就开始吧一、设计实现一个系统,设计是最过瘾的过程没有之一,类似你搭积木前在脑海设计构建一副大致的
林崇辉
·
2024-02-03 01:10
分布式
分布式存储
java
手写
分布式存储
系统v0.2版本
引言上回说到手写
分布式存储
系统v0.1版本,已经实现了通过监听TCP端口并将数据写到本地磁盘的功能,今天咱们就继续往上面添砖加瓦v0.2版本大致做以下功能实现滚动写文件代码优化一、滚动写文件实现由于咱们写文件是用的
林崇辉
·
2024-02-03 01:10
分布式存储
Java写文件
Java
存储
手动实现
Hadopp未授权访问导致RCE
它基于Google的MapReduce算法和GoogleFileSystem(GFS)的论文,旨在提供一个可靠、可扩展、
分布式存储
和处理大规模数据的解决方案。
安鸾彭于晏
·
2024-02-02 22:27
web安全
安全
网络
ETCD数据库入门小案例
etcd和redis的区别etcd是一种
分布式存储
,更强调的是各个节点之间的通信,同步,确保各个节点上数据和事务的一致性,使得服务发现工作更稳定,本身单节点的写入能力并不强。
福海鑫森
·
2024-02-02 18:06
肖邦
etcd
TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读
ATC2023Paper分布式元数据论文汇总问题Ceph是一个广泛部署的
分布式存储
系统,Ceph中的集群级去重设计,由于一些缺点难以在生产环境中使用:(1)去重唯一数据会导致过多的元数据消耗;(2)串行层次化机制对前台
妙BOOK言
·
2024-02-02 18:26
论文阅读
论文阅读
ceph
重复数据删除
Hadoop原理
MapReduce即Hadoop内提供的进行分布式计算的组件分布式资源调度-YARN即Hadoop内提供的进行分布式资源调度的组件Hadoop原理-HDFS相关1.HDFS原理--分布式介绍问题1:为什么要用
分布式存储
我走之後
·
2024-02-02 14:25
hadoop
大数据
分布式
HBase详细安装指南
HBase–HadoopDatabase,是一个高可靠性、高性能、面向列、可伸缩的
分布式存储
系统,利用HBase技术可在
嘎嘎嘎啊哈
·
2024-02-02 06:59
hadoop
hbase
big
data
1 初识Ceph
从2004年新建第一个文件夹至今,经历了多次迭代,目前已是
分布式存储
的首选。
DaemonXiao
·
2024-02-01 21:21
面对垫后的Filecoin,SIA需砥砺前行
传统数据服务商即云存储商由于中心化特性,需花费大量成本搭建基础服务平台,在数据交易中自然增加了交易成本,且随着中心化云服务商屡屡爆出数据泄露事件,表明在安全上无绝对保障,因此
分布式存储
在市场上蔓延。
老猫___
·
2024-02-01 20:02
2022-06-21 七十二更 元宇宙创新技术的发展方向
首先是区块链,包含以下几个⽅⾯,第⼀是分布式的计算,也叫分布式的账本,已经⾮常成熟;第⼆是分布式的存储,
分布式存储
⽬前来说还是⾮常基础的,还没有到⾮常⾼效率、可靠和⼤规模的程度,潜在需求很大;第三个就是分布式的
随光和尘
·
2024-02-01 17:14
经典论文研读:《Bigtable: A Distributed Storage System for Structured Data》
一概述BigTable是以大神JeffreyDean为首的Google团队在2006年公开的
分布式存储
系统,是Google“三驾马车”论文中(GFS、MapReduce、BigTable)中最后公开的。
WanderingScorpion
·
2024-02-01 12:02
论文研读
检索技术
论文研读
数据存储
原力计划
Bigtable: A Distributed Storage System for Structured Data_中文翻译
作为分布式数据库的经典文献,个人在学习的过程中参考其它译文进行翻译:参考译文:https://blog.csdn.net/u010359965/article/details/49795133)摘要Bigtable是一个
分布式存储
系统
冷冽的火花
·
2024-02-01 12:31
数据库
数据库
hdfs
sql
Hadoop 大数据技术原理与应用
Hadoop大数据技术原理与应用大数据概述定义特征大量,多样,高速,价值研究意义应用场景医疗,金融,零售Hadoop概述历史优势扩容能力强,成本低,高效率,可靠性,高容错Hadoop生态
分布式存储
系统(
kk8_
·
2024-02-01 04:33
hadoop
大数据
hdfs
SpringBoot中集成Minio高性能
分布式存储
文件服务入门
区别于
分布式存储
系统,minio的特色在于简单、轻量级,对开发者
霸道流氓气质
·
2024-01-31 16:17
SpringBoot
spring
boot
分布式
后端
spdk技术原理简介和实践经验
一、导读与机械硬盘相比,NVMe-ssd在性能、功耗和密度上都有巨大的优势,并且随着固态存储介质的高速发展,其价格也在大幅下降,这些优势使得NVMe-ssd在
分布式存储
中使用越来越广泛。
大隐隐于野
·
2024-01-31 16:14
#
介质专栏
spdk
华为助力区块链互操作标准化 获评工业和信息化部团体标准应用示范项目——华为云BCS的经验与启示
区块链作为一种分布式账本技术,具多方共识、
分布式存储
、难以篡改等特点,在金融科技、政务民生、司法存证、供应链协同、税务发票、版权保护等领域展现出广阔应用前景。
华为云PaaS服务小智
·
2024-01-31 15:14
区块链
华为云
Elasticsearch Windows版安装配置
Lucene的调用比较复杂,所以Elasticsearch就再次封装了一层,并且提供了
分布式存储
等一些比较高级的功能。基
liaozk_c
·
2024-01-31 08:07
window常用工具管理
elasticsearch
windows
大数据
Docker进阶篇-reids集群
一、集群存储算法
分布式存储
的常见算法:哈希取余分区一致性哈希算法分区哈希槽分区1、哈希取余分区描述:每次读写操作都是根据公式:Hash(key)%N(其中,key是要存入Redis的键名,N是Redis
陪我养猪吧
·
2024-01-31 07:53
docker
运维
linux
docker
容器
redis
大数据 ---分布式并行计算框架MapReduce
大数据为什快横向扩展移动程序到数据端多个数据副本
分布式存储
(减小磁盘IO的瓶颈)分布
谪仙逍遥
·
2024-01-31 06:21
大数据
入门
大数据
3台服务器+StarVCenter,搭建“超融合云平台”-完美体验-跑100台虚拟机
这种模式不需要专用的存储设备,它采用
分布式存储
软件,利用每台计算节点上的本地硬盘构成存储集群。这样计算节点即有高可用的计算能力,又有高可用的存储能力。
wtyuiohxvm
·
2024-01-31 04:49
服务器
云原生
数据库
什么叫超融合基础架构?
超融合基础架构是一种软件定义的IT基础架构,包括虚拟化计算,虚拟化存储(一般为
分布式存储
)、虚拟化
greatrooster
·
2024-01-31 04:17
服务器
深信服超融合
aSAN作为超融合基础架构(HCI)的重要组成部分,使用
分布式存储
技术为上层应用提供了高性能、高可靠的存储服务,在aCloud不同演进版本中合
轻云望月笑容常挂
·
2024-01-31 04:47
网络
运维
网络协议
服务器
tcp/ip
超融合架构介绍
超融合架构,其实就是“服务器虚拟化+
分布式存储
”架构,即超融合技术包含了服务器虚拟化技术和
分布式存储
技术。
头大的一批
·
2024-01-31 04:16
架构
服务器
数据库
软硬兼施:亚信安慧AntDB创造更多可能性
它采用了先进的分布式架构,能够充分发挥多台服务器的协同作用,实现数据的
分布式存储
和处理。与此同时,亚信安慧AntDB还具备灵活的扩展性,可以根据需求进
亚信安慧AntDB数据库
·
2024-01-31 04:01
antdb
antdb数据库
数据库
你知道隐私保护在Web3.0中的重要性吗?
敏感的用户数据可以从任何用户平台安全地共享到云端或
分布式存储
,并通过代理重加密或属性加密自动授予对该数据的访问。在这个过程中,有必要确保数据的可用性。
77920f849a64
·
2024-01-30 18:45
云原生数据库GaiaDB的核心技术演进
新的技术架构带来新的问题和挑战,GaiaDB在自研过程中采用Quorum分布式协议、高性能网络、高可靠
分布式存储
引擎等技术实现更高的性能和可用性。
郎岳樟
·
2024-01-30 14:08
云原生
数据库
filenet市值将在2023年超过比特币,区块链有ipfs会更好
ipfs的中文名称是“星际文件系统”,它本质上是一种点对点的
分布式存储
,传输协议
区小楼
·
2024-01-30 07:35
3步体验在DAYU200开发板上完成OpenHarmony对接华为云IoT
特点:(1)分布式:支持分布式计算和
分布式存储
,可以在多个设备之间进行任务调度和数据共享。(2)可裁剪:支持根据设备的需求进行裁剪,以满足不同设备的资源限制。(3)安全:提供了安全机制
OpenHarmony_小贾
·
2024-01-30 06:57
HarmonyOS
OpenHarmony
移动开发
华为云
物联网
移动开发
Openharmony
鸿蒙开发
分布式协调服务-zookeeper
数据库、
分布式存储
无序性进程之间的消息通信,会出现顺序不一致问题分布式环境下面临的问题网络通信网络本身的不可靠性,因此会涉及到一些网络通信的问题网络分区(脑裂)当网络发生异常倒是分布式系统中部分节点之间的网络延时不断增大
猿日记
·
2024-01-30 01:14
浅析大数据汇总
传统的数据库技术已经无法满足对这些海量数据的存储和处理需求,因此出现了
分布式存储
和计算技术,如Hadoop、HBase等。
shinelord明
·
2024-01-29 19:10
大数据
开源
HDFS
是Hadoop核心组件之一,作为最底层的
分布式存储
服务而存在。
VincentLeon
·
2024-01-29 08:44
redis cluster水平扩容中的客户端处理逻辑
作为一个分布式K-V存储,rediscluster通过将数据切分为16384个slot进行
分布式存储
,用公式表示如下:作为一个支持水平扩容的分布式系统,redis集群在扩容时通常遵循如下步骤:1.在新节点启动
kakaweb
·
2024-01-28 22:15
redis
大数据处理系统的架构
Lambda架构的主要组成部分包括:批处理层(BatchLayer):存储:使用
分布式存储
系统(如ApacheHadoopHDFS)
demo123567
·
2024-01-28 14:58
大数据
架构
etcd技术解析:构建高可用分布式系统的利器
2.etcd简介etcd是一个开源的、分布式的键值存储系统,使用Go语言编写,基于Raft一致性算法实现数据的
分布式存储
和管理。它主要用于在分布式系统中存储配置信息、元数据等关键数据,提供了强
Memory_2020
·
2024-01-27 20:38
etcd
数据库
apache 前30个开源项目
个具有代表性的项目序号项目名称功能描述业务范围活跃度(参考性描述)1ApacheHTTPServer高性能Web服务器提供HTTP服务支持非常活跃2ApacheTomcatJava应用服务器部署JavaWeb应用程序非常活跃3ApacheHadoop
分布式存储
和计算框架大数据处理非常活跃
临水逸
·
2024-01-27 17:35
apache
开源
Ceph
分布式存储
自动化运维平台开发实践
文章目录1.背景介绍1.1什么是Ceph?1.1.1Ceph的核心组件1.1.2Ceph的优势1.2自动化运维的需求目标2.平台架构设计和组件版本2.1平台架构设计2.2组件版本2.3模块划分(已经脱敏处理)2.3.1当前版本V1.0支持功能2.3.2前后端代码结构tree图2.3.3工作流程2.3.4模块算法和处理逻辑(举几个典型场景)2.3.4.1自动对因高危场景停止的osd降低权重至x%2.
抛物线.
·
2024-01-27 12:34
分布式存储
Django自动化运维平台
python
ceph
自动化运维
vue3
arco
design
python3
一文了解Ceph原理以及常见ceph指令
一、Ceph介绍什么是
分布式存储
?与集中式存储相反,
分布式存储
通常采用存储单元集群的形式。并且具有在集群节点之间进行数据同步和协调的机制。
听说唐僧不吃肉
·
2024-01-26 13:08
分布式存储
ceph
二 Ceph存储工作原理及实现
认识Cephceph是一个能提供文件存储,快存储和对象存储的
分布式存储
系统。
假面生
·
2024-01-26 13:38
存储
linux
什么是超融合?
二、超融合原理2.1、超融合三大组件2.2、超融合和传统架构对比2.3、传统方案和超融合软件架构与资源管理模式对比三、超融合与SDS、
分布式存储
关系3.1、SDS是什么?3.2、
分布式存储
是什么?
IT搬砖我最拿手
·
2024-01-26 11:27
数据库
服务器
运维
网络
学习
从Elasticsearch来看分布式系统架构设计
这篇文章中,重点会讨论下分布式数据系统的设计,比如
分布式存储
系统,分布式搜索系统,分布式分析系统等。我们先来简单看下Elasticsearch的架构。
大叶子不小
·
2024-01-26 10:11
elasticsearch
大数据
搜索引擎
教你三步实现CDH到星环TDH的平滑迁移
TranswarpDataHub(TDH)是星环科技自主研发的企业级一站式多模型大数据基础平台,其领先的多模型技术架构提供统一的接口层,统一的计算引擎层,统一的
分布式存储
管理层,统一的资源调度层,以及异构存储引擎层
星环科技
·
2024-01-26 07:08
大数据
数据库
大数据平台
big
data
数据仓库
hadoop
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他