分布式存储

【戴嘉乐】利用IPFS构建自己的去中心化分布式Wiki系统

IPFS全称InterPlanetaryFileSystem，中文名：星际文件系统，是一个旨在创建持久且分布式存储和共享文件的网络传输协议。它是一种内容可寻址的对等超媒体分发协议。
6bca7c813977·2023-03-28 23:42

分布式计算系统的硬件架构

Hadoop系统分布式存储与并行计算构架图1-14展示了Hadoop系统的分布式存储和并行计算构架。从硬件体系结构上看，Hadoop系统是一个运行于普通的商用服务器集群的分布式存储和并行计算系统。
weixin_30376323·2023-03-28 21:11

HDFS架构原理

HDFS架构1、设计思想hdfs是一个很好的分布式存储系统，解决了一个系统盘存储不了大量数据的问题，故使用多台机器的磁盘空间作为文件的存储系统，并将一个文件切分成多个块，将切分后的多个块分散存储在多台机器上
大数据fighting·2023-03-28 19:39

超融合架构和传统架构有什么区别？

超融合架构与传统架构的区别主要区别还是在于分布式存储于集中式存储，以及相应的硬件/管理上，由此带来的无论是性能，还是扩展性，稳定性、可靠性，以及运维的简化，运营的成本都会有较大的差异。
格格巫 MMQ!!·2023-03-28 18:23

一个数据仓库时代开始--Hive

换句话说，Hive是一个数据仓库基础设施，便于查询和管理驻留在分布式存储系统中的大型数据集。它提供了一种类SQL的查询语言HiveQL（HiveQueryL
隐峯·2023-03-28 17:37

MapReduce编程模型

本篇文章介绍一下MapReduce[1]分布式计算先回顾一下Hadoop架构：Hadoop由HDFS分布式存储、MR分布式计算、Yarn资源调度三部分组成HadoopMRMR是采用一种分而治之[2]的思想设计出来的分布式计算框架
HideOnStream·2023-03-28 04:41

将区块链的思想用在现实世界

其实很多区块链的思想早就出现甚至应用了，IT不过是用重现，是新瓶装旧酒区块链和报纸的例子《纽约时报》中藏着最古老的区块链日报就是打上时间戳的打包了大量交易的区块，并且大量分发后分布式存储，报社是中心化，
lisoleg·2023-03-27 09:51

大数据技术——Hadoop基础认识

基础认识前言大数据信息技术的发展对生产生活的重要影响主要式通过对大量数据的抽象分析，挖掘其中的信息价值，指导生产或决策一、Hadoop是什么Hadoop可以实现大量数据的存储和计算，支持使用简单的编程模型跨计算机集群对大型数据集进行分布式存储和处理
huisenling126·2023-03-26 18:41

分布式对象存储服务器minio

分布式存储服务器简单解释为将数据分布在多个存储型服务器上，并且这些分散的存储资源可以构成一个虚拟化的存储设备，但是现实是数据是分散存储在企业的各个角落。
ZhengXinMing1998·2023-03-26 11:31

ceph 相关总结

分布式存储工具，简单部署如下：修改主机名hostnamectlset-hostnamenode-deployhostnamectlset-hostnamenode1hostnamectlset-hostnamenode2
Dash_chan·2023-03-25 11:22

浅谈Linux内核IO体系之磁盘IO

基本所有的技术栈都需要与IO打交道，分布式存储系统更是如此。本文主要简单分析一下磁盘IO，看看一个IO请求从发起到完成到底经历了哪些流程。
爱健身的兔子·2023-03-25 01:39

分布式系统

目录分布式存储系统分布式计算系统分布式消息队列系统分布式机器学习系统分布式框架分布式数据库分布式存储系统分布式存储系统分为两大类中心化控制架构(HDFS)和完全无中心架构(Ceph)。
骆驼整理说·2023-03-24 19:28

未来的一场技术革命--区块链技术

从数据方面来看，区块链是一种单个节点或多个节点无法有意更改数据记录的分布式数据库，其分布化体现在对数据的分布式存储和分布式记录。从技术方面来看，区
戴少·2023-03-24 16:53

k8s+gluster+heketi分布式存储

部署gluster部署环境vmware15ubuntu16.04192.168.245.133k8s-masterglusterheketiubuntu16.04192.168.245.134k8s-nodeglusterubuntu16.04192.168.245.135k8s-nodegluster添加硬盘添加额外存储在vmware中选中虚拟机->编辑虚拟机设置->列表中选中硬盘->添加启动虚
于飞_d529·2023-03-24 13:14

Prometheus+SpringBoot应用监控全过程详解

Prometheus主要特性：多维数据模型，其中包含由指标名称和键/值对标识的时间序列数据PromQL，一种灵活的查询语言不依赖分布式存储；单服务器节点是自治的时间序列收集通过HTTP上的pull模型进行通过中间网关支持推送
写代码的珏秒秒·2023-03-24 08:01

完全解析分布式存储，带你了解HDFS的块

在大数据的学习过程中，我们经常会听到“分布式”这三个字，那个所谓的“分布式”到底是什么意思？我们看到一些古装电视剧电影，在古代，生产力比较低下，没有现在的各种便捷的交通工具。人们需要运输一些货物的时候，最常见的方式就是套马车，用马来拉动车。如果需要拉的货物比较多，一匹马拉不动呢？人们的做法并不是训练一匹更加强壮的马，而是会使用多匹马同时来拉动这辆马车。这就是分布式的思想！那么在程序世界中，单台服务
好程序员IT教育·2023-03-24 06:26

中原银行使用 XSKY星辰天合对象一体机解决核心系统备份管理问题

中原银行使用星辰天合X3000对象存储一体机在生产中心和灾备中心分别搭建分布式存储集群，通过S3协议与NBU备份平台对接，提供海量存储服务，实现备份平台架构转型。
XSKY星辰天合·2023-03-24 02:44

TCO 节省高达 40% ，新疆农信以天合翔宇实现生产级信创场景建设

最终，他们通过采用星辰天合的天合翔宇成功搭建分布式存储平台，初步实现了其信创建设
XSKY星辰天合·2023-03-24 02:44

权威检验确认，星辰天合 SDS 产品通过可信云分布式存储软件全类型评估

近日，2022下半年第四批可信云·云基础设施与云软件领域评估结果公布，中国信通院和泰尔实验室联合出具了检验报告，星辰天合SDS产品XEDPV6通过了可信云分布式存储软件全类型（块存储、文件存储、对象存储
XSKY星辰天合·2023-03-24 02:14

天合翔宇荣获“2022 科技赋能 金融业数字化转型突出贡献奖”

27日，由中国人民银行主管的《金融电子化》杂志社主办的“2022中国金融科技年会暨第十三届金融科技应用创新奖颁奖典礼”成功在线上举办，会上揭晓了2022年金融科技应用创新奖，XSKY星辰天合“天合翔宇分布式存储系统
XSKY星辰天合·2023-03-24 02:43

Hadoop入门

主要模块包括:分布式文件系统：HDFS实现将文件分布式存储在很多的服务器上分布式计算框架：MapReduce实现在很多机器上分布式并行计算分布式资源调度框架：YARN实现集群资源管理以及作业的调度HDFS
NealLemon·2023-03-24 01:08

Raft简介

什么是RaftRaft是由DiegoOngaro与JohnOusterhout的一篇论文中所提出的分布式存储一致性算法。
RiverXu·2023-03-24 00:16

SpringCloud+Minio+Nginx实现分布式文件鉴权管理

Minio作为一个非常成熟的分布式存储框架，拥有丰富的SDK支持，所以使用Minio主要实现方案。二、Minio安装我这次安装主要参考网上的博文教程Minio：分布式数据存储搭建
还没秃头的码农·2023-03-23 20:16

Redis（一）CAP+BASE、数据类型和常用关键字

CAP的理论就是说在分布式存储系统中，最多只能实现上面的两点。而由于在分布式的项目下，不同的服务器之间的网络
布莱斯Bryce·2023-03-23 20:37

【WORM】分布式存储“钉子户”

WORM哥的压力来源作为业界响当当的人物谁人不识“WORM”哥独门绝技当属“一次写入多次读取”PS：即文件被写入完成后通过设置使其进入只读状态但凡施展此技能保护期内的文件只能被读取管理者也无法删除、修改或是重命名即使超过保质期数据只能删除，无法修改或是重命名两手准备，有备无患早在2003年，Sony公司发布的SAIT磁带机中已经提供了WORM技术当时“法规遵从”已经成为存储界的一个热门话题这使得W
大道云行TaoCloud·2023-03-23 20:24

视频监控 | XDFS电信全球眼云存储扩容项目

分布式存储|北京大道云行科技有限公司监控&存储项目介绍随着安防与互联网、物联网、云计算等技术融合，云架构将普遍应用于视频监控领域。以统一的平台服务于不同的机构，从而减少重复的ICT设施建设。
大道云行TaoCloud·2023-03-23 20:53

GlusterD2—K8S原生存储

分布式存储|北京大道云行科技有限公司01前言随着容器云业务的快速发展，功能不断迭代以适应更多应用场景，满足更多业务需求。其对存储也提出了更高的要求，包括功能、性能、稳定性、兼容性等。
大道云行TaoCloud·2023-03-23 20:53

揭秘全闪|千万级IOPS的超高性能是如何实现的？

基于高效的分布式存储软件设计和高性能的全闪存硬件平台，FASS可将多个节点的SSD资源通过高速以太网或Infiniband网络组成一个高性能、高可用、易扩展块存储资源池。
大道云行TaoCloud·2023-03-23 20:53

SDS观察站

SDS通常都是分布式存储，形式分为文件存储（POSIX/NFS/CIFS）、对象存储（S3）和块存储（iSCSI/iSER/NVMeoF）三种。SDS的
大道云行TaoCloud·2023-03-23 20:23

突破硬件瓶颈(一)：Intel体系架构的发展与瓶颈挖掘

分布式存储|北京大道云行科技有限公司软件定义存储SDS正在从容量型向性能型演进，千万级IOPS和微秒级低延迟，非常具有挑战性。
大道云行TaoCloud·2023-03-23 20:52

有奖征集|TaoCloud&宝德联合举办全闪POC！

TaoCloud全闪分布式存储软件FASS已进行迭代升级，演变成全新的FASS1.5.1版本。无论从产品特性还是功能亮点都得到了质的飞跃，具体升级内容，欢迎扫码参加本次POC活动。
大道云行TaoCloud·2023-03-23 20:52

大数据基础之Hadoop和Spark

（1）数据的存储：分布式文件系统（分布式存储）（2）数据的计算：分布式计算第二节：JAVA和大数据是什么关系？
我和程序猿的日常·2023-03-23 13:54

4分钟了解影链INP交易解锁

1.首先我们来了解一下影链INCINFLUENCECHAINInfluenceChain影链是全球首个基于BlockChain技术的产生的影响力价值数据引擎，致力于利用区块链与分布式存储技术，构建一个全球范围内的影响力价值平台
影链INP·2023-03-22 09:23

【BTD区块链火爆2020】

全网节点协同工作，形成容量可无限扩展、天然异地容灾备份、具备自我修复能力的分布式存储链，形成一个更安全、更快捷、更实用的海量分布式云存储。
zhf666888·2023-03-22 02:07

mysql大表

是一个相对稳定的数据量]B-->B3[不应该有这么多数据]A-->C[对象:数据表]C-->C1[状态表]C1-->C12[OLTP业务方向]C-->C2[流水表]C2-->C21[OLTP:业务拆分,分布式存储的角度进行设计
Darui30·2023-03-19 01:16

浅谈Hadoop

Hadoop生态系统是指以大数据分布式存储(HDFS)，分布式计算(MapReduce)和资源调度(YARN)为基础联合其他各种组件在内的一整套软件。Hadoop生态
夜丨雨·2023-03-18 21:10

数据库存储

RAIDDSL：DomainSpesicLanguage专用领域语言单机存储一切皆Key-Value本地文件系统一切皆文件Ceph-分布式存储关系型数据库通用组件QueryEngine：解析query，
银晗·2023-03-18 15:58

seaweedfs文件存储服务器搭建

官方网站:https://github.com/chrislusf/seaweedfs/wiki/Getting-Started概述seaweedfs是一个非常优秀的由golang开发的分布式存储开源项目
其实我很dou·2023-03-17 22:27

day36-2019年4月18日

主要用于普通用户提交的数据备份，对于用户提交到服务器上的普通文件（图片，压缩包，视频，文档等），可采用inotify/sersync+rsync实时备份方式：对于数据文件还有较复杂的分布式存储工具自身可以实现将数据同时备份成多份
Linux_wu_sir·2023-03-17 22:52

优秀的 Go存储开源项目和库

存储服务器（StorageServer）Go实现的存储服务器minio-Minio是一个与AmazonS3APIs兼容的开源对象存储服务器，分布式存储方案rclone-“用于云存储的Rsync”-GoogleDrive
码农甲·2023-03-17 21:35

京东商城-刘海锋

方法论之一：JFS，弥补体系中统一的分布式存储所有的问题都是分类问题抓大头，重点突破20%投入，80%产出方法论之二：内存是新硬盘，动态内容存储另辟蹊径，不走寻常路从历史去洞察未来方法论之三：中间件体系
noono·2023-03-17 15:25

第二存储解决方案白皮书 | 专为非生产数据而设计的存储方案

QingStor是QingCloud基于多年的大规模公有云实践，通过软件定义，为云而生、为核心业务打造的企业级分布式存储产品。
QingStor分布式存储·2023-03-17 05:10

2020-12-07

IPFS技术的各大优势是全世界所共识的，但也存在一个致命的弊端：那就是普及这一项技术，需要在全球建立无数个节点，才能真正建立IPFS分布式存储生态。这样，IPFS才能真正得到普及。
AURC·2023-03-16 18:43

云原生分布式存储系统FastCFS 安装简明教程

上一篇文章我们对余老师开发的分布式存储系统FastCFS做了一个简单的介绍，具体看这个链接：https://www.jianshu.com/p/f09953393b1e今天我讲自己部署FastCFS集群并和
jerry的技术与思维·2023-03-16 04:49

存证、防伪、溯源设计方案学习总结

简单的说就是比对前后的哈希值的过程，哈希发生了变化就证明整个文件就被修改过了，涉及到的技术是分布式存储就是我们常说的IPFS，还有区块链网络。2.存证是如何进行的的？
幻觉_ae51·2023-03-15 21:18

【2020-08-30】Rocket架构原理以及使用方式

RocketMQ是如何存储海量海量信息的，如何实现分布式存储的？RocketMQ是如果Master节点挂掉了怎么办？岂不是会丢失一部分数据RocketMQ是如何知道要发送到哪些Broker上去的？
知者半省者无·2023-03-15 19:48

BlockManager

架构简介BlockManager是一个嵌入在spark中的key-value型分布式存储系统，是为spark量身打造的，BlockManager在一个spark应用中作为一个本地缓存运行在所有的节点上，
搞什么呀·2023-03-15 13:30

神经网络模型通用性分析,神经网络模型可解释性

然而，直观性的思维是将分布式存储的信息综合起来，结果是忽然间产生想法或解决问题的办法。这种思维方式的根本之点在于以下两点:
普通网友·2023-03-15 08:05

神经网络模型可解释性,典型的神经网络模型

然而，直观性的思维是将分布式存储的信息综合起来，结果是忽然间产生想法或解决问题的办法。这种思维方式的根本之点在于以下两点:
快乐的小荣荣·2023-03-15 07:23

蓝海彤翔执行副总裁张加廷接受【联播苏州】独家专访

高性能分布式存储助力中国式科幻大片《
LhcyyVSO·2023-03-15 07:22
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他