GridFS分布式存储

ELK 企业级日志分析系统

ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。
过凌丁阳·2023-04-12 23:36

K8S集群中部署NFS之二：使用本地NFS文件夹创建PV

而持久化存储，NFS(NetworkFileSystem）是一个使用比较常用的分布式存储技术，在本系列中，我将详细演进如
乱七八糟谈技术·2023-04-12 06:46

K8S集群中部署NFS之一：配置NFS服务

而持久化存储，NFS(NetworkFileSystem）是一个使用比较常用的分布式存储技术，在本系列中，我将详细演进如
乱七八糟谈技术·2023-04-11 23:14

闲话云计算(五) 金融行业IaaS架构参考

存储方面，现有的分布式存储技术在功能、性能、容灾方面距离传统SAN存储还有差距，因此
zhangli_perdue·2023-04-11 20:41

金融私有云基础架构方案评估（架构与存储篇）

编者荐语本文详细介绍了金融机构如何通过超融合和分布式存储升级IT基础架构，满足数字化转型与信创转型的双重需求，并分析了典型厂商市场格局与评估要素。
志凌海纳SmartX·2023-04-11 19:39

大数据组件——Hive简介及入门

Hive简介ApacheHive是基于Hadoop的一种数据仓库工具，可以提供类似于SQL的查询语言——HiveQL，用来从存储在分布式存储系统中的大规模数据集合中检索和分析数据。
'Wu'·2023-04-11 19:14

寒冬下的IPFS热潮

它是一种内容可寻址、版本化、点对点超媒体的分布式存储、传输协议，即一个点对点的分布式文件系统协议，也被称为“星际文件系统”。
区块链三加一·2023-04-11 15:11

上线访问破万！阿里限产Kafka从实战到源码手册，不愧是业界最强

我们仅需要学习一套框架就能在实际业务系统中实现消息引擎应用、应用程序集成、分布式存储构建，甚至是流处理应用的开发与部署，听起来还是很超值的吧。总
头顶假发·2023-04-11 10:04

图床项目架构与设计

满足海量数据存储的需求架构项目采用B/S模型，服务端与浏览器进行交互，将用户的操作转换为HTTP请求发送给服务端，在服务端使用Nginx作为反向代理服务器进行请求转发，由FastCGI进程处理对应的请求，FastDFS实现文件的分布式存储
gnez-dd·2023-04-10 21:16

链战2018：公链、跨链之争下的天鹅湖（人类区块链进化二史2）

2018区块链落地应用元年我们都知道区块链有很深厚的理论基础，分布式帐本、共识机制、智能合约、密码学构筑了区块链的基石，相较于传统的分布式存储系统，分布式账本技术主要具备两种不同的特征：传统分布式存储系统执行受某一中心节点或权威机构控制的数据管理机制
悬梁刺币Mike·2023-04-10 08:38

TSFS终端存储文件系统边缘计算商业计划

数据分析随着5G技术的到来及科技的快速进步，人类对未来存储需求将出现前所未有的突破，每人需求将突破10T以上的存储空间边缘计算:分布式存储的另一种可能"边缘计算是为应用开发者和服务提供商在网络的边缘侧提供云服务和
海洋一renhe333333·2023-04-10 00:46

滴滴Ceph分布式存储系统优化之锁优化

桔妹导读：Ceph是国际知名的开源分布式存储系统，在工业界和学术界都有着重要的影响。Ceph的架构和算法设计发表在国际系统领域顶级会议OSDI、SOSP、SC等上。
滴滴技术·2023-04-09 22:21

基于Rancher k8s部署Prometheus 监控swoole业务核心指标实战

Prometheus使用Go语言开发，是GoogleBorgMon监控系统的开源版本,性能也足够支撑上万台规模集群.多维度数据模型灵活的查询语言不依赖分布式存储，单个服务器节点是自主
letcoda·2023-04-09 18:42

微服务架构系列(一)之虚拟平台、分布式存储、高可用k8s集群环境搭建

一、物理机虚拟平台搭建1、由实向需架构转换图（每台物理机要求两块硬盘用来做分布式存储和系统盘，我的是10年前的老机器没啥大的要求）：2、系统安装去官网下载ProxmoxVE7.xISOInstaller
非生物语言学家·2023-04-09 15:45

区块链的关键技术

一，P2P网络与分布式存储——储存作用首先，P2P网络是构建了区块链的基础，基于这个基础，区块链采取的是分布式存储，它本质是一个分布式数据库，当一笔交易（数据）产生后，
王永俊·2023-04-09 11:58

Alluxio社区范斌博士访谈录：关于数据编排，云迁移以及数据工程中的挑战

加入Alluxio项目之前,范斌就职于谷歌，从事下一代大规模分布式存储系统的研究与开发。范斌2013年获得卡内基梅隆大学(CarnegieMellonUniversity)计算机系博士学位，博士期
Alluxio·2023-04-09 07:16

Hadoop HDFS 分布式文件系统

DataNode职责HDFS写数据流程HDFSHDFS(HadoopDistributedFileSystem)，Hadoop分布式文件系统是ApacheHadoop的核心组件之一，作为大数据生态圈最底层的分布式存储
VenYy·2023-04-09 05:46

Mapreduce：概述 + 实例：WordCount + yarn

1.MapReduce的工作原理在分布式计算中，MapReduce框架负责处理了并行编程里分布式存储、工作调度，负载均衡、容错处理以及网络通信等复杂问题，现在我们把处理过程高度抽象
xjfy.h·2023-04-09 05:15

【深度知识】Ceph功能，原理及架构总结

1.Ceph架构简介及使用场景介绍1.1Ceph简介Ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
笔名辉哥·2023-04-09 00:02

高成长、高潜力、高社区影响，达坦科技入选 2022 中国新锐技术先锋企业

作为中国领先的新一代开发者社区，SegmentFault思否依托数百万开发者的用户数据分析，各科技企业在国内技术领域的行为及影响力指标，最终评选出15家新锐企业，达坦科技作为领先的开源分布式存储领域企业
达坦科技DatenLord·2023-04-09 00:21

大数据-学习实践-2Hadoop

2Hadoop1知识点2具体内容2.1Hadoop介绍2.2两种安装方式2.2.1伪分布集群安装部署2.2.2分布式集群安装2.2.3客户端节点3待补充4Q&A5code6参考1知识点Hadoop介绍分布式存储
yxyibb·2023-04-08 19:48

Hadoop基础介绍

3、核心组件（1）HDFS：解决分布式存储，包括数据切分和多副本两部分。（2）MapReduce：解决分布式计算，Map：分，Reduce：合。既是分布式框架，又是编程模型。（3）YAR
幸福右手牵·2023-04-08 15:01

大数据开发hive数据库常用命令汇总

Hive简介根据官方文档的定义，Hive是一种用类SQL语句来协助读写、管理那些存储在分布式存储系统上大数据集的数据仓库软件1、进入hive数据库：hive2、查看hive中的所有数据库：showdatabases
爱开发V·2023-04-08 07:45

盘点分布式文件存储系统____分布式文件存储系统简介

一、分布式存储简介1、什么是分布式存储在开始介绍分布式存储之前，先了解一下，非分布式的存储方案。在单机时代，将文件直接存储在服务部署的服务器上——直连存储（DAS）：存储和数据直连，拓展性、灵活性差。
Archie_java·2023-04-08 06:29

ELK企业级日志分析系统

1.ELK各组件介绍ElasticSearch：是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。
jin .·2023-04-08 03:00

了解elk与elfk

●ElasticSearch:是基于Lucene(一个全文检索引擎的架构)开发的分布式存储检索引擎，用来存储各类日志。Elasticsearch是用Java开发的，可通过
不会就ctrl+c?·2023-04-08 03:59

FusionStorage分布式存储

FusionStorage分布式存储01FusionStorage是什么？FusionStorage是什么？
IT小组·2023-04-08 03:56

英特尔DAOS分布式异步存储系统

随着数据呈指数级增长，分布式存储系统不仅成为了数据中心的核心，同时也成了其主要的瓶颈。数据访问延迟高、可扩展性差、管理大型数据集难度大、缺乏查询功能，这些都是常常会遇到的阻碍。
尚先生的博客·2023-04-08 03:01

K8S集群中部署NFS之三：PV配置直接连接到 NFS 服务器

而持久化存储，NFS(NetworkFileSystem）是一个使用比较常用的分布式存储技术，在本系列中，我将详细演进如
乱七八糟谈技术·2023-04-08 00:23

跨链版EOS，Dimension到底凭什么？

当前，可扩展性、隐私保护、分布式存储、共识机制、治理机制、跨链互联等技术，依旧是绝大部分团队在开发和应用区块链过程中面临的问题。挑战即机遇，每一个细分领域的技术瓶颈，都有可能催生数十亿级的区块链项目。
lidaosong·2023-04-08 00:11

在 KubeSphere 中使用 Rook 构建云原生存储环境

Rook将分布式存储系统转变为自管理、自扩展、自修复的存储服务。它使存储管理员的部署、引导、配置、配置、扩展、升级、迁移、灾难恢复、监控和资源管理等任务自动化。
米开朗基杨·2023-04-08 00:19

几种分布式存储组网架构参考

作者：@NGDCN原文链接：几种分布式存储组网架构参考-NGDCN版权：本文由@NGDCN于2022-11-12原创发布在NGDCN，未经许可，禁止转载。
未来网络技术网·2023-04-07 17:35

【内推】【字节跳动】分布式存储 社招、实习

未来博客内容的目标是分布式存储和C++，当然持续有一些通用的操作系统、网络等内容。我就这么立了flag！！！去年的旧链接https://www.jianshu.com/p/6864d2951a91。
猴子007·2023-04-07 15:03

分布式存储技术（上）：HDFS 与 Ceph的架构原理、特性、优缺点解析

面对企业级数据量，单机容量太小，无法存储海量的数据，这时候就需要用到多台机器存储，并统一管理分布在集群上的文件，这样就形成了分布式文件系统。HDFS是Hadoop下的分布式文件系统技术，Ceph是能处理海量非结构化数据存储的对象存储技术，本文将对他们的架构原理、特性和优缺点做介绍。—分布式文件系统HDFS—HDFS全称为HadoopDistributedFileSystem，在2006年由Doug
星环科技·2023-04-07 13:04

分布式存储技术（下）：宽表存储与全文搜索引擎的架构原理、特性、优缺点解析

对于写密集型应用，每天写入量巨大，数据增长量无法预估，且对性能和可靠性要求非常高，普通关系型数据库无法满足其需求。对于全文搜索和数据分析这类对查询性能要求极高的场景也是如此。为了进一步满足上面两类场景的需求，有了宽表存储和搜索引擎技术，本文将对他们的架构、原理、优缺点做介绍。—宽表存储—宽表存储最早来自Google的Bigtable论文，最初的定义为：ABigtableisasparse,dist
星环科技·2023-04-07 13:27

Ceph简介：

Ceph是什么Ceph是一种分布式存储系统，所谓分布式，指的是Ceph可以部署在多台服务器上，通过多台服务器并行处理来对外提供高性能的读写块。
付少华·2023-04-07 12:31

ceph概述

Ceph是一个开放、自我修复和自我管理的统一分布式存储系统。具有高扩展性、高性能、高可靠性的优点。2、为什么要使用ceph?ceph目前已得到众多云计算厂商的支持并被广泛应用。
songtaiwu·2023-04-07 12:29

分布式ceph完整存储理论 -01

分布式存储ceph一、ceph介绍1.1、ceph是什么ceph一个统一的、分布式的存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。
FikL-09-19·2023-04-07 12:56

ceph磁盘集群

存储分类:1)DAS直连存储[硬盘]2)NAS网络附加存储[NFS,Samba...]提供文件系统共享3)SAN存储区域网络[iSCSI...]提供块共享4)分布式存储备注:文件系统(ext3,ext4
迎浪而上，逆浪而行·2023-04-07 12:25

CEPH分布式存储搭建(对象、块、文件三大存储)

集群配置信息：安装的ceph版本：cephversion12.2.12luminous配置所需源的地址wget-O/etc/yum.repos.d/CentOS-Base.repohttp://mirrors.aliyun.com/repo/Centos-7.repowget-O/etc/yum.repos.d/ceph.repohttps://raw.githubusercontent.com/
jerry-89·2023-04-07 12:23

世界500强是如何解决千亿流量留存问题的，《Ceph分布式存储架构》-使用CentOS 7部署 Ceph分布式存储架构-为他们解决什么问题。

文章目录一、Ceph概述1.1Ceph介绍1.2Ceph各组件介绍二、ceph集群部署实验2.1配置Ceph安装源2.2在xuegod63上安装ceph-deploy管理工具2.3离线安装ceph2.4安装cephmonitor2.5部署osd服务2.6创建ceph文件系统2.7部署mgr监控三、多种Ceph挂载方式3.1内核驱动挂载Ceph文件系统3.2使用ceph-fuse命令挂载Ceph文件
极客事纪·2023-04-07 12:21

分布式存储之ceph部署搭建

块存储：典型设备；磁盘阵列，硬盘作用：主要是将裸磁盘空间映射给主机使用，磁盘阵列（内含多块硬盘）做RAID操作或者LVM操作，逻辑划分出N块Logic盘并映射给主机使用，操作系统会识别到N块硬盘，但是无法感知到底是逻辑盘还是物理盘，所以还是会对其进行分区和格式化（无法共享数据）。每块逻辑盘实际上是由多块硬盘共同组成，在读写数据的时候，几块物理硬盘可以并行寻址和操作，大大提高了IO效率。优点：对块磁
9a9b3cafa4a0·2023-04-07 11:08

PySpark核心编程（核心RDD API、核心原理）

--弹性分布式数据集R：弹性：数据可以存放在内存中也可以存储在磁盘中D：分布式：分布式存储，用于分布式计算，RDD的数据是跨越机器存储（跨进程）D：数据集：是一个数据的集合，
喵内噶.·2023-04-07 05:16

监控神器-普罗米修斯Prometheus

不依赖分布式存储，单个服务器节点是自主的。通过基于HTTP的pull方式采集时序数据。可以通过中间网关进行时序列数据推送。通过服务发
tester_sz·2023-04-07 04:07

大数据之Hive

1、Hive是什么1.1概述在Hadoop项目中，HDFS解决了文件分布式存储的问题，MapReduce解决了数据处理分布式计算的问题。
冰河winner·2023-04-07 03:28

主流分布式存储技术对比分析：GFS、HDFS、GlusterFS、Ceph、Swift

1引言目前市面上各个厂家的分布式存储产品五花八门，但是如果透过产品本身的包装看到其背后的核心技术体系，基本上会分为两种架构，一种是有中心架构的分布式文件系统架构，以GFS、HDFS为代表；另外一种是完全无中心的分布式存储架构
米朵儿技术屋·2023-04-06 19:18

【6.824分布式系统笔记】LEC 3: GFS ｜HDFS、背景、GFS架构、文件读写、一致性

GFS论文笔记背景为什么构建分布式存储系统如此困难？需要大量机器并行来获得高性能→数据分割放置，即分片（
Mengo_x·2023-04-06 19:13

大数据导论（四：大数据的存储）

1.2管理问题这些大量的数据结构复杂，种类繁多，如何对分布、多态、异构的大数据进行管理的问题已经不期而至，传统的数据存储方式面对大数据的猛烈增长已不能满足需求，需要开展分布式存储的研究。
SupAor·2023-04-06 16:35

5分钟看懂Ulord

首先在说Ulord之前，先来说下什么是区块链技术（以下都是个人看法）简单易懂来说就是个分布式存储（分布式存储简单的说就是本来你用电脑数据就存在自己电脑上，用了区块链技术就会存储到很多人电脑上,大概这么理解就行
我是小夫呀·2023-04-06 16:00

mongoDB应用篇-mongo高级应用之TTL索引-文本索引与固定集合-GridFS存储

MongoDB中的索引机制以及常见的索引管理，除此之外，MongoDB还支持一些针对特殊业务的集合或者索引，例如支持空间存储索引，支持固定大小集合，支持搜索和TTL索引，除此之外，MongoDB还支持GridFS
逐梦々少年·2023-04-06 15:09
上一页 20 21 22 23 24 25 26 27 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他