GFS分布式存储

K8S集群中部署NFS之四：使用StorageClass创建PV

而持久化存储，NFS(NetworkFileSystem）是一个使用比较常用的分布式存储技术，在本系列中，我将详细演进如
乱七八糟谈技术·2023-09-12 05:07

亚马逊云存储之S3(Simple Storage Service简单存储服务)

其概念类似于分布式文家系统，同Google的GFS应该在一
沙琪玛--充电站·2023-09-11 13:53

adworld-web2

web2GFSJ0627积分2金币291最佳Writeup由Robert_Wei提供收藏反馈难度：2方向：Web题解数：108解出人数：10185题目来源:CTF题目描述:解密题目场景:http://61.147.171.105
32进制·2023-09-11 10:38

分布式文件系统-Facebook haystack

0、分布式文件系统分布式文件系统很常见，主要功能：存储文档、视频、图像等作为分布式表格系统的存储层这类系统很多，比如：国外系统：GFS-(GoogleFileSystem)、haystack（Fackbook
～千溪杂谈(随风而逝)～·2023-09-10 22:32

[译] [论文] Bigtable: A Distributed Storage System for Structured Data

译者序本文翻译自2006年Google的分布式存储经典论文：Bigtable:ADistributedStorageSystemforStructuredData(PDF)。
东京的雨不会淋湿首尔·2023-09-10 17:20

VM ubuntu和windows 共享文件夹及Ubuntu22.04的联网问题

Vmwaretools共享文件夹在windows下创建一个用于共享数据的文件夹点击编辑虚拟机》》设置》》共享文件夹》》启用》》选择文件夹路径》》确定打开虚拟机,打开文件,按下Ctrl+L输入路径/mnt/hgfs
十@八九·2023-09-10 12:52

大数据导论 笔记

一、大数据方向1、技术发展计算机网络云计算大数据时代人工智能（本科：使用，研究生：推导，博士：创新）2023年大数据模型人工智能元年2、基础课程hadoop大数据基础三大件：HDFS分布式存储、MapReduce
暗托涅瓦·2023-09-10 02:12

ceph分布式存储-增加/删除 Monitor

1.介绍一个集群可以只有一个monitor，我们推荐生产环境至少部署3个。Ceph使用Paxos算法的一个变种对各种map、以及其它对集群来说至关重要的信息达成共识。建议（但不是强制）部署奇数个monitor。Ceph需要mon中的大多数在运行并能够互相通信，比如单个mon，或2个中的2个，3个中的2个，4个中的3个等。初始部署时，建议部署3个monitor。后续如果要增加，请一次增加2个。2.增
lihanglucien·2023-09-10 01:02

一致性hash

问题分布式存储的系统设计中，有一个问题一直困扰着我：方式1.集群中所有的机器，都存储完整的数据，然后所有的机器都可以提供完整服务；方式2.集群中的所有机器，都只存储数据的一部分，然后根据实际情况选择合适的机器进行服务
空即是色即是色即是空·2023-09-09 23:21

es的数据存储结构；近实时查询原因

概述es存储中大体可以看成index(表)+document（行记录）组成es支持分布式存储，一个index会产生多个分片，保存在不同的实例上。其中分为若干个主分片和副分片。
好大的月亮·2023-09-09 15:52

直播 | SDS 容灾方案，让制品数据更安全

近日，腾讯CODINGWePack制品管理系统V1以及腾讯CODINGDevOps研发效能管理平台V7与XSKY星辰天合的统一数据平台XEDP及天合翔宇分布式存储系统完成互相兼容认证，在数据层面满足了共同客户敏捷开发的高可用建设合规要求
·2023-09-09 09:15

k8s安装elasticsearch集群

StatefulSet控制器创建的Pod适合用于分布式存储系统，它最大的特点是各个Pod的数据不一样，各个Pod无法使用同一个存储卷。
MasonYyp·2023-09-09 05:25

copy,mutableCopy

mutableCopy时,有什么区别.像这种死的东西,写段代码,测试一下就真相大白了NSString*string=[NSStringstringWithFormat:@"sfgasfasgfasgsdgfseg
dominghao·2023-09-09 05:22

Hadoop集群搭建

Hadoop集群搭建Hadoop集群简介Hadoop集群包括两个集群：HDFS集群、YARN集群两个集群逻辑上分离、通常物理上在一起两个集群都是标准的主从架构集群HDFS集群（分布式存储）主角色：NameNode
藤藤菜丶·2023-09-09 05:45

win11和虚拟机上的ubuntu系统共享文件夹

有时候需要在虚拟机内和win11系统之间进行文件拷贝操作，但是虚拟机内的VmwareTools不好用解决方式开启虚拟机共享文件夹在虚拟机的Ubuntu系统内的终端命令行输入以下命令sudo/usr/bin/vmhgfs-fuse.host
heda3·2023-09-09 05:38

大数据技术之Hadoop：MapReduce与Yarn概述（六）

目录一、分布式计算二、分布式资源调度2.1什么是分布式资源调度2.2yarn的架构2.2.1核心架构2.2.2辅助架构前面我们提到了Hadoop的三大核心功能：分布式存储、分布式计算和资源调度，分别由Hadoop
何苏三月·2023-09-09 04:17

什么是对象存储

这些对象被存储在分布式存储系统中，通常由多个物理设备或服务器组成，以提供高可用性、冗余和可伸缩性。以下是对象存储的一些关键特点和优点：弹性扩展性：对象存储系统可以
贾斯汀玛尔斯·2023-09-08 13:19

【软考】系统架构设计师-历年论文题目（2013-2022）

2013-2022年系统架构设计师历年论文题目如下：时间题目20131.论软件架构建模技术与应用；2.论企业应用系统的分层架构风格；3.论软件可靠性设计技术的应用；4.论分布式存储系统架构设计20141
Jackilina_Stone·2023-09-08 01:32

FastDFS 原理篇

分布式存储选型这里主要说下按需求选取和使用在这之前使用过glusterfs分布式存储,使用过程中部署比较简单,也容易上手.但是存在如下几个问题:使用glusterfs主要走的是网络带宽,内网使用率问题.
凯撒公猿·2023-09-07 23:58

GFS周期更新规律

require('fs');constfetch=require('node-fetch');constURI='http://nomads.ncep.noaa.gov/cgi-bin/filter_gfs
此昵称已被狗抢占·2023-09-07 18:48

Linux文件系统管理基础

xfs,btrfs,reiserfs,jfs,swapswap:交换分区'光盘:isoWindows:fat32,ntfsUnix:FFS,UFS,JFS2网络文件系统:NFS,CIFS集群文件系统:GFS2
极地冰凌_25bf·2023-09-07 17:12

Docker之自动化性能监控系统Prometheus&Grafana附实例（三）

成为继kubernetes之后的第二个托管项目，官方网站Prometheus特点多维数据模型：由度量名称和键值对标识的时间序列数据PromSQL:—种灵活的查询语言，可以利用多维数据完成复杂的查询不依赖分布式存储
30岁老阿姨·2023-09-07 10:48

自动化监控系统Prometheus&Grafana

，数据采集→数据处理→数据存储→数据展示→告警Prometheus特点展开目录多维数据模型：由度量名称和键值对标识的时间序列数据PromSQL:—种灵活的查询语言，可以利用多维数据完成复杂的查询不依赖分布式存储
渔阳节度使·2023-09-07 10:11

Ceph：一个 Linux PB 级分布式文件系统

本文探讨了Ceph文件系统及其独有的功能，这些功能让它成为可扩展分布式存储的最有吸引力
天狐云通讯八度·2023-09-07 08:50

Impala

提供的一款开源的针对HDFS和HBASE中的PB级别数据进行交互式实时查询(Impala速度快)，Impala是参照谷歌的新三篇论文当中的Dremel实现而来，其中旧三篇论文分别是（BigTable，GFS
BoomLee·2023-09-07 07:52

大数据组件系列-Hadoop每日小问

它为的是解决海量数据的存储与分析的问题，它本身是源于Google在大数据方面的论文，GFS-->HDFS;HDFS由Client、NameNode、DataNode、SecondaryNameNode组成
躺平的赶海人·2023-09-06 15:55

说说度宇宙

“度宇宙”，是百度基于区块链技术开发的一款分布式存储网络，用户可以自愿按照规则，依法在该网络贡献信用数据、注意力、踪迹、知识储备、时间及其它数据，从而共同提升该网络的总价值！
Toplayer·2023-09-06 13:03

HPE MSA存储的高性能连接解决方案

近几年，中小型企业需求的增加以及大型企业存储架构的改变——尤其是从数据集中存储到分布式存储的演进，使入门级存储在市场中所占份额越来越高，市场的需求必然促使相关产品的大量涌现，而这种天然的竞争态势，则驱动着各厂商不断对自身产品进行改进
虹科网络基础设施·2023-09-06 10:29

【数据结构与算法】【算法思想】分治算法

贪心算法回溯算法分治算法动态规划MapReduce本质就是分治算法，是Google大数据处理的三驾马车之一，另外两个是GFS和Bigtable。
CryptWinter·2023-09-06 02:38

解读MapReduce程序实例

Hadoop的四大组件：（1）HDFS：分布式存储系统；（2）MapRedu
大禹编程扛把子·2023-09-05 14:03

数据库学习笔记（一）

基于传数据库并区别于传统单节点数据库，支持多节点分布式存储和计算。·OLTP是传统的关系型数据库的主要应用，主要是基本的、
PILIPAPALA·2023-09-05 14:17

etcd分布式存储

etcd分布式存储etcd简介etcd下载安装etcd常用命令etcd配置参数etcd集群golang操作etcd
hixiaoyang·2023-09-05 13:22

FastDFS分布式文件系统介绍及单机版安装

常见的分布式文件系统有：FastDFS、GFS、HDFS、Lus
生出来，我养！·2023-09-05 04:27

【ceph】分布式存储一些知识点梳理

前一段时间由于一些原因工作变动，面了一些分布式存储的相关岗位，感觉市面上相关经验分享较少，因此拿出来和大家分享一下。
bandaoyu·2023-09-05 00:19

docker 笔记5：redis 集群分布式存储案例

尚硅谷Docker实战教程（docker教程天花板）_哔哩哔哩_bilibili目录1.cluster(集群)模式-docker版哈希槽分区进行亿级数据存储1.1面试题1.1.1方案1哈希取余分区1.1.2方案2一致性哈希算法分区原理优点一致性哈希算法的容错性一致性哈希算法的扩展性缺点一致性哈希算法的数据倾斜问题总结1.1.3方案3哈希槽分区3多少个hash槽哈希槽计算2.3主3从redis集群扩
Rsingstarzengjx·2023-09-04 20:21

Redis-Cluster集群搭建

：reids集群原理：其实它的原理不是三两句话能说明白的，redis3.0版本之前是不支持集群的，官方推荐最大的节点数量为1000，至少需要3(Master)+3(Slave)才能建立集群，是无中心的分布式存储架构
apt_fz·2023-09-04 19:04

Linux系列讲解 —— 【debugfs】交互式文件系统调试器

手册上说debugfs可以用于检查和更改ext2、ext3或ext4文件系统的状态。
星际工程师·2023-09-04 12:59

谈谈Hadoop MapReduce和Spark MR实现

抽象了map和reduce的计算流程，对于分布式存储的数据可以并行的进行map处理，之后在reduce端对map结果进行汇总。移动计算而非移动数据。数据的计算传输需要大量
码农峰·2023-09-04 10:40

python——spark入门

2003和2004年，两个来自Google的观点使Hadoop成为可能：一个分布式存储框架(Google文件系统)，在Hadoop中被实现为HDFS；一个
代码输入中...·2023-09-04 04:43

Web3的新商业综合体——SMT震撼来袭!

SMT生态综合一体化，运用区块链+大数据技术，打造去中心化分布式存储的可信数据平台，SMT生态体系内产
Joker时代·2023-09-04 02:43

分布式计算在云计算中的作用

云计算基于分布式计算技术，它离不开Google的三大核心技术，GFS（GoogleFileSystem，Google文件系统）分布式存储系统，MapReduce分布式处理技术和BigTable分布式数据库
EmmauelZ·2023-09-03 22:54

数据库事务

所有需要保证数据一致性的场景，包括但不限于数据库、事务内存、缓存、消息队列、分布式存储等，都有可能用到事务。
Bai_Yin·2023-09-03 18:14

酷克数据与华为合作更进一步 携手推出云数仓联合解决方案

在本次论坛上，华为发布了分布式存储全闪新品OceanStorPacific9920。酷克数据核心产品HashData云数仓通过与华为OceanStorPacifi
HashData酷克数据·2023-09-03 08:45

入门ElasticSearch ：为什么选择ES作为搜索引擎？

简单的说：ElasticSearch是一个实时的分布式存储、搜索、分析的引擎在我看来ES最强的其实是它的模糊搜索功能。那有的人就会问了：我
ss无所事事·2023-09-03 06:56

NewSQL

最近几年，将关系型数据库和分布式存储的技术结合后产生的新型分布式关系型数据库正在全球兴起，如业界熟知的GoogleF1和GoogleSpanner。
nightwish夜愿·2023-09-03 06:51

千万级并发架构下，关系型数据库应该如何优化？大厂是如何做分库分表的！

在互联网电商行业，或者一些O2O平台，每天也能产生上千万的订单数据，这些量级的数据在传统的关系型数据库中已经无法支撑了，那么如何解决海量数据存储和计算等问题，在业内引入了分布式存储和分布式计算等解决方案
跟着Mic学架构·2023-09-02 23:28

变态的C++代码

def\in\e\__\___\____100#define_(\__,___)a\s\dg\ash\gfha\ksdgf\sdac\vjh\b(_\_,_\__\)intasd\gashgf\haksdgfs
cgy091107·2023-09-02 20:47

酷克数据与华为合作更进一步 携手推出云数仓联合解决方案

在本次论坛上，华为发布了分布式存储全闪新品OceanStorPacific9920。酷克数据核心产品HashData云数仓通过与华为OceanStorPacifi
·2023-09-02 18:43

简析Elasticsearch-简介、安装、配合Kibana使用、SpringBoot整合

什么是Elasticsearch参考参考Elasticsearch是一个实时的分布式存储、搜索、分析的引擎。
张正栋·2023-09-02 11:21

Ceph BlueStore 和双写问题

论开源分布式存储，Ceph大名鼎鼎。用同一个存储池融合提供块存储、对象存储、集群文件系统。在国内有近年使用量迅速攀升。
大隐隐于野·2023-09-02 07:57
上一页 16 17 18 19 20 21 22 23 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他