GFS分布式文件系统

终端怎么进入hadoop_Hadoop HDFS的Shell操作实例

我们知道HDFS是Hadoop的分布式文件系统，那既然是文件系统那最起码会有管理文件、文件夹之类的功能吧，这个类似我们的Windows操作系统一样的吧,创建、修改、删除、移动、复制、修改权限等这些操作。
weixin_39789499·2022-02-28 10:35

深入浅出Hadoop实战开发

Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。HD
遥远的东方·2022-02-28 10:30

Hadoop 2.x初级入门到精通(全面深入的Hadoop实战教程)-张勇-专题视频课程

全面深入的Hadoop实战教程)—756人已学习课程介绍以ApacheHadoop2.5.0为准，进行深入浅出的讲解各个模块的功能、架构、使用，主要四个方面内容：模块一：Hadoop2.x入门模块二：分布式文件系统
sundaytian·2022-02-28 10:27

Ubuntu 16.04 /mnt/hgfs/下不显示共享文件夹的处理办法

Ubuntu16.04/mnt/hgfs/下不显示共享文件夹的处理办法###1.解决不显示共享文件夹1.apt-getinstallopen-vm-tools2.vmhgfs-fuse.host://mnt
·2022-02-28 09:10

FastDFS安装和简介详细总结

1、fastDFS简介1FastDFS是用c语言编写的一款开源的分布式文件系统。
JimmyThomas·2022-02-27 16:00

hadoop学习笔记（一）：hadoop生态系统及简介

HDFS：分布式文件系统MapReduce：分布式计算框架Zookeeper：分布式协作
weixin_30652271·2022-02-27 09:11

Hadoop HDFS 3.3.1分布式存储搭建

前言看了标题会不会诧异，怎么昆仑分布式数据库玩起了分布式文件系统？因为昆仑分布式数据库0.9版本起，要增加HDFS分布式文件备份功能，所以开发小哥哥工作中，就顺便把学习的过程分享出来。
·2022-02-24 17:29

130 余个相见恨晚的超实用网站

黑科技写代码资源搜索小工具导航页（工具集）看视频学设计搞文档找图片搞学习CSDN：https://www.csdn.net/TED（最优质的演讲）：https://www.ted.com/谷粉学术：https://gfsoso
one or only·2022-02-24 08:46

超实用网站

文章目录学习找书籍写代码小工具导航页（工具集）看视频学设计搞文档找图片学习CSDN：https://www.csdn.net/TED（最优质的演讲）：https://www.ted.com/谷粉学术：https://gfsoso
蓝色漩沐·2022-02-24 08:15

相见恨晚的超实用网站

黑科技写代码资源搜索小工具导航页（工具集）看视频学设计搞文档找图片搞学习CSDN：https://www.csdn.net/TED（最优质的演讲）：https://www.ted.com/谷粉学术：https://gfsoso
初—·2022-02-24 08:45

HBase

比如：GoogleBigtable利用GFS作为其文件存储系统，HBase利用HadoopHDFS作为其文件存储系统；Go
java全栈_coder·2022-02-22 07:51

node.js 第三方库开发过程中 文件实时同步功能

先了解如下三方库Concurrently:同时执行多个命令https://www.npmjs.com/package/concurrentlyimage.pngfs-extra：文件操作库https:/
_海角_·2022-02-21 14:14

Git 分布式文件系统 - Git 的分支机制

分支是git的杀手锏功能之一。就和绝地武士能够运用原力解决问题一样，gitter必须能够熟练运用分支迅速应对问题。本章节会带领读者一起探寻git分支的设计思想，使后续的git修行更加的顺利。Git如何存储数据理解Git分支机制之前，回顾一下Git存储数据的原理是十分有必要的。当我们在命令行中执行以下命令产生一次提交后，Git内部发生了什么？#在git的工作空间新建三个文件。vimgitbranch
给你添麻烦了·2022-02-21 01:56

[转]理解MapReduce

Hadoop简介Hadoop就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，
dechuan·2022-02-20 23:20

HDFS 用户手册

HDFSUsersGuidePurpose本文档是用户使用HDFS的启蒙文档，不管是作为Hadoop集群的一部分，还是独立运行的通用分布式文件系统。
偷油考拉·2022-02-20 22:56

Hadoop 生态系统

1.Hbase1.Nosqlkey-value存储2.最大化利用内存2.HDFS1.hadoopdistributefilesystem分布式文件系统。2.最大化利用磁盘。
Velic·2022-02-20 13:37

文章、专利下载查询实用网址

文章下载网址1，百度学术下载文章2，百度学术输文章名，找到对应的DOI，然后复制到下面的网址http://sci-hub.tw3，百度学术上面找不到，可以去下面这个找，这个是谷歌学术的镜像文件https://gfsoso
易笑笑小姐姐·2022-02-20 11:51

DataHome专栏： IPFS 100问之IPFS和HTTP的区别

在IPFS网络中的节点将构成一个分布式文件系统。为什么说IPFS将取代HTTP呢？IPFS将会带给我们什么新的体验呢？
DataHome·2022-02-20 06:02

hadoop是什么：分布式系统基础架构

Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS
嘿嘿海海·2022-02-20 01:00

GFS论文笔记

前言这是看GFS的论文的研读笔记。
trieyouth·2022-02-19 11:25

Hadoop MapReduce八大步骤以及Yarn工作原理详解

Hadoop是市面上使用最多的大数据分布式文件存储系统和分布式处理系统,其中分为两大块分别是hdfs和MapReduce,hdfs是分布式文件存储系统,借鉴了Google的GFS论文.MapReduce
SnailFast·2022-02-18 17:51

云知声 Atlas 超算平台: 基于 Fluid + Alluxio 的计算加速实践（下）

但是在具体场景适配方面我们还是遇到了一些问题，这些问题我们第一时间与社区反馈，社区都第一时间解决了我们的需求，这里主要讲下几个比较重要的特性支持：hostpath与nonroot的支持在Atlas平台中，我们对分布式文件系统设置了
·2022-02-18 14:46

2018-07-08

hellodddcddreqadssfdafgfgcertgfsdtythgj
栗先森_·2022-02-18 11:06

[老实李] HDFS笔记

一.HDFS简介1.HDFS简介HDFS是hadoop的核心子项目，是一个可以运行在普通硬件设备上的分布式文件系统，也就是容错很高；是基于流数据模式访问和处理超大文件的需求开发的，它具有高容错，高可靠性
老实李·2022-02-17 15:38

CDH组件简介

1.HDFS：Hadoop分布式文件系统被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。
豪大大大·2022-02-17 08:48

FastDFS安装部署

在学习taotao商城这个视频的过程中、用到了fastdfs、刚好自己有一台服务器就自己学习了下、参考了网上多篇文章、感谢各位分享~~FastDFS是c写的开源分布式文件系统、充分考虑了冗余被人、负载均衡
牛牛_735d·2022-02-16 20:29

【大数据哔哔集20210122】面试官问我HDFS丢不丢数据？我啪就把这个文章甩到他脸上

file数据一致性HDFS作为分布式文件系统在分布式环境下如何保证数据一致性。
王知无·2022-02-16 06:13

02.fastDFS分布式文件上传下载解决方案

fastDFS分布式文件上传解决方案一、fastDFS介绍1).特点c语言编写的一款开源的分布式文件系统;充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传
哈哈大圣·2022-02-16 01:55

IPFS系列01-IPFS 前世今生

关于IPFS的理解，网上众说纷纭，很多人说它是区块链项目，也有人说它是分布式文件系统，还有人说它是矿机...这里我们先抛开那些概念，首先我们看看IPFS官网(https://ipfs.io)对它的描述
Rock_Yang·2022-02-16 00:00

FastDFS高可用集群架构配置搭建及使用

一，概述FastDFS是一个开源的高性能分布式文件系统（DFS）。它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。
就叫小木木呀·2022-02-15 19:36

了解mach-o文件结构

转载自http://www.blogfshare.com/ioss-mach-o.html我们知道Windows下的文件都是PE文件，同样在OSX和iOS中可执行文件是Mach-o格式的。
厨子·2022-02-15 02:20

分布式文件系统调研

数据存储方式文件、块和对象是三种以不同的方式来保存、整理和呈现数据的存储格式。这些格式各有各的功能和限制。文件存储会以文件和文件夹的层次结构来整理和呈现数据；块存储会将数据拆分到任意划分且大小相同的卷中;对象存储会管理数据并将其链接至关联的元数据。三者的本质差别是使用数据的“用户”不同：文件存储的用户是自然人块存储的用户是可以读写块设备的软件系统，例如传统的文件系统、数据库对象存储的用户则是其它计
Minority·2022-02-14 13:43

minIO高可用

1.概述1.1.介绍minIO是目前一个比较轻量级的分布式文件系统，遵循apache2.0开源协议。
黑科技王子·2022-02-14 09:04

test

#testaswdasdasdadasdasdasdasdasdsgfsasdadsda1
刘黑胖子·2022-02-13 21:39

好玩的大数据之8：Hadoop安装（hadoop-3.2.1，伪分布式部署方式）

Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。
张文斌_2020·2022-02-13 20:44

400ToJava:133-分布式文件系统FastDFS-安装配置

html资源地址：https://sourceforge.net/projects/fastdfs/源码资源：https://github.com/happyfish100FastDFS是一个开源的轻量级分布式文件系统
加菲猫DY·2022-02-12 09:35

Docker 安装 Redis 并使用

拉取官方镜像：dockerpulldocker.io/redisUsingdefaulttag:latestlatest:Pullingfromlibrary/redis27833a3ba0a5:Pullingfslayercde8019a4b43
Deque·2022-02-11 16:25

CentOS 7.2搭建FastDFS 分布式文件系统，实现高可用集群

分布式集群搭建结构双Tracker2组Group轮询存储策略Keepalived+Nginx高可用Nginx缓存4个存储节点一、集群规划清单1.安装清单软件名称版本百度云盘存放名称FastDFS5.11fastdfs-5.11.zipFastDFS-Nginx-module无fastdfs-nginx-module-master.zipLibFastCommon1.0.36libfastcommo
溯水心生·2022-02-11 11:44

FastDFS搭建单机图片服务器（一）

根据分布式文件系统-FastDFS在CentOS下配置安装部署和分布式文件系统-FastDFS配置Nginx模块及上传测试一步一步搭建的，但还是碰到了版本太低，导致安装报错的问题。
氨基钠·2022-02-11 02:47

JuiceFS 即将发布 1.0 并调整开源许可

开源一周年JuiceFS开始于2017年，是一款云原生分布式文件系统，旨在帮助企业解决多云、跨云、混合云环境下所面临的诸多挑战：数据安全和保护、大数据架构升级、海量小文件访问、Kubernetes标准存储等
JuiceFS·2022-02-09 16:43

Hadoop学习笔记

参考：http://www.cnblogs.com/heavenwang/p/3988033.html1.基本概念Hadoop是Apache基金会下一个开源的分布式计算平台，它以分布式文件系统HDFS和
yz_wang·2022-02-09 16:30

Java实现图片上传至FastDFS入门教程

FastDFS是一个开源的轻量级分布式文件系统，由跟踪服务器（trackerserver）、存储服务器（storageserver）和客
·2022-02-08 11:02

FastDFS环境搭建

FastDFS是一个开源的分布式文件系统。废话不多说，这是开源git地址：https://github.com/happyfish100我的安装包全部是在git上下载的。
扑棱扑棱的小菜鸟·2022-02-06 08:17

Hadoop并行计算原理与分布式并发编程

我们通常说的分布式系统其实是分布式软件系统，即支持分布式处理的软件系统，它是在通信网络互联的多处理机体系结构上执行任务的，包括分布式操作系统、分布式程序设计语言及其编译(解释)系统、分布式文件系统和分布式数据库系统等
漫天雪_昆仑巅·2022-02-05 07:37

HDFS(分布式文件系统)

Block(数据块)：HDFS上面基本默认的基本存储单位，大小一般为128M一个大的文件会被拆分成一个个的数据块，然后存储在不同的机器。若小于block的大小，则实际占用的空间为其文件的大小基本的读写单位，每次读的都是一个块，每个块都会被复制到多台机器HDFS采用的是master/slave架构。一个HDFS集群是由一个NameNode和多个DataNode构成。NameNode(元数据节点)和D
GakkiLove·2022-02-04 23:58

VMware和本机之间不能复制粘贴的解决方法

使用共享文件夹打开虚拟机文件系统，虚拟机中共享文件夹得默认位置是/mnt/hgfs/，进入此目录下就可以看到刚刚设置的共享文件
Buckletime·2022-02-04 17:04

Hadoop RPC机制详解

远程过程调用(RPC)是一种常用的分布式网络通信协议，他允许运行于一台计算机的程序调用另一台计算机的子程序，同时将网络的通信细节隐藏起来，使得用户无需额外地为这个交互作用编程，大大的简化了分布式程序开发作为一个分布式文件系统
SmallBird_·2022-02-03 04:08

换行格式的Base64转换报错 "Illegal base64 character a"

base64解码报错java代码Stringbase64Str="c2FtcGxlCWNocglzdGFydAllbmQJenZhbHVlCU5fd2luCWNudlR5cGUJb3JpZ2luCWZldGFsX2lu
·2022-01-21 14:07

Hadoop

Hadoop与三遍论文密不可分：①2003年，谷歌发布的分布式文件系统GFS的论文，可以用于解决海量数据存储的问题。②2004年，谷歌发布了MapReduce的论文，可以用于解决海量数据计算的问题。
一任平生cq·2022-01-18 15:35

Flink使用Pod Template将状态快照(Checkpoint、Savepoint)存储在NFS

HDFS作为状态快照（Checkpoint、Savepoint）的存储地址，但是由于仅使用了其HDFS作为状态快照存储地址，且Hadoop框架较重，在k8s集群中占用大量资源，现考虑将其替换为更轻量级的分布式文件系统
另存為·2022-01-16 14:47
上一页 36 37 38 39 40 41 42 43 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他