GFS分布式文件系统

VMWare Workstation pro 中共享文件夹的问题：客户机内找不到共享文件夹

VMWareWorkstationpro中的Linux系统和主机系统共享文件夹的步骤大致是虚拟机设置->选项->共享文件夹->选择总是启用并添加要共享的文件夹，共享的文件夹会出现在虚拟系统的特定位置（Ubuntu的是/mnt/hgfs
EngineerShaw·2023-01-30 19:25

VMware 14 Pro虚拟机Ubuntu14.04与Windows设置共享文件夹

0X01虚拟机设置里添加共享目录0X02安装vmwaretools0X03创建挂载目录/mnt/hgfsmkdir/mnt/hgfs0X04挂载共享文件夹sudoapt-getinstallopen-vm-tools-dkmsvmhgfs-fuse.host
奋斗_小伙·2023-01-30 19:53

VM16共享文件夹设置

虚拟机：VMware16镜像系统：CentOS71.虚拟机设置，选项，共享文件夹，总是启用，添加路径2.虚拟机内的路径是其他位置/计算机/mnt/hgfs最后一个new和新建文件夹就是我共享的文件夹共享的文件夹应该都在
Decline1·2023-01-30 19:39

Nginx 整合 FastDFS 实现文件服务器

上一篇文章《FastDFS分布式文件系统详解》中带大家详细了解了它的核心概念，架构体系及FastDFS环境的搭建与使用。但是此时还无法通过HTTP对文件进行访问，这篇文章将带大家解决这个问题。
哈喽沃德先生·2023-01-30 17:44

部署 Hadoop 高性能集群

HDFS分布式文件系统为海量的数据提供了存储，则MapReduce为海量的数据提供了计算。网方网站：http://hadoop.apache.org/Hado
workey·2023-01-30 15:55

HDFS分布式文件系统—原理与Shell操作

HDFS分布式文件系统—原理与Shell操作文章目录HDFS分布式文件系统—原理与Shell操作一、HDFS简介1.HDFS的基本概念2.HDFS特点二、HDFS架构原理1.HDFS存储架构2.HDFS
小汤TYT·2023-01-30 15:20

HDFS分布式文件系统—Java API操作

HDFS分布式文件系统—JavaAPI操作文章目录HDFS分布式文件系统—JavaAPI操作一、HDFSJavaAPI介绍二、JavaAPI操作1.搭建项目环境2.JavaAPI的相关操作一、HDFSJavaAPI
小汤TYT·2023-01-30 15:20

HDFS基本架构及原理

HDFS概述HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）最开始是作为ApacheNutch搜索引擎项目的基础架构而开发，是ApacheHadoopCore
学无止境_1993·2023-01-30 14:03

序

工作一年多了，一直在断断续续的学习使用Hadoop，它提供的Map和Reduce数据处理引擎能够帮助我们方便的处理大数据集，HDFS分布式文件系统，可以帮助我们冗余的存储大数据集，这么好的一门技术，应该是要好好学习的
勤一·2023-01-30 09:10

Hadoop之浅析HDFS

HDFS全称是HadoopDistributeFileSystem，它是源于Google的GFS思想演变而来，官网是这样介绍的：image.png总结一下就是以下两点：1.HDFS有很高的容错率，并且能够运行在低价或者配置低的硬件之上
键盘走过的日子·2023-01-30 09:10

大数据技术发展史

2004年，整个互联网界还处于懵懂时代，Google发布了三篇论文，分别是分布式文件系统GFS，大数据分布式计算框架MapReduce，分布式存储系统bigTable。
ks宁·2023-01-30 00:17

2019-07-09 Sci hub

1：https://gfsoso.99lb.net/sci-hub.html2：https://sci-hub.shop/3：ht
黑兔大侠客·2023-01-30 00:22

HDFS简介

如果我们将大数据计算比作烹饪，那么数据就是食材，而Hadoop分布式文件系统HDFS就是烧菜的那口大锅。厨师来来往往，食材进进出出，各种菜肴层出不穷，而不变的则是那口大锅。
f192469fc2d5·2023-01-29 23:06

FastDFS配置Nginx访问

FastDFS配置Nginx访问FastDFS分布式文件系统安装和配置_亲测成功下载相关依赖软件包yum-yinstallwgetmakezlibzlib-develgcc-c++libtoolopensslopenssl-develwgethttp
·2023-01-29 21:22

Algorithms - Week 1(1), Part I, Princeton University

常见如网络中的搜索和分布式文件系统，罕见如生物学的人类基因组计划和蛋白质折叠凳问题。算法可以追踪到欧几里得的年代，从1930s开始系统教学
Sisyphus235·2023-01-28 20:46

了解HDFS

分布式文件系统那么多，为什么hadoop项目中还要开发一个hdfs文件系统？HDFS可以更好的支持分布式计算。
心無旁騖丶·2023-01-28 15:21

java基础巩固-宇宙第一AiYWM：为了维持生计，大数据Hadoop之HDFS分布式文件系统（HDFS读写流程、主从集群两种问题“单点故障”及“压力过大内存受限”、HDFS的架构设计）~整起

自己对于上面两种数据持久化技术的实现：4.HDFS读写流程5.HDFS实操步骤及经验记录6.HDFS的主从集群固有问题两种解决方案【“单点故障”以及“压力过大内存受限”两个问题是独立的，之间没啥联系】7.HDFS的本质上就是一个分布式文件系统
AIminminHu·2023-01-28 14:20

JavaEE进阶——FastDFS实现分布式文件系统

FastDFSFastDFS是用c语言编写的一款开源的分布式文件系统。
Mr丶sorrow·2023-01-28 01:39

启动hadoop 2018-09-30

启动hadoop1、格式化HDFS分布式文件系统hadoopnamenode–format启动Hadoopstart-all.sh停止Hadoopstop-all.shjps命令可以看到Hadoop的所有守护进程
bigleft·2023-01-26 22:24

分布式存储系统

分布式存储系统特性可扩展性低成本高性能易用面临的问题数据分布一致性容错负载均衡易用性压缩/解压缩分布式存储分类根据存储的数据类型（非结构化数据、结构化数据、半结构化数据）可以将分布式存储系统分为分布式文件系统
似水之星·2023-01-26 05:40

redis笔记

可扩容，可伸缩高性能高可用灵活数据类型常见NOSQL数据库：redis,mencache,HBase,MongoDB举例电商：商品基本信息：mysql商品附件信息（如商品详细信息）：MongoDB图片：分布式文件系统
李彦林·2023-01-25 10:44

大数据技术原理与应用——大数据存储与管理

大数据技术原理与应用——大数据存储与管理1.分布式文件系统（1）计算机集群结构集群的概念集群是指将多台服务器整合在一起，每台服务器都实现相同的业务，做相同的事情。
linjiayina·2023-01-22 19:07

java rmi 负载均衡_Java RMI 实现一个简单的GFS（谷歌文件系统）——演示与实现篇...

本文主要是使用JavaRMI实现一个简单的GFS(谷歌文件系统，googlefilesystem)，这里提供演示运行视频、系统实现以及源代码相关。大年初二，走亲访友祝大家新年快乐！
沈忘·2023-01-22 13:44

HDFS java api

一、HDFS概述Hadoop分布式文件系统(HDFS)是指被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统（DistributedFileSystem）。
Adele小歌迷·2023-01-20 05:25

数据挖掘和知识发现的技术、方法及应用 --------http://blog.csdn.net/gongfs/archive/2006/03/17/627244.aspx

数据挖掘和知识发现的技术、方法及应用一幅凝固的油画Keywords:datamining，Knowledgediscoveryindatabases，DM，KDD，CRISP－DM，Internet概念基于Internet的全球信息系统的发展使我们拥有了前所未有的丰富数据。大量信息在给人们带来方便的同时也带来了一大堆问题：第一是信息过量，难以消化；第二是信息真假难以辨识；第三是信息安全难以保证；第
ruixj·2023-01-19 09:24

IntelliJ IDEA连接Hadoop集群

求个良心管我留些余地处人相关连接HDFS相关知识Hadoop分布式文件系统（HDFS）快速入门Hadoop分布式文件系统（HDFS）知识梳理（超详细）Hadoop集群连接Eclipse连接Hadoop集群
汉秋_·2023-01-18 17:46

python 之FFT

fromscipy.fftpackimportfftimportmatplotlib.pyplotaspltimportnumpyasnp#NumberofsamplepointsN=600#samplespacingfs
2021乐乐·2023-01-18 08:36

初识Hadoop架构

初识hadoopGoogle的“三驾马车“HDFSYARNMapReduce持续更新…………Google的“三驾马车“GFS即TheGoogleFileSystem，描述了一个分布式文件系统的设计思路。
阿楷不当程序员·2023-01-16 10:47

大数据-Hadoop的介绍、配置和集群的使用

HDFS分布式文件系统分布式：将多台服务器集中在一起，每台服务器都实现总体中的不同业务，做不同的事情单机模式厨房里只有一个人，这个人既要买菜，又要切菜，还要炒菜，效率低。
海星？海欣！·2023-01-16 06:59

大数据简单概述

适用于大数据的技术，包括大规模并行处理（MPP）数据库，数据挖掘电网，分布式文件系统，分布式文件数据库，云计算平台，互联网，和可扩展的存储系统。大数据主要解决的问题是：采集，存储，处理。
不想当大神的小白不是好菜鸟·2023-01-14 22:17

CVPR 2022：Generalized Few-shot Semantic Segmentation 解读

文章目录1前言2概述3GFS-Seg和FS-Seg的Pipeline区别4TowardsGFS-Seg5上下文感知原型学习（CAPL）6实验7结论8参考链接1前言之前已经有过关于小样本语义分割的论文解读
李响Superb·2023-01-14 15:51

MinIO分布式专题（第一章、一文教你搭建MinIO单机版）

目录1、分布式文件系统应用场景1.1、MinIO介绍1.2、MinIO基础概念1.3、纠删码2、MinIO环境搭建2.1、单机部署3、Springboot集成MinIO基础
风清扬逍遥子·2023-01-14 07:46

一步步教你Hadoop多节点集群安装配置

以Hadoop分布式文件系统HDFS(HadoopDistributedFilesystem）和MapReduce（GoogleMapReduce的开源实现）为核心的Hadoop为用户
langwuzhe·2023-01-13 09:04

Linux内核vmap函数,Linux 4.16 Binder驱动学习笔记--------接口简析

initbinder_init(void)binder设备初始化过程可以简化为如下步骤:1.初始化binder缓冲区分配ret=binder_alloc_shrinker_init();2.创建binder相关目录debugfs_create_dir
weixin_39588265·2023-01-13 07:58

Linux VFS机制简析（一）

LinuxVFS机制简析（一）本文主要基于Linux内核文档，简单分析LinuxVFS机制，以期对编写新的内核文件系统（通常是给分布式文件系统编写内核客户端）的场景有所帮助。
普通网友·2023-01-13 07:58

大数据核心框架Hadoop

Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。HDFS有容错性的特点，并且设计用来部署在低廉的
爱吃香菜的斌斌·2023-01-12 21:36

大数据 hadoop

HADOOP1.HADOOP是apache旗下的一套开源软件平台2.HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理3.HADOOP的核心组件有A.HDFS（分布式文件系统
DHRJFH·2023-01-12 21:33

学习笔记--文件夹处理--代码学习

张同为.jpeg扩展名的图片img_ids=glob(os.path.join('image','*'+"jpeg"))print("img_ids",img_ids)输出结果['image\\1fregfsf2
free_luojing·2023-01-11 20:09

杂项知识

挂载.img文件mount-tproc-oloopinitrd-2.6.23.1-42.fc8.img/mnt/imgmount-tdebugfs-oloopinitrd-2.6.23.1-42.fc8
俄罗斯方块高手·2023-01-11 20:08

【机器学习】分布式机器学习原理及实战(Pyspark)

自2003年Google公布了3篇大数据奠基性论文，为大数据存储及分布式处理的核心问题提供了思路：非结构化文件分布式存储（GFS）、分布式计算（MapReduce）及结构化数据存储（BigT
风度78·2023-01-11 19:15

HBase学习笔记

HDFS来源Google的GFSMapReduce来源Google的MapReduceHBase来源Go
LvJinYang·2023-01-11 15:12

东北大学2023分布式操作系统实验

2.Hadoop简介2.1Hadoop项目基础结构在其核心，Hadoop主要有两个层次，即：加工/计算层(MapReduce)存储层(Hadoop分布式文件系统)除了上面提到的两个核心组件，Hadoop
加油呀，哒哒哒·2023-01-10 10:48

Tensorflow之TFRecord的原理和使用心得

目前，越来越多的互联网公司内部都有自己的一套框架去训练模型，而模型训练时需要的数据则都保存在分布式文件系统（HDFS）上。
程序员对白·2023-01-10 08:47

mount: wrong fs type, bad option, bad superblock

Linux挂载磁盘报如下错误：mount:wrongfstype,badoption,badsuperblockon192.168.0.68:/mnt,missingcodepageorhelperprogram
小伟db·2023-01-09 19:29

分布式存储综述与方案选型

文章目录引言基本诉求存储选型考虑的要素分布式存储的野蛮生长史主要开源选型GFS(GoogleFileSystem)HDFS(HadoopDistributedFileSystem)miniocephTFSSwiftfastDFSGridFSMooseFSGlusterFSMogileFS
北极象·2023-01-08 11:40

520页（17万字）集团大数据平台整体解决方案-v1.0

完整资料领取见文末，部分资料内容：1.1.1 系统总体逻辑结构4-14系统总体逻辑结构图参见上图，基于Hadoop构建的企业级数据仓库，包含：分布式列式存储数据库Hyperbase和分布式文件系统
数字化方案·2023-01-08 07:52

python txt转换成excel_Python读取txt文件并转换为excel

":1}],"search_count":[{"count_phone":4,"count":4}]},"card":[{"des":"阿里云文件存储NAS是一个可共享访问，弹性扩展，高可靠，高性能的分布式文件系统
danzhou-dennis·2023-01-07 15:09

ubuntu 18共享文件夹不显示问题解决

Ubuntu18.04共享文件夹不显示遇到了一个问题：共享文件夹已设置好也可以正常使用，但是重新启动Ubuntu以后输入命令:cd/mnt/hgfs/ls发现没有出现共享文件夹检查了虚拟机设置的共享文件夹发现是已启用的状态并没有问题使用了网上很多方法
七七库咪呀·2023-01-05 15:25

tensorflow保存内容到相对文件路径下_如何添加自定义文件系统插件

这个共享文件系统具有诸多用途，例如：状态检查点通常会保存到分布式文件系统中，以实现可靠性和容错能力训练流程
weixin_39889544·2023-01-03 19:22

FastDFS配置Nginx访问

FastDFS配置Nginx访问FastDFS分布式文件系统安装和配置_亲测成功下载相关依赖软件包yum-yinstallwgetmakezlibzlib-develgcc-c++libtoolopensslopenssl-develwgethttp
·2023-01-01 22:40
上一页 30 31 32 33 34 35 36 37 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他