GFS分布式文件系统

hadoop 3.1.2 安装在 Windows

Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。
droxy·2023-07-05 15:30

Linux虚拟机ens33无法连接问题

今天学习FsatDFS想要在虚拟机搭一个分布式文件系统发现没法连接我的虚拟机，我的虚拟机是centos7net模式进去ifconfig发现没有以往的eth0而是一个ens33的东西并且没有IP我的解决办法是
ch132·2023-06-24 11:03

「分布式技术专题」两种向量化执行引擎的实现方法

高并发场景中，可以把大量的请求合并，改为调用批量接口；大数据下读取分布式文件系统时，如果要读取大量的小文件，可以将这些小文件打成tar包，或者批量一次打开100~500个文件；数据库插入数据时，修改单条插入为批量插入等
国产数据库Hubble·2023-06-24 10:20

【运维这些事儿】- 网络文件系统之NFS

NFS是一种分布式文件系统，通过网络可以将不同操作系统的文件共享。其通信协议定基于TCP/IP协议层，将远程的计算机磁盘挂载到本地，读写文件跟本地磁盘一样。
努力做一名技术·2023-06-24 09:58

【运维知识进阶篇】集群架构-NFS网络文件系统

NFS系统和Windows网络共享、网络驱动器类似，只不过Windows用于局域网，NFS用于企业集群架构中，大型网站会用到更复杂的分布式文件系统FastDFS，glusterfs，HDFS等等。
我是koten·2023-06-24 09:54

FastDFS文件服务器安装配置使用

1.FastDFS架构简介分布式文件系统分布式文件系统(DistributedFileSystem)是一个软件/软件服务器，这个软件可以用来管理文件。
·2023-06-24 03:09

Spark的核心RDD

除可复制的文件系统（HDFS）外没有提供其他存储的概念，这就导致在网络上进行数据复制而增加了大量的消耗，而对于两个的MapReduce作业之间数据共享只有一个办法，就是将其写到一个稳定的外部存储系统，如分布式文件系统
·2023-06-24 03:55

FastDFS-分布式文件存储

FastDFS是一个开源的轻量级分布式文件系统,它对文件进行管理,功能包括:文件存储,文件同步,文件访问(文件上传,文件下载)等,解决了大容量存储和负载均衡的问题,FastDFS为互联网量身定制，充分考虑了冗余备份
Champion_61f4·2023-06-23 13:54

一文详解分布式文件系统FastDFS

1、序FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。
·2023-06-23 10:34

ubuntu20.04无法访问win共享，挂载win共享失败：无效的参数解决办法

/bin/shvmhgfs-fuse.host://mnt/hgfs-oallow_other-ouid=1000-ogid=1000-oumask=022sudochmod777/etc/
道阻且长行则将至！·2023-06-23 06:38

【大数据】大数据期末速通 (四) HBASE

https://www.icourse163.org/course/XMU-1002335004大数据综述处理架构Hadoop分布式文件系统HDFS分布式数据库HBASE简介谷歌以前内部大规模网页搜索使用
gongfpp·2023-06-23 02:16

什么是分布式软件系统

它包括分布式操作系统、分布式程序设计语言及其编译(解释)系统、分布式文件系统和分布式数据库系统等。分布式操作系统负责管理分布式处理系统资源和控制分布式程序运行。它和集中式操作系统的区别在于资源管理、
m0_72864708·2023-06-22 19:47

通过Java实现HDFS操作及访问

①要用Java操作分布式文件系统，首先找到操作文档。②在hadoop官网ApacheHadoop上找到版本列表③进入ApacheHadoop找到对应的版本。
Distantfbc·2023-06-22 08:18

Hadoop Map/Reduce实现细节

在Hadoop中，分布式文件系统，很大程度上，是为各种分布式计算需求所服务的。我们说分布式文件系统就是加了分布式的文件系统，类似的定义推广到
小小哭包·2023-06-22 07:22

dfs.nameservices参数

当在Hadoop集群中配置高可用性（HighAvailability）时，dfs.nameservices参数在Hadoop分布式文件系统（HDFS）中起着重要的作用。
sun13047140038·2023-06-22 00:42

2.4SOC收发芯片 XL2409，集成32位ARM Cortex-M0+内核单片机

该芯片集成了射频接收器、射频发射器、频率综合器、GFSK调制器、GFSK解调器等功能模块，并且支持一对多线网和带ACK的通信模式。发射输出功率、工作频道以及通信数据率均可配置。
深圳市芯岭技术有限公司·2023-06-21 23:22

HPC-CAE应用场景下文件读写IO分析

我们需要分别测试三种条件下文件的写效率：本地文件读写，本地都是SSD设备万兆网络，通过NFS共享方式，A共享文件夹，B作为客户端向文件夹中写文件万兆网络，通过Beegfs分布式存储，A提供存储空间，B作为客户端向存储中写入文件测试工具
wolfwolfgod·2023-06-21 22:31

企业级大数据平台建设参考 淘宝滴滴美团360快手京东

适用于大数据的技术，包括大规模并行处理（MPP）数据库，数据挖掘电网，分布式文件系统，分布式数据库，云计算平台，互联网，和可扩展的存储系统。
jane9872·2023-06-21 09:45

6道常见hadoop面试题及答案解析

总之，Hadoop包括以下内容：  HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）：HDFS允许你以一种分布式和冗余的方式存储大量数据。
入伍击寇·2023-06-21 09:40

Hadoop集成GooseFS报错：hadoop.fs.UnsupportedFileSystemException: No FileSystem for scheme “gfs“

Hadoop集成GooseFS报错：hadoop.fs.UnsupportedFileSystemException:NoFileSystemforscheme"gfs"一、完整报错二、错误原因三、解决方法一
最笨的羊羊·2023-06-21 07:27

VMware虚拟机共享文件夹为空问题解决办法

/bin/bashvmware-hgfsclient|whilereadfolder;doecho"[i]Mounting${folder}(/mnt/hgfs/${folder})"
笨笨的大石头·2023-06-21 04:31

BLE解调

BLE解调前奏如果不太了解IQ、FSK、GFSK的话，可以看上一篇，有一些关于这些内容的东西，写的应该还算好理解点吧，给出了自己学习时候的参考，具体的看他们写的。
北地的树·2023-06-20 14:53

BLE调制与解调的一些东西

BLE调制BLE是GFSK的IQ调制IQ调制所谓IQ调制，就是利用IQ两个分量序列去控制两路正交信号，I和Q两个序列可以是任意数字，也可以是符合某些规律的序列。
北地的树·2023-06-20 14:52

HDFS初认识

Hadoop分布式文件系统（HDFS）是一个分布式文件系统，HDFS与现有的分布式文件系统有许多相似之处。但是，与其他分布式文件系统的差异是很大的。HDFS全称为
WHYBIGDATA·2023-06-20 09:42

Databend 开源周报 第 83 期

SupportforWebHDFSHDFS是大数据生态中流行的分布式文件系统，也是Databend支持的存储后端之一。但要在此前的实现中，如果要访问HD
Databend·2023-06-20 03:45

来聊一聊Zookeeper吧

根据MapReduce，于是我们有了Hadoop；根据GFS，于是我们有HDFS；根据BigTable，于是我们有了HBase。
程序源monster·2023-06-20 01:39

FastDFS总结

目录概述什么是分布式文件系统核心概念目录结构上传机制下载机制Linux中搭建FastDFS常用指令SpringBoot整合FastDFSFastDFS集成Nginx概述FastDFS是一个开源的轻量级分布式文件系统
c_mmmmmmm·2023-06-20 00:27

《大数据分析-Hive》

Hive是大数据（hadoop）生态系统非常重要的一个工具，它提供了一种类SQL的语言，可以查询存储在Hadoop分布式文件系统（HDFS）中的数据，也可以查询Hadoop数据库（Hbase）中的数据，
数据分析杂杂念·2023-06-19 18:53

什么是分布式软件系统

它包括分布式操作系统、分布式程序设计语言及其编译(解释)系统、分布式文件系统和分布式数据库系统等。分布式操作系统负责管理分布式处理系统资源和控制分布式程序运行。它和集中式操作系统的区别在于资源管理、
微服务商城技术分享·2023-06-19 16:57

Spark01-Spark快速上手、运行模式、运行框架、核心概念

1概述Spark和HadoopHadoopHDFS(GFS:TheGoogleFileSystem)MapReduce总结：性能横向扩展变得容易，横向拓展:增加更多的计算节点来扩展系统的处理能力Hbase
:Concerto·2023-06-19 14:49

分布式系统学习第一天 fastDFS框架学习

目录1.项目架构图1.1一些概念1.2项目架构图2.分布式文件系统2.1传统文件系统3.FastDFS3.1fastDFS介绍3.2fastDFS安装3.3fastDFS配置文件3.4fastDFS的启动
没有网名L·2023-06-19 13:28

VMware虚拟机Ubuntu共享文件夹

在选项中点击共享文件夹，启用该功能并配置文件夹路径添加的文件夹就是电脑系统中的文件夹主机路径，比如这里我用的D盘中的ShareVMware文件夹2安装或升级VMwareTools这一步是必不可少的，否则可能会出现找不到hgfs
Mr.zwX·2023-06-19 07:08

6道常见hadoop面试题

总之，Hadoop包括以下内容：  HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）：HDFS允许你以一种分布式和冗余的方式存储大量数据。
红红火火a·2023-06-19 04:20

Ceph分布式存储笔记

文章目录ceph分布式存储存储分类分布式存储分类HadoopHDFS(大数据分布式文件系统)OpenStack的对象存储Swift公有云对象存储GlusterFSGPFS和HDFS的区别Cephcephg
Salute_Lch·2023-06-19 01:54

数据集上传和管理 - FATE v1.8.0

前言实际上，除了直接上传数据文件以外，FATE还支持绑定数据库或是分布式文件系统的数据（tablebinding）具体可以参考fate-flow的官方文档：DataAccess-FATEFlow(federatedai
BiancaZY·2023-06-19 00:50

NFS服务器安装及NFS制备程序安装

NFS服务器安装及NFS制备程序安装NFS服务器安装NFS是一种分布式文件系统协议，由sun公司开发，旨在允许客户端主机可以像访问本地存储一样通过网络访问服务端文件安装NFS服务器登录需要安装NFS服务器的主机执行以下命令完成
炒栗子不加糖·2023-06-18 21:57

Ubuntu设置虚拟机共享目录/mnt/hgfs下无文件显示相关问题归纳

文章目录问题一：/mnt目录下无hgfs文件夹问题二：/mnt/hgfs文件夹为空问题一：/mnt目录下无hgfs文件夹问题背景：在打开共享目录A的时候，突然改变共享目录，也就是从A改到了B，但是资源管理器还是打开的
澄澈i·2023-06-18 10:45

cephfs设置与挂载

ceph文件系统ceph文件系统的名称是cephFS，它是一个POSIX兼容的分布式文件系统，并使用cephRADOS存储数据。
时空无限·2023-06-18 07:09

大数据

HDFS分布式文件系统按块存储支持大规模文件存储简化系统设计数据备份名称节点，整个HDFS集群的管家。
茶尽·2023-06-17 17:28

hadoop基础

org.apache.hadoop.fs.FileSystem文件系统类抽象类//静态方法创建对象publicstaticFileSystemnewInstance(URIuri,Configurationconf,Stringuser)/*参数一URI分布式文件系统
子非我104·2023-06-17 03:52

【服务器数据恢复】OneFS文件系统下误删除文件的数据恢复案例

EMCIsilon存储结构：Isilon群集存储系统使用的是分布式文件系统OneFS。Isilon群集存储系统的每个节点均为单一OneFS文件系统，Isilon在进行横向扩展时不会影响数据的正常使用。
北亚数据恢复·2023-06-16 21:52

OpenHarmony更新编译问题及解决办法

OpenHarmony更新编译问题及解决办法Linux问题没有/hgfsLinux和Windows共享文件夹：/mnt目录下没有/hgfs的解决办法sudoapt-getinstallopen-vm-toolssudomkdir
Three笔记·2023-06-16 18:13

Python + HDF5 因子计算与 DolphinDB 一体化因子计算方案对比

由此，一部分用户选择了分布式文件系统,使用HDF5存储数据，并结合Python进行量化金融计算。
DolphinDB智臾科技·2023-06-16 16:04

【服务器数据恢复】OneFS文件系统下虚拟机数据恢复案例

EMCIsilon存储结构：Isilon群集存储系统使用的是分布式文件系统OneFS。Isilon群集存储系统的每个节点均为单一OneFS文件系统，Isilon在进行横向扩展时不会影响数据的正常使用。
·2023-06-16 15:03

hadoop、hive、hbase的关系

hadoop它是一个分布式计算+分布式文件系统，前者其实就是MapReduce，后者是HDFS。
mengml_smile·2023-06-16 12:49

大数据学习记录（hadoop hive flume azkaban sqoop）

大数据学习记录（hadoophiveflumeazkabansqoop）1.hadoop对海量数据进行分布式处理2.核心组件：HDFS（分布式文件系统）、YARN（运算资源调度系统）、MAPREDUCE
左上晨·2023-06-16 10:58

vmware设置共享文件夹，让普通用户能用

1、vmware软件里设置共享文件夹，然后进到linux里2、执行vmware-hgfsclient，查看设置的共享文件夹的名字3、执行sudovmhgfs-fuse.host://mnt/hgfs-oallow_other
xiaguangbo·2023-06-16 08:50

分布式文件系统HDFS

分布式文件系统HDFS分布式文件系统计算机集群结构分布式文件系统的结构分布式文件系统的设计需求HDFS简介HDFS相关概念块HDFS总体框架HDFSClient名称节点和数据节点名称节点数据节点第二名称节点
so.far_away·2023-06-15 14:34

Hive面试题十道

Hive将结构化数据映射到Hadoop的分布式文件系统（HDFS）上，并通过MapReduce任务执行查询操作。问题2：Hive的主要特性是什么？
MIDSUMMER_yy·2023-06-15 13:31

Hive的概念

Hive概述Hive是一个基于Hadoop的数据仓库系统，它提供了类似与SQL的查询语言HiveQL,可以将结构化数据存储在Hadoop分布式文件系统中，并通过MapReduce进行过处理。
陆卿之·2023-06-15 11:15
上一页 18 19 20 21 22 23 24 25 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他