hdfshadoop

Hadoop精选18道面试题(附回答思路)

2.简述HDFSHadoop分布式文件
Byyyi耀·2024-01-08 06:00

HDFS介绍+Shell操作

看黑马网课记录第二章-wwww操]使用命令操作HDFS文件系统_哔哩哔哩_bilibiliHDFS1.什么是HDFShadoop三大组件之一，负责海量数据的分布式存储2.HDFS架构角色：主节点（领导）
Y蓝田大海·2023-12-17 10:14

了解Apache跟Apache Hadoop和Apache Spark的原理，应用；

HDFSHadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。HDFS有高容错性的特点，并且设
lwh_python·2023-09-02 08:38

Hadoop -HDFS常用操作指令

1.启动HDFShadoop/sbin/start-dfs.sh2.关闭HDFShadoop/sbin/stop-dfs.sh3.在HDFS中创建文件夹#老版本hadoopfs-mkdir-ppath#
是杨杨呀·2023-09-02 07:32

大数据面试题全面总结（范围广超详细）

Hadoop面试题总结Hadoop面试题（一）Hadoop面试题总结（二）——HDFSHadoop面试题总结（三）——MapReduceHadoop面试题（四）——YARNHadoop面试题总结（五）—
蓦然_·2023-08-15 01:06

hadoop集群基础配置

hadoop1.0mapreduce+HDFShadoop2.0mapreduce+HDFS+YARN加入YARN使得hadoop更加包容，其他的组件也可以在hadoop生态系统中运行hadoop3.0HDFS
February13·2023-04-21 13:11

使用 Docker 搭建 Hadoop 集群 和 Spark On Yarn

本文仅作搭建介绍，方便本地搭建起来进行测试而用镜像选择选择uhopper定制的一系列hadoop生态镜像来搭建docker集群，这些镜像具体包括:hdfshadoop-namenodehadoop-datanodeyarnhadoop-resourcemanagerhadoop-nodemanagersparkhadoop-spark
枫叶_Jeffrey·2023-04-20 08:20

Hadoop源码分析笔记(五)：HDFS特点和体系结构

HDFSHadoop是一个能够让用户轻松架构和使用的分布式计算平台，用户可以在Hadoop上管理、开发和运行处理大规模数据的应用，其中，Hadoop分布式文件系统(HadoopDistributedFileSystem
剑邑龙泉·2023-04-02 06:21

使用JAVA-API访问开启kerberos集群下的HDFS

使用API访问开启安全Kerberos的Hdfshadoop集群(cdh集群)在开启kerberos安全认证方式后，通常如果在集群shell客户端通过hadoopdfs命令访问的，经过kinit登录kerberos
__元昊__·2023-03-11 03:48

hadoop所需要的各个版本的jar包下载站点

hadoop-hdfs-2.7.7.jar**对于Hadoop1.x.x版本，只需要引入1个jar：hadoop-core对于Hadoop2.x.x版本，需要引入4个jar：hadoop-commonhadoop-hdfshadoop-mapreduce-client-corehadoop-clientjdk.tools
翟梁举·2023-03-09 10:38

Hadoop之HDFS实用篇

系列文章目录Hadoop了解篇Hadoop之HDFSHadoop之MapReduceHadoop之YarnHadoop之优化&新特性文章目录系列文章目录前言一、HDFS是什么？
亿旅·2022-11-29 17:35

Hadoop 生态系列之 HDFS

目前Hadoop系列文章的规划就是这样，持续补充完善中...同时可以访问：data.cuteximi.comHadoop生态系列之1.0和2.0架构Hadoop生态系列之HDFSHadoop生态系列之MapreduceHadoop
weixin_33896069·2022-06-20 13:08

《十小时入门大数据》学习笔记之HDFS

笔记目录HDFS概述及设计目标HDFS架构HDFS副本机制HDFS环境搭建HDFSshellJavaAPI操作HDFSHDFS文件读写流程HDFS优缺点1.HDFS概述及设计目标1.1什么是HDFSHadoop
初晴H·2021-06-10 01:23

HDFS命令篇

HDFSHadoop查看文件系统hdfsdfslsFound8itemsdrwxrwxrwx-yarnhadoop02016-09-0104:00/app-logsdrwxr-xr-x-hdfshdfs02016
hikaty·2021-05-05 07:42

HDFS

2.HDFSHadoop2.0以后的版本移除了原有的JobTracker和TaskTracker，改由YarnResourceManager负责集群中所有资源的统一管理和分配，NodeManager管理单个计算结点系统架构
SteveJohnson·2021-02-06 12:55

HDFS、Ceph、GFS、GPFS、Swift、Lustre

1)HDFSHadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有
redfivehit·2020-09-12 20:50

Hadoop与Spark基本原理

HadoopSparkSpark和Hadoop区别和联系Hadoop的HDFSHadoop的MapReduceSpark宽依赖和窄依赖SparkRDD运行过程SparkRDD阶段划分HadoopHadoop
宁缺100·2020-09-12 09:44

dubbo2.5-spring4-mybastis3.2-springmvc4-mongodb3.4-redis3.2整合（八）SpringMVC上传文件到FastDFS

HDFSHadoop
请叫我东子·2020-08-24 16:22

hadoop相关知识汇总

MapReduce特性YARN（YetAnotherResourceNegotiator）YARN基本架构Hadoop2.x特性HDFSFederationNameNodeHAHDFS快照通过NFSv3访问HDFShadoop3
林里灰羊·2020-08-22 16:52

hdfs hadoop上删除非空目录方法

hdfshadoop上删除非空目录方法删除hdfs根目录上/hbase重新进行安装操作hadoop3@master~]$hdfsdfs-rm-r-f/hbase18/08/1714:20:20INFOfs.TrashPolicyDefault
hsg77·2020-08-14 17:41

【Hadoop需要的Jar包】Hadoop编程-pom.xml文件

Hadoop2.6以及之前的版本，支持JDK6；对于Hadoop1.x.x版本，只需要引入1个jar：hadoop-core对于Hadoop2.x.x版本，需要引入4个jar：hadoop-commonhadoop-hdfshadoop-mapreduce-client-corehadoop-clientjdk.tools
weixin_33875839·2020-08-11 23:50

hadoop框架下各类软件介绍

HDFSHadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。
shanesu·2020-08-01 09:39

hadoop框架下的软件介绍

HDFSHadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。
疯狂皮卡丘·2020-08-01 09:01

linux下根据进程号PID查找程序路径

00:23:16HwChrDecode2、进入/proc相应进程PID的文件夹#cd/proc/27939#ls–ail可以看到对应的程序路径ls-ail总计01831010306dr-xr-xr-x5hdfshadoop003
fjssharpsword·2020-07-30 08:53

[CDH5] Disable Kerberos

操作系统：CentOS7.3ClouderaManager:5.13.1CDH:5.13.1CDH5.13禁用Kerberos1.停止集群2.修改配置参数HDFShadoop.security.authentication
cindysz110·2020-07-30 02:23

CDH 禁用 Kerberos

CDH禁用Kerberos直接在CDHmanger页面更改，重启即可HDFShadoop.security.authentication->simplehadoop.security.authorization
大大大大大大太阳·2020-07-29 23:40

HDFS、Ceph、GFS、GPFS、Swift、Lustre

1)HDFSHadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有
mydriverc2·2020-07-29 21:40

Big Data Management笔记01：Hadoop & HDFS

BigDataManagement笔记01：Hadoop&HDFSHadoop介绍Hadoop的特点Hadoop的优点Hadoop结构（Architecture）HDFS介绍HDFS结构NameNodeDataNodeSecondaryNameNode
MYJace·2020-07-27 16:45

hadoop搭建和笔记

提升速度的关键分布式运行计算与数据在一起存+算（文件切割的规范管理）计算向数据移动Netmusiclog、有限电视分布式分而治之：并行计算计算向数据移动需要管理、规范化操作Hadoop简介Hadoop分布式文件系统HDFSHadoop
为何而努力·2020-07-27 11:53

简单介绍

hadoop是什么hadoop是一个由Apache基金会所开发的分布式系统基础框架hadoop实现了一个分布式文件系统，hdfshadoop实现了一个分布式计算系统，mapreducehadoop实现了一个资源管理系统
ifeelok0319·2020-07-14 02:36

Hadoop生态系统功能组件，主要包括哪些？

HDFSHadoop分布式文件系统是Hadoop项目的两大核心之一，是针对谷歌文件系统（GoogleFileSystem,GFS)的开源实现。
人工智能爱好者·2020-07-12 20:47

HDFS的认识

什么是HDFSHadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。
zzz1197802393·2020-06-30 21:00

分布式文件系统-HDFS

HDFSHadoop的核心就是HDFS与MapReduce。那么HDFS又是基于GFS的设计理念搞出来的。HDFS全称是HadoopDistributedSystem。
weixin_34289744·2020-06-28 16:20

Spark开发指南

1、名词及术语术语说明术语说明HDFSHadoop分布式文件系统Hive基于Hadoop的数据仓库工具Yarn资源管理器RDD弹性分布式数据集PartitionRDD的数据分区，可并行计算NarrowDependency
辉格食品·2020-06-23 04:55

分布式文件系统HDFS

缺点:文件不管有多大都存储在一个节点上，在进行数据处理的时候很难进行并行处理，节点可能就称为网络瓶颈，很难进行大数据处理；存储负载很难均衡，每个节点的利用率很低；1.HDFS概述及设计目标什么是HDFSHadoop
何以畅闲情·2020-02-27 07:47

Hadoop 生态系列之 MapReduce

目前Hadoop系列文章的规划就是这样，持续补充完善中...同时可以访问https://data.cuteximi.comHadoop生态系列之1.0和2.0架构Hadoop生态系列之HDFSHadoop
cuteximi_1995·2020-01-07 05:02

1. Hadoop之旅——环境生态篇

HDFShadoop的基础分布式文件存储系统，分为NameNode和DataNode.NameNode负责存储文件系统的metadata，管理DataNode的数据存储和数据安全DataNode负责存储数据文件对应配置文件
zoyanhui·2019-12-31 00:30

大数据学习文章整理

HadoopHadoop（一）——启动与基本使用Hadoop（二）——HDFSHadoop（三）——YARNHadoop（四）——MapReduceHadoop（五）——HDFSNameNode、DataNode
CoffeJoy·2019-12-28 17:00

大数据：Hadoop2.0---HDFS介绍

HDFSHadoop建议存储大文件，如果是大量的小文件，会消耗大量内存。
JinChao94·2019-09-15 22:54

Hadoop简介

基金会旗下的一个分布式系统基础架构.主要包括:分布式文件系统HDFS,分布式资源管理系统Yarn.可以使得用户在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的分布式能力进行运算和存储Hadoop核心构成分布式文件系统HDFSHadoop
BirdieGarden·2019-08-28 17:00

Hadoop简介

基金会旗下的一个分布式系统基础架构.主要包括:分布式文件系统HDFS,分布式资源管理系统Yarn.可以使得用户在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的分布式能力进行运算和存储Hadoop核心构成分布式文件系统HDFSHadoop
SmallBird_·2019-08-28 16:09

Hadoop集群搭建-05安装配置YARN

Hadoop集群搭建-04安装配置HDFSHadoop集群搭建-03编译安装hadoopHadoop集群搭建-02安装配置ZookeeperHadoop集群搭建-01前期准备先保证集群5台虚拟机,nn1nn2s1s2s3hadoop
finch_xu·2019-07-24 16:00

Hadoop集群搭建-04安装配置HDFS

Hadoop集群搭建-05安装配置YARNHadoop集群搭建-04安装配置HDFSHadoop集群搭建-03编译安装hadoopHadoop集群搭建-02安装配置ZookeeperHadoop集群搭建
finch_xu·2019-07-24 16:00

Hadoop集群搭建-03编译安装hadoop

Hadoop集群搭建-05安装配置YARNHadoop集群搭建-04安装配置HDFSHadoop集群搭建-03编译安装hadoopHadoop集群搭建-02安装配置ZookeeperHadoop集群搭建
finch_xu·2019-07-24 16:00

Hadoop集群搭建-02安装配置Zookeeper

Hadoop集群搭建-05安装配置YARNHadoop集群搭建-04安装配置HDFSHadoop集群搭建-03编译安装hadoopHadoop集群搭建-02安装配置ZookeeperHadoop集群搭建
finch_xu·2019-07-24 16:00

Hadoop集群搭建-01前期准备

Hadoop集群搭建-05安装配置YARNHadoop集群搭建-04安装配置HDFSHadoop集群搭建-03编译安装hadoopHadoop集群搭建-02安装配置ZookeeperHadoop集群搭建
finch_xu·2019-07-24 16:00

Hadoop集群搭建-05安装配置YARN

原文链接：https://my.oschina.net/finchxu/blog/3077570Hadoop集群搭建-04安装配置HDFSHadoop集群搭建-03编译安装hadoopHadoop集群搭建
chj5213·2019-07-23 00:00

Hadoop集群搭建-04安装配置HDFS

原文链接：https://my.oschina.net/finchxu/blog/3077481Hadoop集群搭建-05安装配置YARNHadoop集群搭建-04安装配置HDFSHadoop集群搭建-
chj5213·2019-07-22 17:00

Hadoop集群搭建-03编译安装hadoop

原文链接：https://my.oschina.net/finchxu/blog/3077378Hadoop集群搭建-05安装配置YARNHadoop集群搭建-04安装配置HDFSHadoop集群搭建-
chj5213·2019-07-22 15:00

Hadoop集群搭建-02安装配置Zookeeper

原文链接：https://my.oschina.net/finchxu/blog/3077019Hadoop集群搭建-05安装配置YARNHadoop集群搭建-04安装配置HDFSHadoop集群搭建-
chj5213·2019-07-21 20:00
上一页 1 2 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他