hdfs-site.xml

Hadoop 增加Journal Node 或者 维护Journal Node问题

以hadoop用户执行以下操作:1.修改etc/hadoop/hdfs-site.xml,在dfs.namenode.shared.edits.dir配置项中增加相应的新的journal的地址和端口.2
houzhizhen·2015-05-27 16:00

Hadoop hdfs-site.xml文件常用配置

       name  value Description  dfs.default.chunk.view.size 32768 namenode的http访问页面中针对每个文件的内容显示大小，通常无需设置。 dfs.datanode.du.reserved 1073741824 每块磁盘所保留的空间大小，需要设置一些
mvplee·2015-05-27 14:00

Eclipse下Hadoop的MapReduce开发之eclipse配置

打开hadoop文件目录，找到etc/hadoop/下的hdfs-site.xml,增加如下配置来关闭
尚浩宇·2015-05-27 13:00

cui-----Hadoop动态添加删除datanode及tasktracker【需要整理】

1、删除datanode修改namenode上的hdfs-site.xml[pla
buster2014·2015-05-27 09:00

Hadoop集群的NameNode的备份

节点存储着HDFS上所有文件和目录的元数据信息如果NameNode挂了，也就意味着整个Hadoop集群也就完了所以，NameNode节点的备份很重要，可以从以下2个方面来备份NameNode节点1.在hdfs-site.xml
01wang·2015-05-26 16:11

Hadoop集群的NameNode的备份

节点存储着HDFS上所有文件和目录的元数据信息如果NameNode挂了，也就意味着整个Hadoop集群也就完了所以，NameNode节点的备份很重要，可以从以下2个方面来备份NameNode节点1.在hdfs-site.xml
01wang·2015-05-26 16:11

Hadoop集群的NameNode的备份

节点存储着HDFS上所有文件和目录的元数据信息如果NameNode挂了，也就意味着整个Hadoop集群也就完了所以，NameNode节点的备份很重要，可以从以下2个方面来备份NameNode节点1.在hdfs-site.xml
01wang·2015-05-26 16:11

Hadoop删除节点

1.集群配置 修改conf/hdfs-site.xml文件 dfs.hosts.exclude /data/soft/hadoop/conf/excludes Names a file that contains
01wang·2015-05-21 10:32

Hadoop删除节点

1.集群配置 修改conf/hdfs-site.xml文件 dfs.hosts.exclude /data/soft/hadoop/conf/excludes Names a file that contains
01wang·2015-05-21 10:32

在Windows上使用Eclipse配置Hadoop MapReduce开发环境

windows8.164bitEclipse(Version:LunaRelease4.4.0)hadoop-eclipse-plugin-2.7.0.jarhadoop.dll&winutils.exe2.修改Master节点的hdfs-site.xml
yew1eb·2015-05-19 15:00

hadoop namenode格式化问题汇总

1)hdfs-site.xml配置如下：dfs.nameserviceshacluniqueidentifiersforeachNameNodeinthenameservice.
cheungmine·2015-05-16 11:01

hadoop namenode格式化问题汇总

1)hdfs-site.xml配置如下： dfs.nameservices hacl uniqueidentifiersforeachNameNodeinthename
cheungmine·2015-05-16 11:00

hadoop2.6.0配置模板

hadoop2.6.0配置模板core-site.xml hadoop.tmp.dir /home/hadoop/hadoop/tmp fs.defaultFS hdfs://master:9000 hdfs-site.xml
寒翼·2015-05-14 16:00

hadoop集群默认配置和常用配置

获取默认配置 配置hadoop，主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文 件，默认下来，这些配置文件都是空的，所以很难知道这些配置文件有哪些配置可以生效
hunan84229247·2015-05-08 17:00

hadoop2.2.0目录结构

最基本的管理脚本和使用脚本所在目录，这些脚本是sbin目录下管理脚本的基础实现，用户可以用这些脚本管理和使用hadoop 三.etc目录hadoop配置文件所在的目录，包括core-site.xml、hdfs-site.xml
eksliang·2015-05-07 16:00

hadoop2.2.0目录结构

最基本的管理脚本和使用脚本所在目录，这些脚本是sbin目录下管理脚本的基础实现，用户可以用这些脚本管理和使用hadoop 三.etc目录hadoop配置文件所在的目录，包括core-site.xml、hdfs-site.xml
eksliang·2015-05-07 16:00

hadoop(八) - hbase集群环境搭建

bin.tar.gz2.解压tar-zxvf hbase-0.96.2-hadoop2-bin.tar.gz-C/cloud3.配置hbase集群，要修改3个文件（首先zk集群已经安装好了）注意：要把hadoop的hdfs-site.xml
kt431128·2015-04-27 17:00

HBASE安装

 HBASE安装进入shell命令目录HBASE安装进入shell命令    1一.HBASE的安装    31.首先修改hadood配置文件中hdfs-site.xml的配置    32.重启hadoop
zzlzzh·2015-04-14 17:00

HBASE 安装、shell脚本命令进…

HBASE安装进入shell命令一.HBASE的安装1.首先修改hadood配置文件中hdfs-site.xml的配置vihdfs-site.xml修改内容如下：dfs.support.appendtruedfs.datanode.max.xcievers40962
zzlzzh·2015-04-14 17:00

hadoop2.6.0 dfs.blocksize

在hdfs-site.xml中配置了dfs.blocksize的大小，那么通过命令行上传至HDFS的文件就按照dfs.blocksize的大小进行分块。
caiandyong·2015-04-12 21:00

hdfs-site.xml参数详解

     name  value Description  dfs.default.chunk.view.size 32768 namenode的http访问页面中针对每个文件的内容显示大小，通常无需设置。 dfs.datanode.du.reserved 1073741824 每块磁盘所保留的空间大小，需要设置一些，主要是给非
chengjianxiaoxue·2015-04-10 10:00

hadoop端口号列表

fs.default.namenamenode RPC交互端口8020core-site.xmlhdfs://master:8020/dfs.http.address NameNode web管理端口50070 hdfs-site.xml
liuxiao723846·2015-04-09 22:00

eclipse 下安装hadoop2.5.2插件

一.hadoop集群环境配置(完整配置参考上一篇博客) 1.在master节点上(master)修改hdfs-site.xml加上以下内容  dfs.permissions false  旨在取消权限检查
eksliang·2015-04-03 09:00

eclipse 下安装hadoop2.5.2插件

一.hadoop集群环境配置(完整配置参考上一篇博客) 1.在master节点上(master)修改hdfs-site.xml加上以下内容  dfs.permissions false  旨在取消权限检查
eksliang·2015-04-03 09:00

hadoop 2.4.1 secondaryNameNode 配置及启动：

在hdfs-site.xml中增加以下内容： dfs.namenode.checkpoint.dir file:///home/hadoop/namesecondary/checkpoint dfs.namenode.chec
zhoujj303030·2015-04-02 16:00

hadoop HDFS原理 解析

SencondaryNameNode数据存储细节NameNode目录结构Namenode的目录结构：${dfs.name.dir}/current/VERSION/edits/fsimage/fstimedfs.name.dir是hdfs-site.xml
白菜青萝卜·2015-03-31 15:55

hadoop 平衡空间设置方法

在hdfs-site.xml中增加设置balance的带宽，默认只有1M： <property>   <name>dfs.balance.bandwidthPerSec
daizj·2015-03-25 20:00

hadoop dfs.datanode.du.reserved 预留空间配置方法

对于datanode配置预留空间的方法为：在hdfs-site.xml添加如下配置dfs.datanode.du.reserved10737418240dfs.datanode.du.reserved的单位为字节
duncandai·2015-03-25 11:29

hadoop dfs.datanode.du.reserved 预留空间配置方法

对于datanode配置预留空间的方法为：在hdfs-site.xml添加如下配置dfs.datanode.du.reserved10737418240dfs.datanode.du.reserved的单位为字节
duncandai·2015-03-25 11:29

hadoop dfs.datanode.du.reserved 预留空间配置方法

对于datanode配置预留空间的方法 为：在hdfs-site.xml添加如下配置  <property>     <name>dfs.datanode.du.reserved
daizj·2015-03-25 11:00

hbase集群安装和shell操作

1.上传hbase安装包2.解压3.配置hbase集群，要修改3个文件（首先zk集群已经安装好了）注意：要把hadoop的hdfs-site.xml和core-site.xml放到hbase/conf下让
qq1010885678·2015-03-24 19:00

鼓捣了好几天hadoop2.2集群（关于节点删除+ssh免密码登陆）

1.节点删除1）修改conf/hdfs-site.xml文件，excludes文件的目录。
jade_liucui·2015-03-23 13:00

hadoop集群默认配置和常用配置

hadoop集群默认配置和常用配置获取默认配置配置hadoop，主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件，默认下来，这些配置文件都是空的
javastart·2015-03-12 13:00

【Hadoop基础教程】2、Hadoop之单机模式搭建

单机模式所需要的系统资源是最少的，这种安装模式下，Hadoop的core-site.xml、mapred-site.xml、hdfs-site.xml配置文件均为空。
a13429921973·2015-03-05 18:00

【Hadoop基础教程】3、Hadoop之伪分布式环境搭建

以hadoop用户远程登录K-Master服务器，在单机模式安装的基础上，我们增加对core-site.xml、hdfs-site.xml、mapred-site.xml核心文件的配置步骤。
a13429921973·2015-03-05 18:00

hadoop-1.2.1集群配置搭建

路径加进path里面去：vim /etc/profile source /etc/profile下面6个配置文件：2.1配置hadoop-env.sh： 2.2配置core-site.xml： 2.3配置hdfs-site.xml
baolibin528·2015-02-03 13:00

hadoop参数配置详解

一、配置文件介绍在hadoop集群中，需要配置的文件主要包括四个，分别是core-site.xml、hdfs-site.xml、mapred-site.xml和yarn-site.xml，这四个文件分
likaiwalkman_Victor·2015-01-27 14:08

.* hdfs-site.xml 配置说明

    dfs.cluster.administrators  hdfs     dfs.block.access.token.enable  true     dfs.datanode.failed.volumes.tolerated  0     dfs.replication.max  50     dfs.datanode.du.reserved  1073741824     dfs.b
shenxiaoming77·2015-01-20 17:00

hbase-0.96.2 集群安装

bin.tar.gz2.解压tar-zxvfhbase-0.96.2-hadoop2-bin.tar.gz-Capp/3.配置hbase集群，要修改3个文件（首先zk集群已经安装好了）3.1要把hadoop的hdfs-site.xml
·2015-01-16 14:00

hadoop hdfs dfsadmin 介绍

一、hdfsdfsadmin-safemode安全模式 NameNode在启动的时候首先进入安全模式，如果datanode丢失的block达到一定的比例（由hdfs-site.xml文件中dfs.safemode.threshold.pct
·2015-01-11 14:00

hadoop等配置文件核心部分简介

Hadoop配置•hdfs-site.xml文件配置(主要配置参数)–dfs.nameservices(指定了集群服务名称)–dfs.ha.namenodes.drmcluster(用于namenodeHA
yinkaipeng·2015-01-11 10:00

【转】Hadoop集群的NameNode的备份

节点存储着HDFS上所有文件和目录的元数据信息如果NameNode挂了，也就意味着整个Hadoop集群也就完了所以，NameNode节点的备份很重要，可以从以下2个方面来备份NameNode节点1.在hdfs-site.xml
array020·2015-01-04 16:09

【转】hadoop 添加删除datanode及tasktracker

1、删除datanode修改namenode上的hdfs-site.xml dfs.hosts /usr/local/ha
damacheng·2015-01-04 16:00

【转】Hadoop集群的NameNode的备份

节点存储着HDFS上所有文件和目录的元数据信息如果NameNode挂了，也就意味着整个Hadoop集群也就完了所以，NameNode节点的备份很重要，可以从以下2个方面来备份NameNode节点1.在hdfs-site.xml
damacheng·2015-01-04 16:00

关于hadoop 1.2.1版本不支持“dfs.support.append”参数的解决办法

最近在测试hadoop+fluentd方案，但是fluentd日志收集系统，需要append功能选择，写日志到HDFS中，官方给出的解决方案是：修改hdfs-site.xml文件,增加如下行：   dfs.webhdfs.enabled
shine_forever·2014-12-25 11:13

关于hadoop 1.2.1版本不支持“dfs.support.append”参数的解决办法

最近在测试hadoop+fluentd方案，但是fluentd日志收集系统，需要append功能选择，写日志到HDFS中，官方给出的解决方案是：修改hdfs-site.xml文件,增加如下行：   dfs.webhdfs.enabled
shine_forever·2014-12-25 11:13

关于hadoop 1.2.1版本不支持“dfs.support.append”参数的解决办法

最近在测试hadoop+fluentd方案，但是fluentd日志收集系统，需要append功能选择，写日志到HDFS中，官方给出的解决方案是：修改hdfs-site.xml文件,增加如下行：  dfs.webhdfs.enabled
shine_forever·2014-12-25 11:13

Hadoop伪分布模式配置部署

二、Hadoop伪分布式模式配置本实验需要按照上一节单机模式部署后继续进行操作1.配置core-site.xml,hdfs-site.xml，mapred-site.xml及yarn-site.xml1
Valar_Morghulis·2014-12-23 21:48

window8下HDFS权限问题

1、修改hadoop的配置文件hdfs-site.xml，添加配置，取消权限限制dfs.permissionsfalse重启下hadoop的进程生效2、修改HDFS的目录权限$.
AShang_BigData·2014-12-13 20:00

Hadoop小兵笔记【一】Hadoop安装过程中core-site.xml,hdfs-site.xml,mapred-site.xml配置文件详解

hadoop进行配置，其中Hadoop1.x的配置文件放在{hadoop_home}/conf目录下，Hadoop2.x的配置文件放在{hadoop_home}/etc目录下，主要有core-site.xml,hdfs-site.xml
cafuc46wingw·2014-12-09 20:00
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他