E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hdfs命令
HDFS命令
行操作
启动后可通过命令行使用hadoop。 (1)所有命令 (先将$HADOOP_HOME/bin加入到.bashrc的$PATH变量中) [html] view plain copy [hadoop@node14 hadoop-0.21.0]$ ll $HADOOP_HOME/bin to
·
2015-11-11 14:00
hdfs
Hadoop操作hdfs的命令
Hadoop操作
HDFS命令
如下所示: hadoop fs 查看Hadoop HDFS支持的所有命令 hadoop fs –ls 列出目录及文件信息
·
2015-11-11 09:11
hadoop
hadoop2.5.2学习及实践笔记(四)—— namenode启动过程源码概览
再对本文进行补充 >实现类 HDFS启动脚本为$HADOOP_HOME/sbin/start-dfs.sh,查看start-dfs.sh可以看出,namenode是通过bin/
hdfs
·
2015-11-11 00:50
NameNode
HDFS 常用文件操作命令
前言
HDFS命令
基本格式:hadoopfs-cmdls命令hadoopfs-ls/列出hdfs文件系统根目录下的目录和文件hadoopfs-ls-R/列出hdfs文件系统所有的目录和文件put命令hadoopfs-puthdfsfile
白 杨
·
2015-11-01 19:01
hadoop
hdfs
文件系统
文件操作
Spark
&&
Hadoop
HDFS 常用文件操作命令
前言
HDFS命令
基本格式:hadoopfs-cmdls命令hadoopfs-ls/ 列出hdfs文件系统根目录下的目录和文件hadoopfs-ls-R/ 列出hdfs文件系统所有的目录和文件put命令hadoopfs-put
ZCF1002797280
·
2015-11-01 19:00
hadoop
hdfs
文件操作
文件系统
hadoop
hdfs命令
命令基本格式:hadoop fs/dfs -cmd 1.lshadoop fs -ls /列出hdfs文件系统根目录下的目录和文件hadoop fs -ls -R /列出hdfs文件系统所有的目录和文件2.puthadoop fs -put hdfsfile的父目录一定要存在,否则命令不会执行hadoop fs -put ...hdfsdir一定要存在,否则命令不会执行hadoop fs -
向往宇宙
·
2015-10-14 11:37
hadoop
hdfs命令
hadoop
hadoop
hdfs命令
命令基本格式:hadoop fs/dfs -cmd 1.lshadoop fs -ls /列出hdfs文件系统根目录下的目录和文件hadoop fs -ls -R /列出hdfs文件系统所有的目录和文件2.puthadoop fs -put hdfsfile的父目录一定要存在,否则命令不会执行hadoop fs -put ...hdfsdir一定要存在,否则命令不会执行hadoop fs -
向往宇宙
·
2015-10-14 11:37
hadoop
hdfs命令
hadoop
hdfs命令
命令基本格式:hadoop fs/dfs -cmd 1.lshadoop fs -ls /列出hdfs文件系统根目录下的目录和文件hadoop fs -ls -R /列出hdfs文件系统所有的目录和文件2.puthadoop fs -put hdfsfile的父目录一定要存在,否则命令不会执行hadoop fs -put ...hdfsdir一定要存在,否则命令不会执行hadoop fs -
向往宇宙
·
2015-10-14 11:37
hadoop
hdfs命令
深入浅出Hadoop实战开发
:>Hadoop背景>HDFS设计目标>HDFS不适合的场景>HDFS架构详尽分析>MapReduce的基本原理第2章节>Hadoop的版本介绍>安装单机版Hadoop>安装Hadoop集群第3章节>
HDFS
heiyexue
·
2015-06-22 20:00
HDFS文件操作
HDFS的文件操作格式化
HDFS命令
:user@namenode:Hadoop$bin/hadoopnamenode-format启动
HDFS命令
:user@namenode:hadoop$bin/start-dfs.sh
超人学院
·
2015-05-21 17:00
hadoop
hdfs
Hadoop之——
HDFS命令
转载请注明出处:http://blog.csdn.net/l1028386804/article/details/45769573 1.对hdfs操作的命令格式是hadoopfs 1.1-ls 表示对hdfs下一级目录的查看 1.2-lsr 表示对hdfs目录的递归查看 1.3 -mkdir 创建目录 1.4-put 从lin
l1028386804
·
2015-05-16 17:00
apache
mapreduce
hadoop
hdfs
HDFS命令
汇总
引言:我们维护hadoop系统的时候,必不可少需要对HDFS分布式文件系统做操作,例如拷贝一个文件/目录,查看HDFS文件系统目录下的内容,删除 HDFS文件系统中的内容(文件/目录),还有HDFS管理信息,单独启动停止 namenode datanode jobtracker tasktracker等等一系列的操作。大家跟着做一遍
kris_feng
·
2015-04-02 21:00
了解HDFS
1 hive变量调用; hive和shell
hdfs命令
交互调用;hiverc预定义初始化
1 hive使用外部变量: 分为4种情况, hive中引用外部变量: 在代码中引用时使用${...}; 方式1: [root@h2single bin]# hive -d name=username; 随便定义变量 后在hive中使用此变量 hive> create table t1(${name}
chengjianxiaoxue
·
2015-03-14 12:00
shell
spark SQL编程动手实战-01
:接下来定义一个caseclass来用于描述和存储SQL表中的每一行数据:接下来要加载数据,这里的测试数据是user.txt文件:我们创建好use.txt增加内容并上传到hdfs中:web控制台查询:
hdfs
Stark_Summer
·
2015-03-02 18:00
case
Class
DSL
SQLContext
registerAsTable
SchemaRDD
spark SQL编程动手实战-01
:接下来定义一个caseclass来用于描述和存储SQL表中的每一行数据:接下来要加载数据,这里的测试数据是user.txt文件:我们创建好use.txt增加内容并上传到hdfs中:web控制台查询:
hdfs
Stark_Summer
·
2015-03-02 18:00
case
Class
DSL
SQLContext
registerAsTable
SchemaRDD
spark SQL编程动手实战-01
:接下来定义一个caseclass来用于描述和存储SQL表中的每一行数据:接下来要加载数据,这里的测试数据是user.txt文件:我们创建好use.txt增加内容并上传到hdfs中:web控制台查询:
hdfs
stark_summer
·
2015-03-02 18:00
case
Class
DSL
SQLContext
SchemaRDD
registerAsTable
spark SQL编程动手实战-01
:接下来定义一个caseclass来用于描述和存储SQL表中的每一行数据:接下来要加载数据,这里的测试数据是user.txt文件:我们创建好use.txt增加内容并上传到hdfs中:web控制台查询:
hdfs
stark_summer
·
2015-03-02 18:00
case
Class
DSL
SQLContext
registerAsTable
SchemaRDD
Spark API编程动手实战-07-join操作深入实战
data/join创建两个文件:上传第一个文件名称为1.txt内容第一列是日期,第二列uid(普通用户id) 上传第二个文件名称为2.txt内容第一列是日期,第二列uid(普通用户id)执行上传到hdfs:
hdfs
Stark_Summer
·
2015-02-05 14:00
JOIN
case
map
Class
take
textFile
Spark API编程动手实战-07-join操作深入实战
data/join创建两个文件:上传第一个文件名称为1.txt内容第一列是日期,第二列uid(普通用户id)上传第二个文件名称为2.txt内容第一列是日期,第二列uid(普通用户id)执行上传到hdfs:
hdfs
stark_summer
·
2015-02-05 14:00
JOIN
case
map
Class
take
textFile
Spark API编程动手实战-07-join操作深入实战
data/join创建两个文件:上传第一个文件名称为1.txt内容第一列是日期,第二列uid(普通用户id)上传第二个文件名称为2.txt内容第一列是日期,第二列uid(普通用户id)执行上传到hdfs:
hdfs
Stark_Summer
·
2015-02-05 14:00
join
take
case
class
map
textFile
Spark API编程动手实战-07-join操作深入实战
data/join创建两个文件:上传第一个文件名称为1.txt内容第一列是日期,第二列uid(普通用户id) 上传第二个文件名称为2.txt内容第一列是日期,第二列uid(普通用户id)执行上传到hdfs:
hdfs
Stark_Summer
·
2015-02-05 14:00
JOIN
case
map
Class
take
textFile
Spark API编程动手实战-07-join操作深入实战
data/join创建两个文件:上传第一个文件名称为1.txt内容第一列是日期,第二列uid(普通用户id)上传第二个文件名称为2.txt内容第一列是日期,第二列uid(普通用户id)执行上传到hdfs:
hdfs
stark_summer
·
2015-02-05 14:00
JOIN
case
map
Class
take
textFile
Hive的一些简单操作
1.创建表注意问题指定字符间隔2.装载数据分两种,从本地文件系统装载和从HDFS中装载,本地装载HDFS装载:几个简单的
HDFS命令
:创建目录:查看目录:hive:usedatabasename;showtables
·
2015-01-13 17:00
hive
HDFS命令
启动hadoop 格式化文件系统 hadoopnamenode-format 启动hadoopcd/usr/local/sbin ./start-all.sh常用的文件操作命令1.格式化文件系统 hadoopnamenode-format 2.创建目录 hadoopfs-mkdir[path] 3.展示文件目录 hadoopfs-ls[path] 4.本地文件复制到hdfs中 hadoo
zhangt85
·
2014-12-17 11:00
hdfs
shell命令
hdfs命令
行和客户端的区别(一个大坑)
的命令行和客户端api的使用还是有很大差别的现象:将dfs.block.size设置成128M现有28G的数据,理论上讲map的总数应该是224个,但是map数量却翻倍成448个一直都找不出原因,使用
hdfs
只要你快乐
·
2014-12-06 20:00
hadoop
hdfs
dfs.block.size
Hadoop学习笔记13:./bin/hadoop namenode -format之脚本分析
网上视频和书本都说:启动之前要格式化,本节就来讲讲解格式化
HDFS命令
背后的原理!先来看看执行结果!下面我们来研究原理!=====================首先需要研究下.
强子哥哥
·
2014-08-19 23:00
hadoop
hdfs
format
HDFS CRUD 操作
1查找列出某个目录下的文件名称,
hdfs命令
如下所示:hdfsdfs–ls/usr/appjava代码片段:[plain]viewplaincopyprint?
Mrknowledge
·
2014-05-20 16:00
java实现对HDFS增删改查(CRUD)等操作
实现对HDFS增删改查CRUD等操作1查找列出某个目录下的文件名称,
hdfs命令
如下所示:hdfsdfs–ls/usr/appjava代码片段:publicvoidlist(StringsrcPath)
GreatElite
·
2014-03-12 21:00
hadoop
Hadoop操作
HDFS命令
Hadoop操作
HDFS命令
Hadoop操作
HDFS命令
如下所示: hadoopfs 查看HadoopHDFS支持的所有命令 hadoopfs–ls 列出目录及文件信息 hadoopfs–lsr 循环列出目录
isoleo
·
2014-01-21 18:00
王家林 第六讲Hadoop图文训练课程:使用
HDFS命令
行工具操作Hadoop分布式集群初体验
这一讲主要使用
HDFS命令
行工具操作Hadoop分布式集群初体验:Step1:使用HSFS命令向Hadoop分布式集群存放一个大文件;Step2:删除文件并用两份副本在HDFS上存放数据;使用
HDFS命令
行工具操作
twlkyao
·
2013-12-21 18:36
云计算
大数据
Hadoop
hadoop学习要点
一、HDFS(一)HDFS 概念(二)
HDFS命令
行接口(三)Java 接口(四)文件读取和文件写入,一致性(五)集群数据的均衡(六)存档 (七)NameNode 单点故障问题(八)大量小文件处理策略(
yueyedeai
·
2013-11-08 16:00
hadoop
hadoop 学习要点
一、HDFS (一)HDFS 概念 (二)
HDFS命令
行接口 (三)Java 接口 (四)文件读取和文件写入,一致性 (五)集群数据的均衡 (六)存档 
thd52java
·
2013-11-08 16:00
hadoop
Hadoop常用命令
阅读更多
HDFS命令
行接口hadoopfs命令跟linux的类似ls(显示一层)lsr(递归)du(显示所有文件及大小)dus(文件夹大小)count(多少个文件、大小)hadoopfs–helpmv帮助
wang_2011_ying
·
2013-11-08 15:00
Hadoop常用命令
HDFS命令
行接口 hadoop fs命令 跟linux的类似 ls(显示一层) lsr(递归) du(显示所有文件及大小) dus(文件夹大小)
wang_2011_ying
·
2013-11-08 15:00
hadoop
从mysql导入数据到hdfs
connect jdbc:mysql:// 机器名或IP:3306/sqoop --username sqoop --password sqoop 从mysql导入数据到
Hdfs
xinghaifeng2006
·
2013-11-07 22:00
mysql
hdfs命令
操作
转载自:http://www.dreamflier.net/blog/user1/3/2405.html 查看hadoopfs 建目录hadoopfs-mkdir/user/cloud/test 列当前目录hadoopfs-ls 列根目录hadoopfs-ls/ 循环列目录hadoopfs-lsr/ 上传到当前目录sudonanoexample.txthadoopfs-putexample.txt
swuteresa
·
2013-10-31 09:00
Hadoop操作
HDFS命令
转载自:http://www.juziku.com/sunlightcs/wiki/6017.htmhadoopfs查看HadoopHDFS支持的所有命令hadoopfs–ls列出目录及文件信息hadoopfs–lsr循环列出目录、子目录及文件信息hadoopfs–puttest.txt/user/sunlightcs将本地文件系统的test.txt复制到HDFS文件系统的/user/sunlig
swuteresa
·
2013-10-31 09:00
Hadoop操作
HDFS命令
Hadoop操作
HDFS命令
如下所示:hadoopfs查看HadoopHDFS支持的所有命令hadoopfs–ls列出目录及文件信息hadoopfs–lsr循环列出目录、子目录及文件信息hadoopfs–puttest.txt
快乐程序员
·
2013-08-19 14:34
hadoop
hdfs命令
hadoop
[置顶] Hadoop操作
HDFS命令
Hadoop操作
HDFS命令
如下所示: hadoopfs 查看HadoopHDFS支持的所有命令 hadoopfs–ls 列出目录及文件信息 hadoopfs–lsr 循环列出目录、子目录及文件信息 hadoopfs–puttest.txt
hit_hlj_sgy
·
2013-08-19 14:00
hadoop
hdfs命令
HDFS命令
行操作
启动后可通过命令行使用hadoop。(1)所有命令(先将$HADOOP_HOME/bin加入到.bashrc的$PATH变量中)[html] viewplaincopy[hadoop@node14 hadoop-0.21.0]$ ll $HADOOP_HOME/bin total 88 -rwxr-xr-x 1 hadoop hadoop 4131 Aug 17 2010 hadoop -
xiaojun1288
·
2013-08-15 15:00
Hadoop操作
HDFS命令
Hadoop操作
HDFS命令
如下所示:hadoopfs查看HadoopHDFS支持的所有命令hadoopfs–ls列出目录及文件信息hadoopfs–lsr循环列出目录、子目录及文件信息hadoopfs–puttest.txt
lxpbs8851
·
2013-07-25 10:00
Hadoop操作
HDFS命令
Hadoop操作
HDFS命令
如下所示:hadoopfs查看HadoopHDFS支持的所有命令hadoopfs–ls列出目录及文件信息hadoopfs–lsr循环列出目录、子目录及文件信息hadoopfs–puttest.txt
caoqingxiang
·
2013-06-24 09:35
hadoop
Hadoop操作
HDFS命令
Hadoop操作
HDFS命令
如下所示: hadoop fs 查看Hadoop HDFS支持的所有命令 hadoop fs –ls 列出目录及文件信息 hadoop fs –lsr
ann88884043
·
2013-06-24 09:00
hadoop
Hadoop操作
HDFS命令
Hadoop操作
HDFS命令
如下所示: hadoopfs 查看HadoopHDFS支持的所有命令 hadoopfs–ls 列出目录及文件信息 hadoopfs–lsr 循环列出目录、子目录及文件信息 hadoopfs–puttest.txt
hillday
·
2013-05-02 13:00
hadoop hdfs的一些操作
HDFS的文件操作格式化
HDFS命令
:user@namenode:hadoop$bin/hadoopnamenode-format启动
HDFS命令
:user@namenode:hadoop$bin/start-dfs.sh
zreodown
·
2013-03-18 17:00
关于Hadoop系列文章
Hadoop系列文章全部转载自马哥教育 马哥教育:http://mageedu.blog.51cto.com Hadoop整个系列文章还要涉及到以下话题:1、
HDFS命令
行接口的使用;2、完全分布式
马誉
·
2013-03-12 11:14
hadoop
关于Hadoop系列文章
Hadoop系列文章全部转载自马哥教育马哥教育:http://mageedu.blog.51cto.comHadoop整个系列文章还要涉及到以下话题:1、
HDFS命令
行接口的使用;2、完全分布式Hadoop
马誉
·
2013-03-12 11:14
hadoop
【Hadoop】
关于Hadoop系列文章
Hadoop整个系列文章还要涉及到以下话题:1、
HDFS命令
行接口的使用;2、完全分布式Hadoop;3、Hadoop硬件选型;4、Hadoop调优;5、Hadoop调度方法、常用参数、调优;6、Hadoop
马哥教育
·
2013-01-09 22:06
hadoop
大数据
hbase
map
云计算相关
关于Hadoop系列文章
Hadoop整个系列文章还要涉及到以下话题:1、
HDFS命令
行接口的使用;2、完全分布式Hadoop;3、Hadoop硬件选型;4、Hadoop调优;5、Hadoop调度方法、常用参数、调优;6、Hadoop
马哥教育
·
2013-01-09 22:06
mapreduce
hadoop
大数据
hbase
hdfs
【收藏】hadoop
hdfs命令
cat 使用方法:hadoop fs -cat URI [URI …] 将路 径指定文件的内容输出到stdout。 示 例: hadoop fs -cat hdfs://host1:port1/file1 hdfs://host2:port2/file2 hadoop fs -cat file:///file3 /user
superlxw1234
·
2012-11-06 09:00
hdfs命令
上一页
1
2
3
4
5
6
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他