hadoop在上传文件遇到若干问题

hadoop在上传文件遇到若干问题,其中设置hadoop_home以及上传端口问题。

  1. 设置HADOOP_HOME环境变量,还需要winutils.exe文件,变量值为winutils.exe的目录位置例如D:\Program Files\hadoop

  2. 刚开始测试hadoop上传文件的时候,我没有注意core-site.xml中配置的端口,所以一直报错连接不到主机

  3. slave配置文件中ip需要注意;

  4. Wrong FS: hdfs://192.168.100.20:8020/testFile/report.txt, expected: file:///  此错误的需要在上传的时候添加以下代码:

    Configuration config = new Configuration() ;

    config.set("fs.defaultFS", url);


你可能感兴趣的:(hadoop)