Hadoop:windows 上 hadoop项目遇到的一些问题

  1. hadoop报空指针异常:
    将hadoop/bin下的winutils.exe和hadoop.dll文件拷贝到windows/System32文件夹下。
  2. 报错: null chomod 0644
    原因是因为hadoop 的jar包和hadoop版本不一致,解决办法,下载对应的jar包或者hadoop。
  3. hadoop hdfs nodename clusterid 和datanode clusterid 不一定,导致hadoop启动后找不到datanode:
    产生原因:运行hadoop fs -format 命令导致hadoop格式化,clusterid发生了改变。
    解决办法:
    1.修改datanode 或者 namenode 中/dfs/data/current/VERSION 中的clusterid.
    2.停止集群,将datanode中/dfs/文件夹删除(没有数据的情况下)。再开启集群。

你可能感兴趣的:(Hadoop:windows 上 hadoop项目遇到的一些问题)