MapperReducer中出现java.lang.Exception: java.io.EOFException和org.apache.hadoop.fs.ChecksumExceptio的问题解决

1)java.lang.Exception: java.io.EOFException

MapperReducer中出现java.lang.Exception: java.io.EOFException和org.apache.hadoop.fs.ChecksumExceptio的问题解决_第1张图片

数据类型要一致!!!

MapperReducer中出现java.lang.Exception: java.io.EOFException和org.apache.hadoop.fs.ChecksumExceptio的问题解决_第2张图片

 

2)org.apache.hadoop.fs.ChecksumException: Checksum error

Hadoop客户端将本地文件file上传到hdfs上时,hadoop会通过fs.FSInputChecker判断需要上传的文件是否存在.crc校验文件。如果存在.crc校验文件,则会进行校验。如果校验失败,即两次文件的内容有修改,自然不会上传该文件。

解决: 删除掉对应的校验文件即可。

你可能感兴趣的:(菜鸟阶段,javaEE)