wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable:已解决

wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable:已解决

文章目录

  • wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable:已解决
    • 问题描述
    • 解决方法
    • 文章参考

问题描述

报错信息:wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable,如下图所示。

wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable:已解决_第1张图片

wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable:已解决_第2张图片

遇到这样的报错,产生的结果是:程序是执行完成的,也生成了目录文件,但是想要的结果文件是没有的

解决方法

错误信息显示输入输出类型不匹配,我们需要将这下面行代码注释掉

job.setReducerClass(CombinReduce.class);

并去将输出的方法修改,原本的代码,如下

job.setMapOutputKeyClass(Text.class);
job.setMapOutputValueClass(Text.class);

修改后的代码,如下

job.setOutputKeyClass(Text.class);
job.setOutputValueClass(Text.class);

注意:

当K2, V2 和K3 , V3类型一致时,只需要使用setOutputKeyClass和setOutputValueClass来设置输出类型即可。

当K2, V2 和K3 , V3类型不一致时,我们才需要用setMapOutputKeyClass和setMapOutputValueClass来设置map的输出类型

我们这里将setMapOutputKeyClass替换为setOutputKeyClass输出方法,如下图所示,便可以成功运行了

wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable:已解决_第3张图片

我们想要的文件也出来了,如下图所示。

wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable:已解决_第4张图片

文章参考

http://t.csdn.cn/aVVFO


以上就是本文全部内容,如果它对您有帮助,请您帮我点个赞,这对我真的很重要

你可能感兴趣的:(容器,hadoop,apache,大数据,分布式,容器)