conf的一些设置

// 每个map最多处理2MB的数据量大小

conf.setLong("mapred.max.split.size", 2097152L);


conf.set("mapred.reduce.slowstart.completed.maps", "0.99");


//自定义分隔符
conf.set("mapreduce.input.keyvaluelinerecordreader.key.value.separator", "\t");

//使用自定义分隔符量,输入采用

job.setInputFormatClass(KeyValueTextInputFormat.class);


//设置优先级

conf.set("mapred.job.priority", JobPriority.LOW.toString());


//设置jvm大小

conf.set("mapred.child.java.opts", "-Xmx1024m");


//设置谲诈map失败的 最大百分比

conf.setInt("mapred.max.map.failures.percent", 10);


//设置map失败后的重试次数,默认为4

mapred.map.max.attempts

你可能感兴趣的:(conf的一些设置)