outputformat

map-reduce的八个流程

下面讲解这八个流程 Inputformat——》map——》（combine）——》partition——》copy&merge——》sort——》reduce——》outputformatFileSplit
fz2543122681·2014-07-02 21:00

MapReduce中的自定义多目录/文件名输出<转>

这个需求需要用到MultipleOutputFormat和MultipleOutputs来实现自定义多目录、文件的输出。
yongjian_luo·2014-06-27 18:00

汉字转换为拼音

importnet.sourceforge.pinyin4j.format.HanyuPinyinCaseType; importnet.sourceforge.pinyin4j.format.HanyuPinyinOutputFormat
首席龍魂·2014-06-26 19:00

将汉字转为拼音

net.sourceforge.pinyin4j.format.HanyuPinyinCaseType; import net.sourceforge.pinyin4j.format.HanyuPinyinOutputFormat
fs216·2014-06-19 15:00

hbase海量数据的全量导入方法

刚好hbase的源代码中提供一个HFileOutputFormat类，分析其源代码可以看到：/***Copyright20
lingqi1818·2014-06-16 09:11

java中文转拼音

*;importnet.sourceforge.pinyin4j.format.HanyuPinyinOutputFormat;importnet.sourceforge.pinyin4j.format.HanyuPinyinToneType
ZWOOM·2014-06-12 21:35

java中文转拼音

*;importnet.sourceforge.pinyin4j.format.HanyuPinyinOutputFormat;importnet.sourceforge.pinyin4j.format.HanyuPinyinToneType
ZWOOM·2014-06-12 21:35

setOutputFormat called in an invalid state: 1

在编写一个简单的录像应用程序的时候，爆出如下异常：EMediaRecorder:setOutputFormatcalledinaninvalidstate:1EAndroidRuntime:java.lang.IllegalStateExceptionEAndroidRuntime
huiguixian·2014-06-10 16:00

Java图像缩略图类库 Thumbnailator

1Thumbnails.of(newFile("path/to/directory").listFiles())2        .size(640,480)3        .outputFormat
追梦java·2014-06-09 10:00

Hadoop多文件输出：MultipleOutputFormat和MultipleOutputs深究

http://www.iteblog.com/archives/848 由于本文比较长，考虑到篇幅问题，所以将本文拆分为二，请阅读本文之前先阅读本文的第一部分《Hadoop多文件输出：MultipleOutputFormat
zlcd1988·2014-06-06 15:00

hive2solr时count的一个bug

最近在测试hive导入solr，github上有个相关的代码https://github.com/chimpler/hive-solr其原理就是实现inputformat和outputformat，通过
菜菜光·2014-06-05 19:54

hive2solr时count的一个bug

最近在测试hive导入solr，github上有个相关的代码https://github.com/chimpler/hive-solr其原理就是实现inputformat和outputformat，通过
菜菜光·2014-06-05 19:54

hbase bulkloader实例入门

一、使用mr生成对应hbase table的hfile maper中写入库逻辑，reduce是用hbase自带的，outputformat用的是hfileoutputformat   &
blackproof·2014-06-03 23:00

hbase bulkloader实例入门

一、使用mr生成对应hbase table的hfile maper中写入库逻辑，reduce是用hbase自带的，outputformat用的是hfileoutputformat   &
blackproof·2014-06-03 23:00

mapreduce处理结果向输出至mysql（直接插入/更新/追加式更新）

package cn.m15.ipj.job.usergroup;    Mapreduce处理结果向输出至mysql    1.写入mysql      job中输出的配置：          DBOutputFormat.setOutput
wangjin161·2014-05-26 11:00

MapReduce生成HFile入库到HBase

、这种方式有很多的优点：1.如果我们一次性入库hbase巨量数据，处理速度慢不说，还特别占用Region资源，一个比较高效便捷的方法就是使用“BulkLoading”方法，即HBase提供的HFileOutputFormat
xiao_jun_0820·2014-05-23 15:00

android MediaRecorder录制音频

MediaRecorder的setAudioSource()方法设置声音来源，一般传入MediaRecorder.AudioSource.MIC参数指定录制来自麦克风的声音调用MediaRecorder对象的setOutputFormat
qilixiang012·2014-05-19 20:00

MapReduce知识点详解

文件系统相关和作业调度相关）也可以通过http://master:50030/jobdetails.jsp查看对文件内容为helloyouhellome的数据进行简单统计的计数器信息Counters: 19  FileOutputFormat
simpler·2014-05-19 00:00

MapReduce编程模型之OutputFormat接口分析

OutputFormat主要用于描述数据输出的格式，它能够将用户提供的key/value对写入特定格式的文件中。
java-大神·2014-05-16 17:00

阶乘统计2

去除末尾的0后，最后k位是多少 输入格式InputFormat 第一行包括两个数n,k 输出格式OutputFormat如果n!不止k位，则输出最后k位，如果不足k位，则高位补零，补足k位后输出注意！
u012629369·2014-05-15 15:00

java如何把汉字转换成拼音

传入的中文字符串 *@return返回转换成中文拼音的字符串 */ publicstaticStringgetPinYin(Stringzhongwen) throwsBadHanyuPinyinOutputFormatCombinat
zhonglunshun·2014-05-13 08:00

Mahout: distributed item-based algorithm 2

generatinguservectorsInputformatuserID:itemID1itemID2itemID3....Outputformat aVectorfromallitemIDsfortheuser
ylzhj02·2014-05-04 11:00

android MediaRecorder录制音频

MediaRecorder的setAudioSource()方法设置声音来源，一般传入MediaRecorder.AudioSource.MIC参数指定录制来自麦克风的声音调用MediaRecorder对象的setOutputFormat
qilixiang012·2014-05-03 15:00

Hadoop初学指南(7)--MapReduce自定义计数器

如FileOutputFormatCounters就表示文件输出的
yushaoqing·2014-05-02 22:23

Hadoop初学指南(7)--MapReduce自定义计数器

如FileOutputFormatCounters就表示文件输出的
yushaoqing·2014-05-02 22:23

MapReduce编程模型之InputFormat接口分析

最近小组任务是在MapReduce编程模型，分析其接口体系结构，即InputFormat、Mapper、Partitioner、Reducer和OutputFormat五个接口的分析，我的任务是分析InputFormat
dashen0·2014-05-02 21:28

MapReduce编程模型之InputFormat接口分析

    最近小组任务是在MapReduce编程模型，分析其接口体系结构，即InputFormat、Mapper、Partitioner、Reducer和OutputFormat五个接口的分析，我的任务是分析
java-大神·2014-05-02 21:00

MapReduce编程接口体系结构

第一层是最基本的JavaAPI，主要有5个可编程组件，分别是InputFormat、Mapper、Partitioner、Reducer和OutputFormat。
退役的龙弟弟·2014-04-26 21:00

Mapreduce中的RCFile输出RCFileOutputFormat实现及其应用

自定义实现RCFileOutputFormat.java importjava.io.IOException; importorg.apache.Hadoop.conf.Configuration;
qiaochao911·2014-04-21 10:00

FFmpeg SDK使用实例output_example的分析之二

四、主函数代码001intmain(intargc,char**argv)002{003  constchar*filename;004  AVOutputFormat*fmt;005  AVFormatContext
fireroll·2014-04-19 22:00

FFmpeg SDK使用实例output_example的分析之一

一、重要的数据结构及函数列表I.数据结构：(1)AVFormatContext(2)AVOutputFormat(3)AVInputFormat(4)AVCodecContext(5)AVCodec(6
fireroll·2014-04-19 22:00

hadoop 自定义inputformat和outputformat

http://blackproof.iteye.com/blog/1hadoop的inputformat和outputformat 最好的例子vertica：虽然是在pig中实现的udf，但是就是hadoop
Flood_Dragon·2014-04-04 17:00

HiveHBaseTableInputFormat代码分析

主要功能是由：HBaseStorageHandler.java、HiveHBaseTableInputFormat.java、HiveHBaseTableOutputFormat.java、LazyHBaseRow.j
vah101·2014-04-03 10:00

hadoop如何自定义InputFormats和OutputFormats

DataMining,NLP,SearchEngineHadoop的InputFormats和OutputFormatsInputFormatInputFormat类用来产生InputSplit，并把它切分成
仲夏夜有蚊子·2014-04-02 16:39

Hadoop中Partition解析

1.解析PartitionMap的结果，会通过partition分发到Reducer上，Reducer做完Reduce操作后，通过OutputFormat，进行输出，下面我们就来分析参与这个过程的类。
fz2543122681·2014-03-24 13:00

汉字转拼音

importnet.sourceforge.pinyin4j.format.HanyuPinyinCaseType; importnet.sourceforge.pinyin4j.format.HanyuPinyinOutputFormat
u010310183·2014-03-23 15:00

hadoop2.2.0定制mapreduce输出到数据库

1004:52:34127.0.0.1xxx我们知道在写mapreducejob时，要配置输入输出，然后编写mapper和reducer类，hadoop默认输出是到hdfs的文件中，例如：job.setOutputFormatCl
inDestiny·2014-03-19 18:00

Hadoop学习三十三：Hadoop-HBase Bulk Load使用翻译

OverviewHBaseincludesseveralmethodsofloadingdataintotables.ThemoststraightforwardmethodistoeitherusetheTableOutputFormatc
zy19982004·2014-03-18 14:00

Hadoop学习三十三：Hadoop-HBase Bulk Load使用翻译

OverviewHBaseincludesseveralmethodsofloadingdataintotables.ThemoststraightforwardmethodistoeitherusetheTableOutputFormatc
zy19982004·2014-03-18 14:00

MapReduce编程模型--接口体系结构--架构设计--《hadoop技术内幕》读书笔记

chainMapper/ChainReducer 其他的提供多语言支持，这里不介绍了编程接口层：就是开发程序时的要实现的接口：InputFormat , Mapper,Partitioner,Reducer,OutputFormat
smile0198·2014-03-09 22:00

java中以UTF-8为编码的Document类写入硬盘时产生的错误

写这篇博文的原因在于昨晚我在写服务器处理的过程中竟然花了三个小时在怎么用XMLWriter、OutputFormat类把一个Document对象以UTF-8的编码形式写入文件当中...先看这段代码this.createFile
chenhongxin·2014-03-06 14:30

Hadoop输出参数信息详解(16)

Counters:19FileOutputFormatCountersBytesWritten=19        //reduce输出到hdfs的字节数FileSystemCountersFILE_BYTES_READ
肖鋭·2014-03-04 21:00

MultipleOutputs(三)

一，介绍1，旧API中有org.apache.hadoop.mapred.lib.MultipleOutputFormat和org.apache.hadoop.mapred.lib.MultipleOutputsMultipleOutputFormatallowingtowritetheoutputdatatodifferentoutputfiles.MultipleOutputscreatesm
Mrknowledge·2014-02-17 13:00

浅析HBase架构和系统结构介绍（六）

最方便和实用的模型依然是MapReduce，如下图：HBasetable和region的关系，比较类似HDFSfile和block的关系，HBase提供了配套的TableInputFormat和TableOutputFormatAPI
GreatElite·2014-02-02 12:00

Android音频录制MediaRecorder之简易的录音软件实现代码

MediaRecorder对象2、调用MediRecorder对象的setAudioSource()方法设置声音的来源，一般传入MediaRecorder.MIC3、调用MediaRecorder对象的setOutputFormat
·2014-01-24 15:50

Hadoop之OutputFormat

版本： 2.2版   描述： OutputFormat是设置MR的结果输出写操作格式，包括如何写？写那？
小网客·2014-01-23 16:00

Hadoop之OutputFormat

版本： 2.2版   描述： OutputFormat是设置MR的结果输出写操作格式，包括如何写？写那？
小网客·2014-01-23 16:00

Android音频录制MediaRecorder之简易的录音软件

MediaRecorder对象  2、调用MediRecorder对象的setAudioSource()方法设置声音的来源，一般传入MediaRecorder.MIC  3、调用MediaRecorder对象的setOutputFormat
x605940745·2014-01-21 13:00

java中文转全拼工具类分享

importnet.sourceforge.pinyin4j.format.HanyuPinyinCaseType;importnet.sourceforge.pinyin4j.format.HanyuPinyinOutputFormat
·2014-01-19 14:59

数据导入HBase最常用的三种方式及实践分析(3)

HBase提供TableOutputFormat 用于在MapReduce J
coolsunchen·2014-01-09 10:00
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他