Flatmap

spark中各种transformation算子操作（scala版）

packagecn.spark.study.coreimportorg.apache.spark.SparkConfimportorg.apache.spark.SparkContextobjectTransformationOperation{defmain(args:Array[String]):Unit={//mapTest//filterTest//flatMap
kongshuchen·2016-05-06 19:00

Retrofit和RxJava结合使用例子分析

以GitHub上的一个例子进行分析一下https://github.com/rengwuxian/RxJavaSamples先讲下总体架构分为基本、转换（MAP）、压合（ZIP）、TOKEN（FLATMAP
u012354475·2016-05-03 15:00

RxJava-操作符 初步学习

Rxjava操作符mergeDelayError:合并几个不同的observablesample：每隔一段时间进行采样，在时间间隔范围内获取最后一个发布的observableflatmap:把某一个observable
u014631944·2016-05-01 17:00

影响Spark输出RDD分区的操作函数

,rightOuterJoin,groupByKey,reduceByKey,combineByKey,partitionBy,sort,mapValues(如果父RDD存在partitioner),flatMapValues
ZCF1002797280·2016-05-01 10:00

RxJava学习(六)

今天来看看RxJava中关于错误的处理在RxJava中我们可以很方便地处理异常，只要加上onError即可不过，如果异常发生在操作符内部，比如flatMap，那我们怎么把这个异常传递给onError呢。
Small_Lee·2016-04-27 22:00

RxJava----操作符：转换Observable

map和flatMap是本节中操作函数的基础。下面是三种转换方式的示意：Ana(morphism)T–>IObservableCata(morphism)IObservable–>T
qq_20198405·2016-04-27 18:00

Rx lift

顺带的又和有lift有了些联系，lift是用来让自定义操作符的，看网上说RxJava都不建议开发者自定义Operator来直接使用lift()，而是建议尽量使用已有的lift()包装方法（如map()flatMap
kongbaidepao·2016-04-27 17:00

RxJava学习(二)

subscribe(newAction1(){ @Override publicvoidcall(Strings){ System.out.println("=========s"+s); } });flatMap
Small_Lee·2016-04-26 16:00

RxJava

RxJava比EventBus更加地强大：a)变换：对于发布的事件的数据，RxJava可以拦截进行转换，XxxMap这样的方法中添加FunX类的call方法（闭包）map变换flatMap变换序列变换注
屠夫章哥·2016-04-22 09:30

RxJava

RxJava比EventBus更加地强大：a)变换：对于发布的事件的数据，RxJava可以拦截进行转换，XxxMap这样的方法中添加FunX类的call方法（闭包）map变换flatMap变换序列变换注
屠夫章哥·2016-04-22 09:30

RxJava转换操作符

最常见的变换操作符如map、flatmap等Observable和Subscriber可以做任何事情(Observable可以是一个网络请求，Subscriber用来显示请求结果)其中Subscriber
wbwjx·2016-04-22 07:00

化解使用rx时的竞态条件（使用flatMapLatest）

题目来自于 化解使用Promise时的竞态条件问题描述： 异步请求中怎么取消前面一个未取消请求的影响。如发送搜索请求。两次发送，但是后一个请求比前一个请求来得慢。需要cancel前一个请求。解决方法： promise中由于没有实现Cancel(IDisposable)方法，所以需要些特殊的方法。如在上面文章中的解决方法是用的中间变量。不过在rx中,当调用subscribe时候，会返回一个IDisp
reactivex·2016-04-17 20:00

spark之RDD

7077reduceBykey、groupBykey、sortByKey、join的使用1、reduceBykey varrdd=sc.textFile("/data/wc.input") valreduceBykey=rdd.flatMap
yangcongyangling·2016-04-16 00:00

第一天：Java源码级实战速成（通过动手实战类、对象等，通过Spark和Hadoop案例代码和源码解析具体指知识的应用、深度详解匿名接口在Spark开发中的运用）

.  */ defflatMap[U](f:FlatMapFunction[T,U]):JavaRDD[U]={   importscala.collection.JavaConverte
duan_zhihua·2016-04-10 09:00

谈谈 Swift 中的 map 和 flatMap

map和flatMap是Swift中两个常用的函数，它们体现了Swift中很多的特性。对于简单的使用来说，它们的接口并不复杂，但它们内部的机制还是非常值得研究的，能够帮助我们够好的理解Swift语言。
SwiftCafe·2016-04-04 21:33

Spark面对OOM问题的解决方法及优化总结

yhb315279058/article/details/51035631Spark中的OOM问题不外乎以下两种情况map执行中内存溢出shuffle后内存溢出map执行中内存溢出代表了所有map类型的操作，包括：flatMap
拱头·2016-04-01 11:28

RxJava中的错误处理

不过，如果异常发生在操作符内部，比如flatMap，那我们怎么把这个异常传递给onError呢。
东东东鲁·2016-03-31 21:42

自主学习之RxSwift(二) -----flatMap

最近项目中有这么一个需求，下面是三个网络请求A.从服务器获取到时间戳（GET方法，获取timeLine）B.进行用户头像上传，获得回传的URL(POST方法，参数为userId,timeLine,Image)C.对用户信息进行设置(POST方，参数为timeLine,avatarURL,userId)对这个情景简单分析，不难得出一个结论，B依赖于A的返回结果，C依赖于A,B的返回结果，这个时候如果
chelongfei·2016-03-28 10:25

Spark 多个RDD产生一个最终RDD 最终RDD使用注意事项

javaSparkContext.parallelize(Arrays.asList("2016-02-25", "2016-02-24", "2016-02-26")).mapPartitionsToPair(new PairFlatMapFunction
momisabuilder·2016-03-23 14:00

高效分布式计算系统之—Spark与Hadoop

比如map,filter,flatMap,sample,groupByKey,reduceByKey,union,join,co
zealifree004·2016-03-19 13:00

Spark API 详解/大白话解释 之 map、mapPartitions、mapValues、mapWith、flatMap、flatMapWith、fla...

map(function)map是对RDD中的每个元素都执行一个指定的函数来产生一个新的RDD。任何原RDD中的元素在新RDD中都有且只有一个元素与之对应。举例：vala=sc.parallelize(1to9,3)valb=a.map(x=>x*2)//x=>x*2是一个函数，x是传入参数即RDD的每个元素，x*2是返回值a.collect//结果Array[Int]=Array(1,2,3,4
a414129902·2016-03-15 15:53

Swift化零为整：Reduce 详解

即使早在Swift正式发布之前，iOS/Cocoa开发者都可以使用诸如ObjectiveSugar或者ReactiveCocoa第三方库，实现类似map、flatMap 或 filter 等函数式编程的构建
offbye·2016-03-11 14:00

理解Swift中map 和 flatMap对集合的作用

map和flatMap是函数式编程中常见的概念，python等语言中都有。借助于map和flapMap函数能够很轻易地将数组转换成另外一个新数组。
offbye·2016-03-11 11:00

[RxJS] Reactive Programming - Sharing network requests with shareReplay()

wecanverfiythisbyconsoleouteachnetworkrequest:varresponseStream=startupRequestStream.merge(requestOnRefreshStream) .flatMap
Answer1215·2016-03-09 03:00

【函数式】Monads模式初探——Monad概念

单子的flatMap和unit操作作为构建数据类型的基本操作，可以实现很多复杂的高阶函数。单子的程序描述Monad定义了unit和flatMap两个函数。
JasonDing1354·2016-03-05 21:00

【函数式】Monads模式初探——Option Monad

defisEmpty:Boolean defget:A defmap[B](f:A=>B):Option[B]= if(isEmpty)NoneelseSome(f(this.get)) defflatMap
JasonDing1354·2016-03-05 21:00

【函数式】Monads模式初探——Monad概念

单子的flatMap和unit操作作为构建数据类型的基本操作，可以实现很多复杂的高阶函数。单子的程序描述Monad定义了unit和flatMap两个函数。
JasonDing1354·2016-03-05 21:00

【函数式】Monads模式初探——Option Monad

defisEmpty:Boolean defget:A defmap[B](f:A=>B):Option[B]= if(isEmpty)NoneelseSome(f(this.get)) defflatMap
JasonDing1354·2016-03-05 21:00

Swift 烧脑体操（四） - map 和 flatMap

前言Swift其实比Objective-C复杂很多，相对于出生于上世纪80年代的Objective-C来说，Swift融入了大量新特性。这也使得我们学习掌握这门语言变得相对来说更加困难。不过一切都是值得的，Swift相比Objective-C，写出来的程序更安全、更简洁，最终能够提高我们的工作效率和质量。Swift相关的学习资料已经很多，我想从另外一个角度来介绍它的一些特性，我把这个角度叫做「烧脑
唐巧·2016-03-03 00:00

RxJava 转换操作符 switchMap

switchMap与flatMap和concatMap的区别在于:不好总结:RxJavaalsoimplementstheswitchMapoperator.ItbehavesmuchlikeflatMap
亚洲小炫风·2016-02-25 17:05

RxJava 转换操作符 switchMap

switchMap与flatMap和concatMap的区别在于:不好总结:RxJavaalsoimplementsthe switchMap operator.Itbehavesmuchlike flatMap
axuanqq·2016-02-25 17:00

RxJava转换操作符 conactMap

concatMap操作符是将源Observable转换成对各操作符，然后又链接返回给源Observable，这与flatMap十分相似，最大的区别:concatMap是保证结果的顺序性，就是顺序与输入一致
axuanqq·2016-02-25 15:00

spark快速大数据分析之读书笔记-flatmap与map的区别

以前总是分不清楚spark中flatmap和map的区别，现在弄明白了，总结分享给大家，先看看flatmap和map的定义。map()是将函数用于RDD中的每个元素，将返回值构成新的RDD。
sucre·2016-02-23 21:00

RxJava 转换操作符 flatMap

flatMap操作符是把Observable产生的结果转换成多个Observable,然后又直接把这些Observable转换一个Observable,并依次提交产生的结果给订阅者规律:源Observable
axuanqq·2016-02-23 16:00

spark例子

程序测试：进入spark-shell中valtext_file=sc.textFile("hdfs://hadoop1:8020/ai/README.txt")valcounts=text_file.flatMap
qq_16365849·2016-02-19 15:00

spark - 从HDFS加载文件并分析

> val file=sc.textFile("/workspace/bpUserinfo_logs/bpUserinfo_20160212.log")  scala> val count=file.flatMap
LightingCui·2016-02-16 14:00

第35讲：List的map、flatMap、foreach、filter操作代码实战

List的Map函数的作用：map的参数是一个函数，List中的每个元素都应用于这个函数，并且返回一个新的集合。例如我们有一个List(1，2，3，4)，我们需要构建List(2,4,6,8)那么我们就可以使用Map函数，传入一个*2的函数如下：scala> val list = List(1,2,3,4) list: List[Int] = List(1, 2, 3, 4) scala> li
lqding1980·2016-02-15 10:55

第35讲：List的map、flatMap、foreach、filter操作代码实战

List的Map函数的作用：map的参数是一个函数，List中的每个元素都应用于这个函数，并且返回一个新的集合。例如我们有一个List(1，2，3，4)，我们需要构建List(2,4,6,8)那么我们就可以使用Map函数，传入一个*2的函数如下：scala> val list = List(1,2,3,4)list: List[Int] = List(1, 2, 3, 4)scala> list.
lqding1980·2016-02-15 10:55

[Cycle.js] Fine-grained control over the DOM Source

event.functionmain(sources){ constclick$=sources.DOM; constsinks={ DOM:click$ .startWith(null) .flatMapLatest
Answer1215·2016-02-09 20:00

RDD案例（DT大数据梦工厂）

内容：1、map、filter、flatmap等操作回顾；2、reduceBykey、groupBykey；3、jion、cogroug；算子共同特点：都是最常用的算子，构建复杂算法的基石，都是lazy
feiweihy·2016-02-08 09:17

大数据IMF传奇 第19课 spark 二次排序 使用JAVA自定义key 进行二次排序

scala>sc.textFile("/README.txt").flatMap(_.split("")).map((_,1)).reduceByKey(_+_).map(x=>(x._2,x._1))
duan_zhihua·2016-01-24 20:00

Map all the things in Swift 映射所有东西

10/11/thinking-in-swift-4/翻译者：lzy欢迎转载，请注明出处:http://zyden.vicp.cc/mapallthething/在上一篇文章中我们为数组引入了map()和flatMap
Poppin_Category·2016-01-24 15:00

DT_大数据梦工厂 第17课 RDD实战

今晚上课内容：1map、filter、flatmap操作回顾2reduceByKey、groupByKey3join、cogroupjoin和cogroup是所有Spark学习者必须掌握的内容。
chinsun_1·2016-01-22 23:57

DT_大数据梦工厂 第17课 RDD实战

今晚上课内容：1map、filter、flatmap操作回顾2reduceByKey、groupByKey3join、cogroup join和cogroup是所有Spark学习者必须掌握的内容。
chinsun_1·2016-01-22 23:00

Spark API 详解/大白话解释 之 map、mapPartitions、mapValues、mapWith、flatMap、flatMapWith、flatMapValues

map(function)map是对RDD中的每个元素都执行一个指定的函数来产生一个新的RDD。任何原RDD中的元素在新RDD中都有且只有一个元素与之对应。举例：vala=sc.parallelize(1to9,3)valb=a.map(x=>x*2)//x=>x*2是一个函数，x是传入参数即RDD的每个元素，x*2是返回值a.collect//结果Array[Int]=Array(1,2,3,4
guotong1988·2016-01-21 14:12

Spark API 详解/大白话解释 之 map、mapPartitions、mapValues、mapWith、flatMap、flatMapWith、flatMapValues

map(function)map是对RDD中的每个元素都执行一个指定的函数来产生一个新的RDD。任何原RDD中的元素在新RDD中都有且只有一个元素与之对应。举例：vala=sc.parallelize(1to9,3) valb=a.map(x=>x*2)//x=>x*2是一个函数，x是传入参数即RDD的每个元素，x*2是返回值 a.collect//结果Array[Int]=Array(1,2,3
guotong1988·2016-01-21 14:00

Rxlifecycle（三）：坑

.compose(this.bindUntilEvent(ActivityEvent.PAUSE)) .flatMap(newFunc1>(){ @Override publicObservablecall
PuerTea·2016-01-06 17:00

spark RDD 基本操作

array).map(r=>2*r)2.filter:过滤出符合条件的元组valarray=Array(1,2,3)valrdd=sc.parallelize(array).filter(r=>r>2)3.flatMap
eiffel_0311·2016-01-06 10:38

RxJava之lift()变换原理及实现自定义 Operator

RxJava之lift()变换原理及实现自定义Operatormap，flatMap等实质上都是针对事件序列的处理和再发送。
EthanCo·2015-12-31 13:00

想要征服Spark吗？这几个经典课程必学！

十八掌推出征服Spark课程，通过学习掌握spark中分别使用java和scala语言创建sparkContext对象，掌握SparkContext中几种元数据掌握addFile文件的意图和常见错误掌握flatMap
让往事随风·2015-12-29 17:00
上一页 29 30 31 32 33 34 35 36 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他