flink使用DataStreamUtils将DataStream的数据转成Iterator迭代器的数据(如数组、列表、集合等)

1.scala代码如下

import org.apache.flink.streaming.experimental.DataStreamUtils
import scala.collection.JavaConverters.asScalaIteratorConverter

val myResult: DataStream[(String, Int)] = ...
val myOutput: Iterator[(String, Int)] = DataStreamUtils.collect(myResult.javaStream).asScala

2.java代码如下

import org.apache.flink.streaming.experimental.DataStreamUtils

DataStream> myResult = ...
Iterator> myOutput = DataStreamUtils.collect(myResult)

这样就可以把DataStream转成Iterator了,其中Iterator是scala中Collection集合的最上层接口,可以通过如Iterator的toArray()、toList()等方法转成我们所需要的所有集合。

3.类型不匹配的问题
上面12点都是官方的代码,但是我们用scala写DataStream的时候都是用的org.apache.flink.streaming.api.scala.DataStream包,上述代码会出现类型不匹配的问题,所以要使用org.apache.flink.streaming.api.scala.DataStreamUtils包下的scala类

import org.apache.flink.streaming.api.scala.DataStreamUtils
val myOutput: Iterator[Center] = new DataStreamUtils(window).collect()

报错消失

你可能感兴趣的:(flink使用DataStreamUtils将DataStream的数据转成Iterator迭代器的数据(如数组、列表、集合等))