Spark_Spark中 map, mapPartition, flatMap, flatMapToPair 方法简介,区别 与示例
调研背景:本博主刚接触spark开发,对其中的API并不是特别的熟悉,对于以上提到的4种API常分不清用法,故写下这篇文章作为参考。如果有别的见解,希望踊跃留言~~~主要的测试场景,模仿对语句中的单词进行切分~。(按照空格进行单词切分,词频统计的前一个步奏。maven依赖:org.apache.sparkspark-core_2.112.2.0方法介绍Map:(不推荐使用)map函数会对每一条输入