Spark RDD的五大属性+宽窄依赖+执行过程+常见算子

  • 分区列表
  • 作用函数
  • 分区函数
  • 依赖关系
  • 位置策略
  • Spark RDD的五大属性+宽窄依赖+执行过程+常见算子_第1张图片

Spark RDD的五大属性+宽窄依赖+执行过程+常见算子_第2张图片

宽窄依赖

Spark RDD的五大属性+宽窄依赖+执行过程+常见算子_第3张图片

执行过程:

Spark RDD的五大属性+宽窄依赖+执行过程+常见算子_第4张图片

Spark RDD的五大属性+宽窄依赖+执行过程+常见算子_第5张图片 RDD的操作之transformation和action

Spark RDD的五大属性+宽窄依赖+执行过程+常见算子_第6张图片

你可能感兴趣的:(大数据之Spark)