Spark核心技术与应用第三章

Spark核心技术与应用第三章

3.1 使用Spark shell 编写程序

3.1.1 启动Spark Shelll

3.1.2 加载text文件

sc.textFile("file://")
sc.textFile("d=hdfs://")

3.1.3 简单RDD操作
执行Transformation返回新的RDD
执行Action得到返回结果

3.1.4 简单RDD操作应用

3.1.5 RDD缓存

3.2 构建Spark的开发环境

3.3 独立应用程序编程

你可能感兴趣的:(Spark核心技术与应用第三章)