CDH 开发Spark 应用

翻译: https://www.cloudera.com/documentation/enterprise/latest/topics/spark_applications_developing.html
版本: 5.14.2

当您准备从交互式shell转到后台运行Spark应用程序时,您需要构建,打包和配置应用程序以及使用更高级的API。本节介绍:

  • 如何开发,打包和运行Spark应用程序。
  • 在Spark核心之外使用Spark API的方面。
  • 如何访问以各种文件格式存储的数据,例如Parquet和Avro。
  • 如何访问存储在云存储系统中的数据,例如Amazon S3或Microsoft ADLS。
  • 构建和配置Spark应用程序的最佳实践。

继续阅读:

  • 开发和运行Spark WordCount应用程序
  • 使用Spark Streaming
  • 使用Spark SQL
  • 使用Spark MLlib
  • 访问外部存储
  • 构建Spark应用程序
  • 配置Spark应用程序

你可能感兴趣的:(CDH 开发Spark 应用)