Spark创建空的df

最近有需求用到了这个,在此记录一下

  • 1
 val df: DataFrame = session.sparkContext.parallelize(List(
      ("1585457624919318528", "450", "3", "2020-01-13 00:00:05", "1666672985169")))
      .toDF("id", "salemoney", "saleQty", "time", "timestampt")
    
    // 复制其他df的schema 的空df
    val emptyDf: DataFrame = session.createDataFrame(session.sparkContext.emptyRDD[Row], df.schema)
    println(emptyDf.schema.fields.mkString(","))
  • 2
// 空df 啥也没有 这个不知道有什么用
val emptyDf2: DataFrame = session.emptyDataFrame
    println(emptyDf2.schema.fields.mkString(","))

你可能感兴趣的:(#,Spark-SQL,spark)