【spark】spark-hive操作

hiveserver2
hive on tez 
1,创建maven项目,就hive-site.xml,core-size.xml,hdfs-site.xml
放到项目resources下面
【spark】spark-hive操作_第1张图片

2.spark-hive连接:
package com.people.item
/**
 * Created by Administrator on 2017/8/29.
 */
import org.apache.spark.sql.hive.HiveContext
import org.apache.spark.{SparkConf, SparkContext}
object SparkHiveText {
  def main(args: Array[String]) {
    val conf=new SparkConf().setMaster("local[2]").setAppName("SparkHiveText")
    val sc=new SparkContext(conf)
    val hc=new HiveContext(sc)
    import hc.implicits._
    hc.sql("select * from data.article limit 1").show()
    sc.stop()
  }
}


你可能感兴趣的:(spark,hive)