SparkSQL——HiveContext的使用

HiveContext的使用

HiveContext也是已經過時的不推薦使用。

相關配置

如果想要用spark訪問hive的表需要進行一下的配置 
1. 拷貝 ${HIVE_HOME}/conf/hive-site.xml到 ${SPARK_HOME}/conf中 
2. 在pom.xml文件中添加一下依賴

示例代碼

package com.spark

import org.apache.spark.{SparkConf, SparkContext}

object HiveContextAPP {
  def main(args: Array[String]): Unit = {
    val path="E:\\data\\people.json"

    //1)創建相應的Context
    val sparkConf=new SparkConf()
    sparkConf.setAppName("SQLContextApp").setMaster("local[2]")
    val sc= new SparkContext()

    val hiveContext=new HiveContext(sc)

   //2)相關的處理
    hiveContext.table("emp").show


    //3)關閉資源
    sc.stop()
  }
}