使用Spark/Java Maven项目获取HiveContext
我正在尝试使用HiveContext使用Spark SQL从表中获取值 但我不确定如何配置配置单元元存储详细信息并使其正常工作 我们需要在使用Spark/Java Maven项目获取HiveContext,java,apache-spark,apache-spark-sql,Java,Apache Spark,Apache Spark Sql,我正在尝试使用HiveContext使用Spark SQL从表中获取值 但我不确定如何配置配置单元元存储详细信息并使其正常工作 我们需要在SparkContext()上设置一些内容吗 问候,, Shankar直接来自: 配置单元的配置是通过将Hive-site.xml文件放在conf/中完成的 和示例。如果我想在Eclipse/STS工具中工作,我应该将hive-site.xml文件放在哪里。我需要把它放在资源文件夹下吗?请帮帮我,看。此外,HiveContext具有setConf方法,因此您应
SparkContext
()上设置一些内容吗
问候,,
Shankar直接来自:
配置单元的配置是通过将Hive-site.xml文件放在conf/中完成的
和示例。如果我想在Eclipse/STS工具中工作,我应该将hive-site.xml文件放在哪里。我需要把它放在资源文件夹下吗?请帮帮我,看。此外,
HiveContext
具有setConf
方法,因此您应该能够使用该方法覆盖某些特定值。
HiveContext sqlContext = new org.apache.spark.sql.hive.HiveContext(sc.sc);