Scala “线程中的异常”;“流媒体启动”;java.lang.NoSuchMethodError:org.apache.kafka.clients.consumer.KafkaConsumer.subscribe(Ljava/util/Collection;)V

Scala “线程中的异常”;“流媒体启动”;java.lang.NoSuchMethodError:org.apache.kafka.clients.consumer.KafkaConsumer.subscribe(Ljava/util/Collection;)V,scala,apache-spark,cassandra,apache-kafka,Scala,Apache Spark,Cassandra,Apache Kafka,提交spark应用程序时,出现以下错误: 线程“streaming start”java.lang.NoSuchMethodError中出现异常: org.apache.kafka.clients.consumer.KafkaConsumer.subscribe(Ljava/util/Collection;)V 浏览了以下URL: 设置以下环境变量: SPARK\u KAFKA\u版本=0.10 添加了以下依赖项: <dependency> <groupId>org

提交spark应用程序时,出现以下错误:

线程“streaming start”java.lang.NoSuchMethodError中出现异常:

org.apache.kafka.clients.consumer.KafkaConsumer.subscribe(Ljava/util/Collection;)V

浏览了以下URL:

设置以下环境变量:
SPARK\u KAFKA\u版本=0.10

添加了以下依赖项:

<dependency>
  <groupId>org.apache.spark</groupId>
  <artifactId>spark-streaming-kafka-0-10_2.11</artifactId>
  <version>2.1.0.cloudera1</version>
</dependency>
非常感谢您的帮助。

请尝试设置:

导出SPARK_KAFKA_版本=0.10


非常感谢。这帮助我克服了恼人的“未找到方法”错误。你救了我一天。为什么要这么做?是的,为什么要这么做?
val CLASS_NAME = this.getClass
val log = org.apache.log4j.LogManager.getLogger(CLASS_NAME)