使用Scala/Spark编程计算卡夫卡主题中的消息数_Scala_Apache Spark_Apache Kafka_Streaming_Bigdata

使用Scala/Spark编程计算卡夫卡主题中的消息数

scala apache-spark apache-kafka streaming

使用Scala/Spark编程计算卡夫卡主题中的消息数,scala,apache-spark,apache-kafka,streaming,bigdata,Scala,Apache Spark,Apache Kafka,Streaming,Bigdata,要求是使用Scala或Spark编程计算卡夫卡主题中的消息数。我对这两种编程都是新手，所以我不知道如何才能做到。有谁能帮助我编写代码或指导我如何实现它。给定org.apache.kafka.clients.consumer.KafkaConsumer的方法有：开始偏移（集合）和结束偏移（集合）您需要记住，kafka代理可以删除消息，这就是为什么需要开始消息

要求是使用Scala或Spark编程计算卡夫卡主题中的消息数。我对这两种编程都是新手，所以我不知道如何才能做到。有谁能帮助我编写代码或指导我如何实现它。

给定

org.apache.kafka.clients.consumer.KafkaConsumer

的方法有：

开始偏移（集合）

和

结束偏移（集合）

您需要记住，kafka代理可以删除消息，这就是为什么需要开始消息