Apache spark Fitbit数据的Spark流
我正在使用Fitbit Oauth 2.0访问Fitbit数据。我将这些数据存储在SQL数据库中,之后,我将使用Spark SQL分析数据。Apache spark Fitbit数据的Spark流,apache-spark,oauth-2.0,apache-spark-sql,spark-streaming,fitbit,Apache Spark,Oauth 2.0,Apache Spark Sql,Spark Streaming,Fitbit,我正在使用Fitbit Oauth 2.0访问Fitbit数据。我将这些数据存储在SQL数据库中,之后,我将使用Spark SQL分析数据。 如果我必须使用Spark流媒体,那么在执行OAuth之后,如何将数据摄取到Spark?有多种方法可以做到这一点 您可以将fitbit数据格式化为结构化数据,然后将其转储到HDFS/Kafka/Socket,并启动相应的HDFS/Kafka/Socket接收器 您可以编写自己的自定义接收器,直接使用OAuth或从SQL db接收数据
如果我必须使用Spark流媒体,那么在执行OAuth之后,如何将数据摄取到Spark?有多种方法可以做到这一点