Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/.net/24.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
使用NiFi处理器将facebook数据提取到hadoop中的过程_Hadoop_Hdfs_Apache Nifi - Fatal编程技术网

使用NiFi处理器将facebook数据提取到hadoop中的过程

使用NiFi处理器将facebook数据提取到hadoop中的过程,hadoop,hdfs,apache-nifi,Hadoop,Hdfs,Apache Nifi,是否有任何可能的方法使用NiFi处理器将facebook数据提取到hdfs?到目前为止,我还没有找到关于这个案例的任何来源或样本……如果可能的话?程序是什么 您应该能够使用HTTP处理器(GetHttp、PostHttp、InvokeHttp)与Facebook API交互。对于OpenGraph API(可能还有其他API),您需要HTTPS,因此必须设置SSL上下文等。在解释如何做到这一点上,双方进行了很好的交流 一旦数据离开Facebook并进入您的流,您可以使用PutHDFS将文件写入H

是否有任何可能的方法使用NiFi处理器将facebook数据提取到hdfs?到目前为止,我还没有找到关于这个案例的任何来源或样本……如果可能的话?程序是什么

您应该能够使用HTTP处理器(GetHttp、PostHttp、InvokeHttp)与Facebook API交互。对于OpenGraph API(可能还有其他API),您需要HTTPS,因此必须设置SSL上下文等。在解释如何做到这一点上,双方进行了很好的交流


一旦数据离开Facebook并进入您的流,您可以使用PutHDFS将文件写入Hadoop。

我不知道Nifi,但您可以使用Flume获取facebok数据并存储在HDFS中。因为我在Nifi上工作,所以我只需要在Nifi中处理Facebook数据