Apache nifi NiFi:使用HDFS文件作为查找

Apache nifi NiFi:使用HDFS文件作为查找,apache-nifi,Apache Nifi,我需要在NiFi作业中使用HDFS文件作为查找。这个HDFS文件包含两个字段id,name,我需要通过我的流传递id,并从HDFS文件中检索name。我的拼花地板snappy格式的HDFS文件。请让我知道我可以通过查找处理器实现这一点,还是应该采用不同的方法 任何工作流示例都会非常有用 提前谢谢大家 KumarHDFS作为一种查找方法可能效率很低,这可能是我们没有控制器服务的原因。您从哪里获取要在其上执行查找的文件?也许你可以用NiFi获取HDFS文件,然后做一个“反向查找”,在那里你可以用你试

我需要在NiFi作业中使用HDFS文件作为查找。这个HDFS文件包含两个字段id,name,我需要通过我的流传递id,并从HDFS文件中检索name。我的拼花地板snappy格式的HDFS文件。请让我知道我可以通过查找处理器实现这一点,还是应该采用不同的方法

任何工作流示例都会非常有用

提前谢谢大家


Kumar

HDFS作为一种查找方法可能效率很低,这可能是我们没有控制器服务的原因。您从哪里获取要在其上执行查找的文件?也许你可以用NiFi获取HDFS文件,然后做一个“反向查找”,在那里你可以用你试图查找的字段来丰富HDFS文件

话虽如此,NiFi确实有HBase查找服务,因此另一种方法是将HDFS文件放入HBase并以这种方式进行查找