没有hadoop的Apache Flume

没有hadoop的Apache Flume,apache,hadoop,flume,Apache,Hadoop,Flume,我不熟悉flume和hadoop。我有一个疑问:我们是否可以在不配置hadoop的情况下使用flume 任何人都可以分享他们的知识吗?是的,Flume可以完全独立于hadoop工作。但是,它确实对HDFS有一些包依赖性。如果您不打算使用HDFS接收器,您可以在没有Hadoop的情况下使用它!至于我最近的flume配置[source=Twitter,channel=memory],我使用loggerSink将流式“数据”放入文件系统(unix文件目录)中的日志文件中,您只需要做一些事情使数据有意义

我不熟悉flume和hadoop。我有一个疑问:我们是否可以在不配置hadoop的情况下使用flume


任何人都可以分享他们的知识吗?

是的,Flume可以完全独立于hadoop工作。但是,它确实对HDFS有一些包依赖性。如果您不打算使用HDFS接收器,您可以在没有Hadoop的情况下使用它!至于我最近的flume配置[source=Twitter,channel=memory],我使用loggerSink将流式“数据”放入文件系统(unix文件目录)中的日志文件中,您只需要做一些事情使数据有意义。尽管作为flume安装的一部分,还有其他可用的接收器(HDFSSink、HBaseSink、IRC、文件滚动,查看更多详细信息和用法),或者你可以创建一个新的。

@Amar…我们可以使用文件滚动接收器吗?谢谢你的回复…你可以共享文件滚动的配置文件吗…我有…但它显示目录不是空的这是我用于文件滚动接收器的配置:dataplatform.sinks.sink3.type=文件滚动dataplatform.sinks.sink3.sink.directory=/主/水槽/水槽水槽水槽/dataplatform.sinks.sink3.sink.rollInterval=60 dataplatform.sinks.sink3.batchSize=1000