Logging Chukwa&；抄写员

我正在使用Hadoop，但是对于日志记录，我需要一些东西。 但我不知道在Scribe和Chukwa之间登录哪个系统更好。 你们能告诉我吗？

---

如果有任何替代方案很容易与Hadoop混合，请告诉我。

我有一个替代方案供您选择：

Apache Flume由Cloudera构建，主要用于从HDFS中获取数据

每个系统都有其优缺点，并且在高规模下都存在一定的可靠性问题，但我可以说Flume是用java构建的，因此可以使用主要的HDFS库

---

我们使用flume跨多个节点将数据从我们的机器获取到HDFS和S3中。

我为您提供了另一种选择：

Apache Flume由Cloudera构建，主要用于从HDFS中获取数据

每个系统都有其优缺点，并且在高规模下都存在一定的可靠性问题，但我可以说Flume是用java构建的，因此可以使用主要的HDFS库

---

我们在许多节点上使用flume将数据从我们的机器获取到HDFS和S3中。

检查收集日志的工具的比较

检查收集日志的工具的比较

最好的是，它有很多接收器/源。在Github上还有更多。我真的很喜欢flume。我正在使用rpcSource，事实证明这有点喜怒无常。是的，我也不得不重写我自己的。但是它的其余部分很有用；）最好的是，它有很多汇/源。在Github上还有更多。我真的很喜欢flume。我正在使用rpcSource，事实证明这有点喜怒无常。是的，我也不得不重写我自己的。但是它的其余部分很有用；）