Mongodb 实时或近实时分析应用程序设计注意事项

我正在设计和实现一个（近）实时网络分析引擎。这类似于和。预计每天将有近1.5亿个请求。我们有5到8台机器，每台都有2.5GHz（8核）CPU和16 GB RAM

我正在寻找满足这一需求的水平可扩展解决方案。目前，我正在为此分析mongo-hadoop组合。据我所知，到目前为止，很难将所有数据保存在一个地方（一台机器）进行分析。因此，Hadoop作为数据处理器和MongoDB作为数据存储在我看来是一个很好的组合

---

对于这种应用程序，是否有一个标准或（我应该说）一个经过验证的体系结构？我应该考虑哪些设计因素？mongo-hadoop组合对某人有用吗？

我想你已经读过了吧

---

这里有切分配置的更多细节和工作示例-

是的，我已经阅读了文档。但这并没有提到适配器是否也适用于分片配置。我要找的不仅仅是一个简短的例子，而是更多的细节。是的，它确实适用于分片配置。这里有很好的演示示例-Hadoop和real time？没有，我没听说。