Hadoop 多个应用程序使用JBOD磁盘时避免I/O瓶颈的最佳做法
我使用的是运行Kafka Spark HBase和Elasticsearch服务的裸金属盒。这些裸金属盒连接到JBOD驱动器 我发现我的I/O瓶颈难以忍受 因此,我想了解以下几点: Kafka、Elasticsearch和HBase都是I/O密集型的。因此,将这些服务部署在不同的盒子上是否有意义,或者它们是否部署在同一个盒子上并不重要。在同一个盒子上部署有助于我在使用裸机时进行扩展。当Kafka、HBase和ES从同一个框中同时发出多个I/O请求时,操作系统级别是否存在争用条件? 欣赏你的想法Hadoop 多个应用程序使用JBOD磁盘时避免I/O瓶颈的最佳做法,hadoop,
elasticsearch,io,apache-kafka,disk,Hadoop,
elasticsearch,Io,Apache Kafka,Disk,我使用的是运行Kafka Spark HBase和Elasticsearch服务的裸金属盒。这些裸金属盒连接到JBOD驱动器 我发现我的I/O瓶颈难以忍受 因此,我想了解以下几点: Kafka、Elasticsearch和HBase都是I/O密集型的。因此,将这些服务部署在不同的盒子上是否有意义,或者它们是否部署在同一个盒子上并不重要。在同一个盒子上部署有助于我在使用裸机时进行扩展。当Kafka、HBase和ES从同一个框中同时发出多个I/O请求时,操作系统级别是否存在争用条件? 欣赏你的想法