Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/hadoop/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Hadoop 多个应用程序使用JBOD磁盘时避免I/O瓶颈的最佳做法_Hadoop_<img Src="//i.stack.imgur.com/RUiNP.png" Height="16" Width="18" Alt="" Class="sponsor Tag Img">elasticsearch_Io_Apache Kafka_Disk - Fatal编程技术网 elasticsearch,io,apache-kafka,disk,Hadoop,elasticsearch,Io,Apache Kafka,Disk" /> elasticsearch,io,apache-kafka,disk,Hadoop,elasticsearch,Io,Apache Kafka,Disk" />

Hadoop 多个应用程序使用JBOD磁盘时避免I/O瓶颈的最佳做法

Hadoop 多个应用程序使用JBOD磁盘时避免I/O瓶颈的最佳做法,hadoop,elasticsearch,io,apache-kafka,disk,Hadoop,elasticsearch,Io,Apache Kafka,Disk,我使用的是运行Kafka Spark HBase和Elasticsearch服务的裸金属盒。这些裸金属盒连接到JBOD驱动器 我发现我的I/O瓶颈难以忍受 因此,我想了解以下几点: Kafka、Elasticsearch和HBase都是I/O密集型的。因此,将这些服务部署在不同的盒子上是否有意义,或者它们是否部署在同一个盒子上并不重要。在同一个盒子上部署有助于我在使用裸机时进行扩展。当Kafka、HBase和ES从同一个框中同时发出多个I/O请求时,操作系统级别是否存在争用条件? 欣赏你的想法

我使用的是运行Kafka Spark HBase和Elasticsearch服务的裸金属盒。这些裸金属盒连接到JBOD驱动器

我发现我的I/O瓶颈难以忍受

因此,我想了解以下几点: Kafka、Elasticsearch和HBase都是I/O密集型的。因此,将这些服务部署在不同的盒子上是否有意义,或者它们是否部署在同一个盒子上并不重要。在同一个盒子上部署有助于我在使用裸机时进行扩展。当Kafka、HBase和ES从同一个框中同时发出多个I/O请求时,操作系统级别是否存在争用条件? 欣赏你的想法