Warning: file_get_contents(/data/phpspider/zhask/data//catemap/9/java/304.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Java hbase将memstore刷新大小设置为0_Java_Hadoop_Hbase - Fatal编程技术网

Java hbase将memstore刷新大小设置为0

Java hbase将memstore刷新大小设置为0,java,hadoop,hbase,Java,Hadoop,Hbase,在我们的hbase群集中,memstore刷新大小为128 mb。为了向表中插入数据,我们只使用批量加载工具。由于批量加载绕过了memstore,所以它们永远不会被使用,所以我们希望最小化memstore刷新大小。但在hbase的许多重要计算中使用了memstore刷新大小,因此 region split size = Min (R^2 * “hbase.hregion.memstore.flush.size”, “hbase.hregion.max.filesize”) 因此,将memsto

在我们的hbase群集中,memstore刷新大小为128 mb。为了向表中插入数据,我们只使用批量加载工具。由于批量加载绕过了memstore,所以它们永远不会被使用,所以我们希望最小化memstore刷新大小。但在hbase的许多重要计算中使用了memstore刷新大小,因此

region split size = Min (R^2 * “hbase.hregion.memstore.flush.size”, “hbase.hregion.max.filesize”)
因此,将memstore值设置得更小,例如设置为“0”,会导致一些其他问题。
那样的话,你有什么建议。将memstore size设置为128可以为region server中的数十个区域保留一些内存,我们希望将其删除。

这是的邮件dev@hbase.apache.org多亏了他们:如果您只是批量加载到HBase中,那么memstore刷新大小应该无关紧要。您很可能希望降低memstore的上限/全局限制。