elasticsearch 上传时elasticsearch批量插入异常,elasticsearch,elasticsearch-bulk,elasticsearch,elasticsearch Bulk" /> elasticsearch 上传时elasticsearch批量插入异常,elasticsearch,elasticsearch-bulk,elasticsearch,elasticsearch Bulk" />

elasticsearch 上传时elasticsearch批量插入异常

elasticsearch 上传时elasticsearch批量插入异常,elasticsearch,elasticsearch-bulk,elasticsearch,elasticsearch Bulk,尝试批量插入elasticsearchv6.6.0时遇到异常 早些时候天气很好 以下是异常消息: Elasticsearch bulk insert exception, TransportError(503, 'circuit_breaking_exception', '[parent] Data too large, data for [<http_request>] would be [746384154/711.8mb], which is larger than the l

尝试批量插入elasticsearch
v6.6.0
时遇到异常

早些时候天气很好

以下是异常消息:

Elasticsearch bulk insert exception, TransportError(503, 'circuit_breaking_exception', '[parent] Data too large, data for [<http_request>] would be [746384154/711.8mb], which is larger than the limit of [745517875/710.9mb], usages [request=0/0b, fielddata=626151547/597.1mb, in_flight_requests=889937/869kb, accounting=119342670/113.8mb]')
Elasticsearch批量插入异常,传输错误(503,‘电路断路异常’,“[parent]数据太大,[]的数据将为[746384154/711.8mb],大于[745517875/710.9mb]的限制,使用[request=0/0b,fielddata=626151547/597.1mb,飞行中的请求=889937/869kb,记帐=119342670/113.8mb])

如何配置数据限制?由于异常说明
数据太大,超过限制

断路器是一种防止OutOfMemory异常的机制。它设置为堆的70%。

我不建议增加断路器的限值,因为您会遇到OOM异常。显然,字段数据导致堆(内存)已满。 一些解决方案:

  • 增加堆大小
  • 使用单据值而不是字段数据
  • 清除字段数据缓存(例如每小时一次)
在elastic的某些版本(我认为是6.3)中,断路器有一个bug,更新后,问题得到了解决