Logstash 配置filebeat以从日志文件获取增量数据

Logstash 配置filebeat以从日志文件获取增量数据,logstash,filebeat,Logstash,Filebeat,我使用filebeat将日志数据流传输到logstash,但每当我向日志文件添加新行时,filebeat都会将整个数据发送到logstash。现在,如果新数据(增量数据)添加到我的日志文件中,我只希望数据流传输到日志存储。在filebeat.yml中是否有一些配置需要我处理。我当前的filebeat配置看起来像- filebeat: prospectors: - paths: - /Users/yogi/dev-tools/elastic_search/a

我使用filebeat将日志数据流传输到logstash,但每当我向日志文件添加新行时,filebeat都会将整个数据发送到logstash。现在,如果新数据(增量数据)添加到我的日志文件中,我只希望数据流传输到日志存储。在filebeat.yml中是否有一些配置需要我处理。我当前的filebeat配置看起来像-

filebeat:
  prospectors:
    -
      paths:
        - /Users/yogi/dev-tools/elastic_search/access_log/*.log
      input_type: log
      document_type: app_log
      ignore_older: 10m
      scan_frequency: 10s
output:
  logstash:
    hosts: ["localhost:5000"]
    bulk_max_size: 1024
  console:
    pretty: true
shipper:
logging:
  files:
    rotateeverybytes: 10485760 # = 10MB

您当前的Filebeat配置是什么?已在说明中更新。您当前的Filebeat配置是什么?已在说明中更新。