logstash - 配置 filebeat 以从日志文件中获取增量数据

Question

我正在使用filebeat将日志数据流式传输到logstash，但是每当我在日志文件中附加新行时，filebeat都会将整个数据发送到logstash。现在我想如果新数据（增量数据）被添加到我的日志文件中，那么只有数据被流式传输到logstash。在 filebeat.yml 中是否有一些我需要处理的配置。我当前的 filebeat 配置看起来像 -

filebeat:
  prospectors:
    -
      paths:
        - /Users/yogi/dev-tools/elastic_search/access_log/*.log
      input_type: log
      document_type: app_log
      ignore_older: 10m
      scan_frequency: 10s
output:
  logstash:
    hosts: ["localhost:5000"]
    bulk_max_size: 1024
  console:
    pretty: true
shipper:
logging:
  files:
    rotateeverybytes: 10485760 # = 10MB