1

我想用类似的注释来注释一些 kubernetes pod，并且please_log_with_parser: myparser只使用给定的解析器将这些 pod 的日志处理到我们的弹性搜索集群。fluentbit

对于 fluentbit 我只知道 annotation fluentbit.io/exclude，但这将导致必须对所有其他 pod 进行注释。- 是否可以告诉 fluentbit只处理带有标签的日志，或者在没有适当注释的情况下丢弃所有消息？

是否有可以替代 fluentbit 的替代方案？

4

1 回答 1

2

一种选择是使用, 和filter的组合kubernetes，如本例所示。nestgrep

您可以使用kubernetes过滤器创建如下元数据：

{
    "kubernetes": {
        "pod_name": "myapp-0",
        "namespace_name": "default",
        "pod_id": "216cd7ae-1c7e-11e8-bb40-000c298df552",
        "annotations": {
            "please_log_with_parser": "myparser"
        },
        "host": "minikube",
        "container_name": "myapp",
        "docker_id": "370face382c7603fdd309d8c6aaaf434fd98b92421ce7c7c8aafe7697d4aa362"
    }
}

然后使用nest将注释提升到顶层。然后用于grep丢弃仅在存在该注释时保留记录。

我的掌舵值现在看起来像这样：

rawConfig: |-
 @INCLUDE fluent-bit-service.conf
 @INCLUDE fluent-bit-input.conf
 @INCLUDE fluent-bit-filter.conf
 [FILTER]
     Name         nest
     Match        *
     Operation    lift
     Nested_under kubernetes
     Add_prefix   kubernetes_
 [FILTER]
     Name         nest
     Match        *
     Operation    lift
     Nested_under kubernetes_annotations
     Add_prefix   kubernetes_annotations_
 [FILTER]
     Name    grep
     Match   *
     Regex   kubernetes_annotations_fluentbit.io/parser .*
 [FILTER]
     Name         nest
     Match        *
     Operation    nest
     Wildcard     kubernetes_annotations_*
     Nest_under   kubernetes_annotations
     Remove_prefix   kubernetes_annotations_
 [FILTER]
     Name         nest
     Match        *
     Operation    nest
     Wildcard     kubernetes_*
     Nest_under   kubernetes
     Remove_prefix  kubernetes_
 @INCLUDE fluent-bit-output.conf
于 2020-01-16T15:46:45.163 回答