1

我在 ubuntu 服务器 14.04 上安装了 ELK。现在我想将我所有的 jboss 服务器日志发送到这里（使用 log4j）。

logstash 配置：输入 conf 文件：

input {
    log4j {
        type => "log4j"
        port => 5000
    }
}

过滤配置文件：

filter {
    if [type] == "log4j" {
        grok {
            match => {"message" => MY_GROK_PARSE}
        }
    }
}

和输出文件：

output {
    elasticsearch {
        embedded => true
    }
}

并完成 log4j appender：

<appender name="LOGSTASH" class="org.apache.log4j.net.SocketAppender"> 
    <param name="Port" value="5000"/>
    <param name="RemoteHost" value="XXX.XXX.XXX.XXX"/> <!-- There is a real adress here ;-) -->
    <param name="ReconnectionDelay" value="50000"/> 
    <param name="LocationInfo" value="true"/> 
    <layout class="org.apache.log4j.PatternLayout">
     <param name="ConversionPattern" value="%d %-5p [%c{1}] %m%n" />
    </layout>
</appender>

但是这种配置没有任何反应。所以我不知道我误解了什么。我的其他附加程序（控制台和本地文件）工作正常。elasticsearch 日志显示任何信息/活动。

编辑： 关于我的 jboss-log4j.xml 的更多信息：

<appender name="Async" class="org.apache.log4j.AsyncAppender">
    <appender-ref ref="FILE" />
    <appender-ref ref="CONSOLE" />
    <appender-ref ref="LOGSTASH" />
</appender>

<root>
    <priority value="INFO" />
    <appender-ref ref="Async" />
</root>
4

2 回答 2

4

我知道这是一篇旧文章，但有人可能会觉得它很有用 - log4j SocketAppender 无法使用布局，请参阅SocketAppender 的文档

SocketAppenders 不使用布局。他们将序列化的 LoggingEvent 对象发送到服务器端。

您也不需要在 logstash 配置中添加额外的过滤器。Logstash log4j 插件最小配置就足够了

input {
   log4j {
      data_timeout => 5
      host => "0.0.0.0"
      mode => "server"
      port => 4560
      debug => true
      type => "log4j"
   }
   ... 
}
于 2015-09-09T08:19:45.997 回答
1

在这种情况下，您可以将其直接发送给 Elastic。没有理由先通过 LogStash。您可以轻松地使用过滤器来过滤掉您不感兴趣的消息。

如果你想使用它，我已经在Log4J2 Elastic REST Appender写了这个 appender。它能够在将日志事件发送到 Elastic 之前根据时间和/或事件数量缓冲日志事件（使用 _bulk API 以便一次性发送所有事件）。它已发布到 Maven Central，因此非常简单。

于 2017-10-20T10:43:37.957 回答