日志子系统 AMQP 附加器

该框架为一些流行的日志子系统提供日志附加器

  • logback(自 Spring AMQP 版本 1.4 起)

  • log4j2(自 Spring AMQP 版本 1.6 起)

Appender 的配置使用日志子系统中的正常机制,可用属性在以下部分中指定。

通用属性

以下属性适用于所有 appender

表 1. 通用 Appender 属性
属性 默认值 描述
 exchangeName
 logs

发布日志事件的交换机名称。

 exchangeType
 topic

发布日志事件的交换机类型 - 仅当 appender 声明交换机时才需要。请参阅 declareExchange

 routingKeyPattern
 %c.%p

用于生成路由键的日志子系统模式格式。

 applicationId

应用程序 ID - 如果模式包含 %X{applicationId},则将其添加到路由键中。

 senderPoolSize
 2

用于发布日志事件的线程数。

 maxSenderRetries
 30

如果代理不可用或出现其他错误,重试发送消息的次数。重试延迟如下:N ^ log(N),其中 N 是重试次数。

 addresses

以以下形式的代理地址的逗号分隔列表:host:port[,host:port]* - 覆盖 hostport

 host
 localhost

要连接的 RabbitMQ 主机。

 port
 5672

要连接的 RabbitMQ 端口。

 virtualHost
 /

要连接的 RabbitMQ 虚拟主机。

 username
 guest

连接时要使用的 RabbitMQ 用户。

 password
 guest

此用户的 RabbitMQ 密码。

 useSsl
 false

是否对 RabbitMQ 连接使用 SSL。请参阅 RabbitConnectionFactoryBean 和 配置 SSL

 verifyHostname
 true

为 TLS 连接启用服务器主机名验证。请参阅 RabbitConnectionFactoryBean 和 配置 SSL

 sslAlgorithm
 null

要使用的 SSL 算法。

 sslPropertiesLocation
 null

SSL 属性文件的位置。

 keyStore
 null

密钥库的位置。

 keyStorePassphrase
 null

密钥库的密码短语。

 keyStoreType
 JKS

密钥库类型。

 trustStore
 null

信任库的位置。

 trustStorePassphrase
 null

信任库的密码短语。

 trustStoreType
 JKS

信任库类型。

 saslConfig
 null (RabbitMQ client default applies)

saslConfig - 请参阅 RabbitUtils.stringToSaslConfig 的 javadoc 以获取有效值。

 contentType
 text/plain

日志消息的 content-type 属性。

 contentEncoding

日志消息的 content-encoding 属性。

 declareExchange
 false

是否在该 appender 启动时声明配置的交换机。另请参阅 durableautoDelete

 durable
 true

declareExchangetrue 时,持久性标志设置为该值。

 autoDelete
 false

declareExchangetrue 时,自动删除标志设置为该值。

 charset
 null

String转换为byte[]时使用的字符集。默认值:null(使用系统默认字符集)。如果当前平台不支持该字符集,我们将回退到使用系统字符集。

 deliveryMode
 PERSISTENT

PERSISTENTNON_PERSISTENT,用于确定RabbitMQ是否应持久化消息。

 generateId
 false

用于确定是否将messageId属性设置为唯一值。

 clientConnectionProperties
 null

用于向RabbitMQ连接添加自定义客户端属性的key:value对的逗号分隔列表。

 addMdcAsHeaders
 true

在引入此属性之前,MDC 属性始终被添加到 RabbitMQ 消息头中。这可能会导致大型 MDC 出现问题,因为 RabbitMQ 对所有头部的缓冲区大小有限,并且该缓冲区非常小。引入此属性是为了避免在大型 MDC 情况下出现问题。默认情况下,此值设置为true,以保持向后兼容性。false 将关闭将 MDC 序列化到头部的操作。请注意,JsonLayout 默认情况下将 MDC 添加到消息中。

Log4j 2 附加器

以下示例展示了如何配置 Log4j 2 附加器

<Appenders>
    ...
    <RabbitMQ name="rabbitmq"
        addresses="foo:5672,bar:5672" user="guest" password="guest" virtualHost="/"
        exchange="log4j2" exchangeType="topic" declareExchange="true" durable="true" autoDelete="false"
        applicationId="myAppId" routingKeyPattern="%X{applicationId}.%c.%p"
        contentType="text/plain" contentEncoding="UTF-8" generateId="true" deliveryMode="NON_PERSISTENT"
        charset="UTF-8"
        senderPoolSize="3" maxSenderRetries="5"
        addMdcAsHeaders="false">
    </RabbitMQ>
</Appenders>

从 1.6.10 和 1.7.3 版本开始,默认情况下,log4j2 附加器在调用线程上将消息发布到 RabbitMQ。这是因为 Log4j 2 默认情况下不会创建线程安全的事件。如果代理关闭,则使用maxSenderRetries进行重试,重试之间没有延迟。如果您希望恢复在单独线程(senderPoolSize)上发布消息的先前行为,可以将async属性设置为true。但是,您还需要配置 Log4j 2 以使用DefaultLogEventFactory而不是ReusableLogEventFactory。一种方法是设置系统属性-Dlog4j2.enable.threadlocals=false。如果您使用异步发布和ReusableLogEventFactory,则事件很可能由于串扰而被破坏。

Logback 附加器

以下示例展示了如何配置 logback 附加器

<appender name="AMQP" class="org.springframework.amqp.rabbit.logback.AmqpAppender">
    <layout>
        <pattern><![CDATA[ %d %p %t [%c] - <%m>%n ]]></pattern>
    </layout>
    <addresses>foo:5672,bar:5672</addresses>
    <abbreviation>36</abbreviation>
    <includeCallerData>false</includeCallerData>
    <applicationId>myApplication</applicationId>
    <routingKeyPattern>%property{applicationId}.%c.%p</routingKeyPattern>
    <generateId>true</generateId>
    <charset>UTF-8</charset>
    <durable>false</durable>
    <deliveryMode>NON_PERSISTENT</deliveryMode>
    <declareExchange>true</declareExchange>
    <addMdcAsHeaders>false</addMdcAsHeaders>
</appender>

从 1.7.1 版本开始,Logback 的 AmqpAppender 提供了一个 includeCallerData 选项,默认值为 false。提取调用者数据可能相当昂贵,因为日志事件必须创建一个可抛出对象并检查它以确定调用位置。因此,默认情况下,当事件添加到事件队列时,不会提取与事件关联的调用者数据。您可以通过将 includeCallerData 属性设置为 true 来配置 appender 以包含调用者数据。

从 2.0.0 版本开始,Logback 的 AmqpAppender 支持使用 encoder 选项的 Logback 编码器encoderlayout 选项是互斥的。

自定义消息

默认情况下,AMQP appender 会填充以下消息属性

  • deliveryMode

  • contentType

  • contentEncoding,如果已配置

  • messageId,如果已配置 generateId

  • 日志事件的 timestamp

  • appId,如果已配置 applicationId

此外,它们还会使用以下值填充标题

  • 日志事件的 categoryName

  • 日志事件的级别

  • thread:发生日志事件的线程名称

  • 日志事件调用堆栈跟踪的位置

  • 所有 MDC 属性的副本(除非将 addMdcAsHeaders 设置为 false

每个 appender 都可以被子类化,让您可以在发布之前修改消息。以下示例展示了如何自定义日志消息

public class MyEnhancedAppender extends AmqpAppender {

    @Override
    public Message postProcessMessageBeforeSend(Message message, Event event) {
        message.getMessageProperties().setHeader("foo", "bar");
        return message;
    }

}

从 2.2.4 版本开始,log4j2 的 AmqpAppender 可以使用 @PluginBuilderFactory 扩展,并扩展 AmqpAppender.Builder

@Plugin(name = "MyEnhancedAppender", category = "Core", elementType = "appender", printObject = true)
public class MyEnhancedAppender extends AmqpAppender {

	public MyEnhancedAppender(String name, Filter filter, Layout<? extends Serializable> layout,
			boolean ignoreExceptions, AmqpManager manager, BlockingQueue<Event> eventQueue, String foo, String bar) {
		super(name, filter, layout, ignoreExceptions, manager, eventQueue);

	@Override
	public Message postProcessMessageBeforeSend(Message message, Event event) {
			message.getMessageProperties().setHeader("foo", "bar");
		return message;
	}

	@PluginBuilderFactory
	public static Builder newBuilder() {
		return new Builder();
	}

	protected static class Builder extends AmqpAppender.Builder {

		@Override
		protected AmqpAppender buildInstance(String name, Filter filter, Layout<? extends Serializable> layout,
				boolean ignoreExceptions, AmqpManager manager, BlockingQueue<Event> eventQueue) {
			return new MyEnhancedAppender(name, filter, layout, ignoreExceptions, manager, eventQueue);
		}
	}

}

自定义客户端属性

您可以通过添加字符串属性或更复杂的属性来添加自定义客户端属性。

简单字符串属性

每个 appender 都支持向 RabbitMQ 连接添加客户端属性。

以下示例展示了如何为 logback 添加自定义客户端属性

<appender name="AMQP" ...>
    ...
    <clientConnectionProperties>thing1:thing2,cat:hat</clientConnectionProperties>
    ...
</appender>
log4j2
<Appenders>
    ...
    <RabbitMQ name="rabbitmq"
        ...
        clientConnectionProperties="thing1:thing2,cat:hat"
        ...
    </RabbitMQ>
</Appenders>

这些属性是 key:value 对的逗号分隔列表。键和值不能包含逗号或冒号。

这些属性在查看连接时会显示在 RabbitMQ 管理界面上。

Logback 高级技巧

您可以对 Logback 附加器进行子类化。这样做可以让您在建立连接之前修改客户端连接属性。以下示例展示了如何做到这一点

public class MyEnhancedAppender extends AmqpAppender {

    private String thing1;

    @Override
    protected void updateConnectionClientProperties(Map<String, Object> clientProperties) {
        clientProperties.put("thing1", this.thing1);
    }

    public void setThing1(String thing1) {
        this.thing1 = thing1;
    }

}

然后,您可以将 <thing1>thing2</thing1> 添加到 logback.xml 中。

对于像前面示例中显示的字符串属性,可以使用前面的技巧。子类允许添加更丰富的属性(例如添加 Map 或数字属性)。

提供自定义队列实现

AmqpAppenders 使用 BlockingQueue 异步将日志事件发布到 RabbitMQ。默认情况下,使用 LinkedBlockingQueue。但是,您可以提供任何类型的自定义 BlockingQueue 实现。

以下示例展示了如何为 Logback 做到这一点

public class MyEnhancedAppender extends AmqpAppender {

    @Override
    protected BlockingQueue<Event> createEventQueue() {
        return new ArrayBlockingQueue();
    }

}

Log4j 2 附加器支持使用 BlockingQueueFactory,如下例所示

<Appenders>
    ...
    <RabbitMQ name="rabbitmq"
              bufferSize="10" ... >
        <ArrayBlockingQueue/>
    </RabbitMQ>
</Appenders>