Kafka 流应用程序中的基于事件类型的路由

基于常规消息通道的 Binder 中提供的路由功能在 Kafka Streams Binder 中不受支持。但是,Kafka Streams Binder 仍通过入站记录上的事件类型记录头提供路由功能。

要启用基于事件类型的路由,应用程序必须提供以下属性。

spring.cloud.stream.kafka.streams.bindings.<binding-name>.consumer.eventTypes.

这可以是逗号分隔的值。

例如,让我们假设我们有此函数

@Bean
public Function<KStream<Integer, Foo>, KStream<Integer, Foo>> process() {
    return input -> input;
}

我们还假设我们只希望执行此函数中的业务逻辑,如果传入记录的事件类型为 foobar。可以使用绑定上的 eventTypes 属性如下所示来表示。

spring.cloud.stream.kafka.streams.bindings.process-in-0.consumer.eventTypes=foo,bar

现在,当应用程序运行时,Binder 会检查每个传入记录的 event_type 头,并查看其值是否设置为 foobar。如果没有找到任何一个,则将跳过函数执行。

默认情况下,Binder 期望记录头键为 event_type,但可以按绑定更改该键。例如,如果我们想将此绑定上的头键更改为 my_event 而不是默认值,则可以如下更改。

spring.cloud.stream.kafka.streams.bindings.process-in-0.consumer.eventTypeHeaderKey=my_event.

在 Kafkfa Streams 绑定器中使用事件路由功能时,它使用字节数组 Serde 反序列化所有传入记录。如果记录头与事件类型匹配,则仅使用实际 Serde 使用已配置或推断的 Serde 执行适当的反序列化。如果在绑定上设置了反序列化异常处理程序,则会引入问题,因为预期的反序列化仅在堆栈中发生,从而导致意外错误。为了解决此问题,可以在绑定上设置以下属性,以强制绑定器使用已配置或推断的 Serde,而不是字节数组 Serde

spring.cloud.stream.kafka.streams.bindings.<process-in-0>.consumer.useConfiguredSerdeWhenRoutingEvents

这样,应用程序在使用事件路由功能时可以立即检测到反序列化问题,并可以采取适当的处理决策。