Apache Pulsar 支持

Apache Pulsar 通过提供对 Spring for Apache Pulsar 项目的自动配置来获得支持。spring-doc.cadn.net.cn

当类路径中存在 org.springframework.pulsar:spring-pulsar 时,Spring Boot 将自动配置并注册用于 Apache Pulsar 的 Spring 组件。spring-doc.cadn.net.cn

有一个 spring-boot-starter-pulsar 起步依赖,可方便地收集所需依赖以供使用。spring-doc.cadn.net.cn

连接到 Pulsar

当您使用 Pulsar starter 时,Spring Boot 将自动配置并注册一个 PulsarClient Bean。spring-doc.cadn.net.cn

默认情况下,应用程序会尝试连接到本地的 Pulsar 实例,地址为 pulsar://localhost:6650。 可以通过设置 spring.pulsar.client.service-url 属性为其他值来调整该配置。spring-doc.cadn.net.cn

该值必须是一个有效的 Pulsar 协议 URL

你可以通过指定任意以 spring.pulsar.client.* 为前缀的应用程序属性来配置客户端。spring-doc.cadn.net.cn

如果您需要对配置进行更多控制,请考虑注册一个或多个 PulsarClientBuilderCustomizer Bean。spring-doc.cadn.net.cn

身份验证

要连接到需要身份验证的 Pulsar 集群,您需要通过设置 pluginClassName 来指定要使用的身份验证插件,以及该插件所需的任何参数。 您可以将这些参数设置为一个映射(map),其中键为参数名称,值为对应的参数值。 以下示例展示了如何配置 AuthenticationOAuth2 插件。spring-doc.cadn.net.cn

spring.pulsar.client.authentication.plugin-class-name=org.apache.pulsar.client.impl.auth.oauth2.AuthenticationOAuth2
spring.pulsar.client.authentication.param.issuerUrl=https://auth.server.cloud/
spring.pulsar.client.authentication.param.privateKey=file:///Users/some-key.json
spring.pulsar.client.authentication.param.audience=urn:sn:acme:dev:my-instance
spring:
  pulsar:
    client:
      authentication:
        plugin-class-name: org.apache.pulsar.client.impl.auth.oauth2.AuthenticationOAuth2
        param:
          issuerUrl: https://auth.server.cloud/
          privateKey: file:///Users/some-key.json
          audience: urn:sn:acme:dev:my-instance

您需要确保在 spring.pulsar.client.authentication.param.* 下定义的名称与您的认证插件所期望的名称完全匹配(通常采用驼峰命名法)。 Spring Boot 不会对这些条目尝试任何形式的宽松绑定。spring-doc.cadn.net.cn

例如,如果你想为 AuthenticationOAuth2 认证插件配置 issuer URL,则必须使用 spring.pulsar.client.authentication.param.issuerUrl。 如果你使用其他形式,例如 issuerurlissuer-url,该设置将不会应用到插件中。spring-doc.cadn.net.cn

这种缺乏宽松绑定的特性也使得使用环境变量来设置认证参数变得有问题,因为在转换过程中会丢失大小写敏感性。 如果你使用环境变量来设置这些参数,那么你需要按照 Apache Pulsar 的 Spring 参考文档中的这些步骤进行操作,才能使其正常工作。spring-doc.cadn.net.cn

SSL

默认情况下,Pulsar 客户端以明文方式与 Pulsar 服务通信。 您可以按照 Spring for Apache Pulsar 参考文档中的这些步骤来启用 TLS 加密。spring-doc.cadn.net.cn

有关客户端和认证的完整详细信息,请参阅 Apache Pulsar 的 Spring 参考文档spring-doc.cadn.net.cn

连接到 Pulsar 管理端

Spring for Apache Pulsar 的 PulsarAdministration 客户端也已自动配置。spring-doc.cadn.net.cn

默认情况下,应用程序会尝试连接到位于 http://localhost:8080 的本地 Pulsar 实例。 可以通过将 spring.pulsar.admin.service-url 属性设置为格式为 (http|https)://<host>:<port> 的其他值来进行调整。spring-doc.cadn.net.cn

如果您需要对配置进行更多控制,请考虑注册一个或多个 PulsarAdminBuilderCustomizer Bean。spring-doc.cadn.net.cn

身份验证

当访问需要身份验证的 Pulsar 集群时,管理客户端需要与常规 Pulsar 客户端相同的安全部分配置。 您可以通过将 #messaging.pulsar.connecting.auth 替换为 spring.pulsar.client.authentication 来使用前述的身份验证配置spring-doc.cadn.net.cn

要在启动时创建主题,请添加一个类型为 PulsarTopic 的 Bean。 如果该主题已存在,则该 Bean 将被忽略。

发送消息

Spring 的 PulsarTemplate 是自动配置的,您可以使用它来发送消息,如下例所示:spring-doc.cadn.net.cn

import org.springframework.pulsar.core.PulsarTemplate;
import org.springframework.stereotype.Component;

@Component
public class MyBean {

	private final PulsarTemplate<String> pulsarTemplate;

	public MyBean(PulsarTemplate<String> pulsarTemplate) {
		this.pulsarTemplate = pulsarTemplate;
	}

	public void someMethod() {
		this.pulsarTemplate.send("someTopic", "Hello");
	}

}
import org.apache.pulsar.client.api.PulsarClientException
import org.springframework.pulsar.core.PulsarTemplate
import org.springframework.stereotype.Component

@Component
class MyBean(private val pulsarTemplate: PulsarTemplate<String>) {

	@Throws(PulsarClientException::class)
	fun someMethod() {
		pulsarTemplate.send("someTopic", "Hello")
	}

}

PulsarTemplate 依赖于 PulsarProducerFactory 来创建底层的 Pulsar 生产者。 Spring Boot 自动配置也提供了该生产者工厂,默认情况下,它会缓存所创建的生产者。 您可以通过指定任何以 spring.pulsar.producer.*spring.pulsar.producer.cache.* 为前缀的应用程序属性来配置生产者工厂和缓存设置。spring-doc.cadn.net.cn

如果您需要对生产者工厂配置进行更多控制,可以考虑注册一个或多个 ProducerBuilderCustomizer Bean。 这些定制器将应用于所有创建的生产者。 您还可以在发送消息时传入一个 ProducerBuilderCustomizer,以仅影响当前生产者。spring-doc.cadn.net.cn

如果您需要对发送的消息进行更多控制,可以在发送消息时传入一个 TypedMessageBuilderCustomizerspring-doc.cadn.net.cn

接收消息

当 Apache Pulsar 基础设施存在时,任何 Bean 都可以使用 @PulsarListener 进行注解,以创建监听器端点。 以下组件在 someTopic 主题上创建了一个监听器端点:spring-doc.cadn.net.cn

import org.springframework.pulsar.annotation.PulsarListener;
import org.springframework.stereotype.Component;

@Component
public class MyBean {

	@PulsarListener(topics = "someTopic")
	public void processMessage(String content) {
		// ...
	}

}
import org.springframework.pulsar.annotation.PulsarListener
import org.springframework.stereotype.Component

@Component
class MyBean {

	@PulsarListener(topics = ["someTopic"])
	fun processMessage(content: String?) {
		// ...
	}

}

Spring Boot 自动配置提供了 PulsarListener 所需的所有组件,例如 PulsarListenerContainerFactory 及其用于构建底层 Pulsar 消费者的消费者工厂。 您可以通过指定任何以 spring.pulsar.listener.*spring.pulsar.consumer.* 为前缀的应用程序属性来配置这些组件。spring-doc.cadn.net.cn

如果您需要对消费者工厂的配置进行更多控制,可以考虑注册一个或多个 ConsumerBuilderCustomizer Bean。 这些定制器将应用于由该工厂创建的所有消费者,因此也适用于所有 @PulsarListener 实例。 您还可以通过设置 @PulsarListener 注解的 consumerCustomizer 属性来自定义单个监听器。spring-doc.cadn.net.cn

如果你需要对实际的容器工厂配置进行更精细的控制,请考虑注册一个或多个 PulsarContainerFactoryCustomizer<ConcurrentPulsarListenerContainerFactory<?>> Bean。spring-doc.cadn.net.cn

读取消息

Pulsar Reader 接口允许应用程序手动管理游标。 当您使用 Reader 连接到一个主题时,需要指定 Reader 在连接到该主题时从哪条消息开始读取。spring-doc.cadn.net.cn

当 Apache Pulsar 基础设施存在时,任何 Bean 都可以使用 @PulsarReader 进行注解,以通过 reader 消费消息。 以下组件创建一个 reader 端点,该端点从 someTopic 主题的开头开始读取消息:spring-doc.cadn.net.cn

import org.springframework.pulsar.annotation.PulsarReader;
import org.springframework.stereotype.Component;

@Component
public class MyBean {

	@PulsarReader(topics = "someTopic", startMessageId = "earliest")
	public void processMessage(String content) {
		// ...
	}

}
import org.springframework.pulsar.annotation.PulsarReader
import org.springframework.stereotype.Component

@Component
class MyBean {

	@PulsarReader(topics = ["someTopic"], startMessageId = "earliest")
	fun processMessage(content: String?) {
		// ...
	}

}

@PulsarReader 依赖 PulsarReaderFactory 来创建底层的 Pulsar 读取器。 Spring Boot 自动配置提供了该读取器工厂,可以通过设置任何以 spring.pulsar.reader.* 为前缀的应用程序属性来自定义它。spring-doc.cadn.net.cn

如果您需要对读取器工厂的配置进行更精细的控制,可以考虑注册一个或多个 ReaderBuilderCustomizer Bean。 这些定制器将应用于由该工厂创建的所有读取器,因此也适用于所有 @PulsarReader 实例。 您还可以通过设置 @PulsarReader 注解的 readerCustomizer 属性来定制单个监听器。spring-doc.cadn.net.cn

如果你需要对实际的容器工厂配置进行更精细的控制,请考虑注册一个或多个 PulsarContainerFactoryCustomizer<DefaultPulsarReaderContainerFactory<?>> Bean。spring-doc.cadn.net.cn

有关上述任一组件的更多详细信息,以及了解其他可用功能,请参阅 Apache Pulsar 的 Spring 参考文档

事务支持

Spring for Apache Pulsar 在使用 PulsarTemplate@PulsarListener 时支持事务。spring-doc.cadn.net.cn

spring.pulsar.transaction.enabled 属性设置为 true 将会:spring-doc.cadn.net.cn

@PulsarListenertransactional 属性可用于微调事务与监听器的使用时机。spring-doc.cadn.net.cn

为了更灵活地控制 Spring for Apache Pulsar 的事务功能,您应当定义自己的 PulsarTemplate 和/或 ConcurrentPulsarListenerContainerFactory Bean。 如果默认自动配置的 PulsarTransactionManager 不适用,您也可以定义一个 PulsarAwareTransactionManager Bean。spring-doc.cadn.net.cn

额外的 Pulsar 属性

自动配置所支持的属性列在附录的集成属性部分。 请注意,这些属性(使用连字符或驼峰命名法)在大多数情况下直接映射到 Apache Pulsar 的配置属性。 有关详细信息,请参阅 Apache Pulsar 官方文档。spring-doc.cadn.net.cn

只有 Pulsar 支持的部分属性可以通过 PulsarProperties 类直接使用。 如果您希望使用其他未直接支持的属性来调整自动配置的组件,可以使用上述每个组件所支持的自定义器。spring-doc.cadn.net.cn