Apache Pulsar的Connector连接器使用

1. 背景

虽然可以使用produce和consume的API进行消息的发送和消费,但Pulsar提供了一种更简便的方式,用来同步其它系统的数据到Pulsar的topic,和将Pulsar的topic的数据发送到其它系统

2. 介绍

Pulsar IO分为Input和Output两个模块。支持的Source Connector和Sink Connector可以参考Pulsar官网Connector部分

3. Pulsar Flink Connector

3.1 Flink读取Pulsar消息

Source可以使用Flink官网DataStream Connector提供的Pulsar Connector

3.1 Flink发送消息到Pulsar

Flink官网DataStream Connector提供的Pulsar Connector没有Sink。使用io.streamnative.connectors提供的pulsar-flink-connector版本1.14.3.0,只有Scala2.11版本的,没有Scala2.12版本的

猜你喜欢

转载自blog.csdn.net/yy8623977/article/details/125254060