使用KafkaPublish处理器写入kafka主题时,无法发送SSL关闭消息

时间:2018-09-11 09:13:44

标签: apache-kafka apache-nifi kafka-producer-api sasl

我正在使用KafkaPublish处理器将消息发布到使用SASL_SSL安全协议(我们未使用Kerberos)保护的kafka主题。

我收到以下错误:

WARN Failed to send SSL Close message  
(org.apache.kafka.common.network.SslTransportLayer)
java.io.IOException: An existing connection was forcibly closed by the 
remote host
    at sun.nio.ch.SocketDispatcher.write0(Native Method)
    at sun.nio.ch.SocketDispatcher.write(SocketDispatcher.java:51)
    at sun.nio.ch.IOUtil.writeFromNativeBuffer(IOUtil.java:93)
    at sun.nio.ch.IOUtil.write(IOUtil.java:65)
    at sun.nio.ch.SocketChannelImpl.write(SocketChannelImpl.java:471)
    at 
  org.apache.kafka.common.network.SslTransportLayer.flush(SslTransportLayer.java:209)
    at org.apache.kafka.common.network.SslTransportLayer.close(SslTransportLayer.java:172)
    at org.apache.kafka.common.utils.Utils.closeAll(Utils.java:718)
    at org.apache.kafka.common.network.KafkaChannel.close(KafkaChannel.java:61)
    at org.apache.kafka.common.network.Selector.doClose(Selector.java:746)
    at org.apache.kafka.common.network.Selector.close(Selector.java:734)
    at org.apache.kafka.common.network.Selector.pollSelectionKeys(Selector.java:532)
    at org.apache.kafka.common.network.Selector.poll(Selector.java:424)
    at kafka.network.Processor.poll(SocketServer.scala:628)
    at kafka.network.Processor.run(SocketServer.scala:545)
    at java.lang.Thread.run(Thread.java:748)

我能够从命令提示符下发布到主题。

当我在KafkaPublish中使用SASL_SSL时,Kerberos服务名称是必填字段。但是由于我们没有使用Kerberos,我应该为该字段设置什么值?

Configure Processor

设置动态属性sasl.mechanism和sasl.jaas.configuration时,会收到无效的配置参数警告。

我缺少任何配置吗?任何帮助将不胜感激。 提前致谢。

1 个答案:

答案 0 :(得分:0)

自0_11版本以来,NiFi的PublishKafka仅支持Kerberos以外的其他机制的SASL。

例如,如果您需要使用SASL Plain,则要确保使用PublishKafka_0_11或PublishKafka_1_0。