☰

Apache Kafka 0.8.1.1 干净关闭不起作用

tag-icon • tag-icon apache-2.2 ubuntu-14.04 signals zookeeper
Apache Kafka 0.8.1.1 干净关闭不起作用

我有一个：

  • 从源安装的 Apache Kafka（2.9.2-0.8.1.1）单实例，使用默认配置（server.properties等），
  • Zookeeper（3.4.5+dfsg-2）独立版，从包中安装

..在名为 的 Ubuntu 14.04 LTS 主机上运行hostname1。


我尝试彻底关闭 Kafka，但是做不到。


我尝试了两种方法：

  • 发送 SIGINT - 但 Kafka 只是忽略它（没有提到在任何日志中接收信号，继续运行）[SIGTERM 有效，但这不是重点]

  • 使用受控关机工具- 但出现以下情况失败......

..堆栈跟踪：

[2015-02-03 12:55:49,461] ERROR Operation failed due to controller failure (kafka.admin.ShutdownBroker$)
java.io.IOException: Failed to retrieve RMIServer stub: javax.naming.ServiceUnavailableException [Root exception is java.rmi.ConnectException: Connection refused to host: hostname1; nested exception is:
        java.net.ConnectException: Connection refused]
        at javax.management.remote.rmi.RMIConnector.connect(RMIConnector.java:369)
        at javax.management.remote.JMXConnectorFactory.connect(JMXConnectorFactory.java:268)
        at kafka.admin.ShutdownBroker$.kafka$admin$ShutdownBroker$$invokeShutdown(ShutdownBroker.scala:56)
        at kafka.admin.ShutdownBroker$.main(ShutdownBroker.scala:109)
        at kafka.admin.ShutdownBroker.main(ShutdownBroker.scala)
Caused by: javax.naming.ServiceUnavailableException [Root exception is java.rmi.ConnectException: Connection refused to host: hostname1; nested exception is:
        java.net.ConnectException: Connection refused]
        at com.sun.jndi.rmi.registry.RegistryContext.lookup(RegistryContext.java:118)
        at com.sun.jndi.toolkit.url.GenericURLContext.lookup(GenericURLContext.java:203)
        at javax.naming.InitialContext.lookup(InitialContext.java:411)
        at javax.management.remote.rmi.RMIConnector.findRMIServerJNDI(RMIConnector.java:1929)
        at javax.management.remote.rmi.RMIConnector.findRMIServer(RMIConnector.java:1896)
        at javax.management.remote.rmi.RMIConnector.connect(RMIConnector.java:286)
        ... 4 more
Caused by: java.rmi.ConnectException: Connection refused to host: hostname1; nested exception is:
        java.net.ConnectException: Connection refused
        at sun.rmi.transport.tcp.TCPEndpoint.newSocket(TCPEndpoint.java:619)
        at sun.rmi.transport.tcp.TCPChannel.createConnection(TCPChannel.java:216)
        at sun.rmi.transport.tcp.TCPChannel.newConnection(TCPChannel.java:202)
        at sun.rmi.server.UnicastRef.newCall(UnicastRef.java:341)
        at sun.rmi.registry.RegistryImpl_Stub.lookup(Unknown Source)
        at com.sun.jndi.rmi.registry.RegistryContext.lookup(RegistryContext.java:114)
        ... 9 more
Caused by: java.net.ConnectException: Connection refused
        at java.net.PlainSocketImpl.socketConnect(Native Method)
        at java.net.AbstractPlainSocketImpl.doConnect(AbstractPlainSocketImpl.java:339)
        at java.net.AbstractPlainSocketImpl.connectToAddress(AbstractPlainSocketImpl.java:200)
        at java.net.AbstractPlainSocketImpl.connect(AbstractPlainSocketImpl.java:182)
        at java.net.SocksSocketImpl.connect(SocksSocketImpl.java:392)
        at java.net.Socket.connect(Socket.java:579)
        at java.net.Socket.connect(Socket.java:528)
        at java.net.Socket.<init>(Socket.java:425)
        at java.net.Socket.<init>(Socket.java:208)
        at sun.rmi.transport.proxy.RMIDirectSocketFactory.createSocket(RMIDirectSocketFactory.java:40)
        at sun.rmi.transport.proxy.RMIMasterSocketFactory.createSocket(RMIMasterSocketFactory.java:147)
        at sun.rmi.transport.tcp.TCPEndpoint.newSocket(TCPEndpoint.java:613)
        ... 14 more

答案1

对于 0.8.1.1 此工具：

  • 无法开箱即用，
  • 不再需要。

引自 “受控关闭工具似乎无法立即使用” Kafka JIRA 问题：

我们还需要这个工具吗？目前，受控关机是通过配置启用的，并在 Kafka 服务器 kill -15 时自动启动。我几乎认为我们可以摆脱一个工具来进行受控关机。


以下是我最终投入的内容config/server.properties：

controlled.shutdown.enable=true
controlled.shutdown.max.retries=3
controlled.shutdown.retry.backoff.ms=5000

答案2

首先，我使用了错误的信号。我应该使用 SIGTERM (15) 而不是 SIGINT (2)。


第二，正如@MaasSql 指出的那样，你必须在 Kafka 0.8.1.1 中明确开启受控关闭。

（对于 0.8.2+ 你不需要这样做 -默认启用。

相关内容