Tomcat Cluster Farm Deployer 问题

Question

如何更新 3 个 Web 服务器？

与处理 2 个节点时的操作相同。

在部署节点上，再添加一个成员StaticMembershipInterceptor：

<Member className="org.apache.catalina.tribes.membership.StaticMember"
                          port="4002"
                          securePort="-1"
                          host="192.168.5.208"
                          domain="staging-cluster"
                          uniqueId="{0,1,2,3,4,5,6,7,8,9}"/>

在节点 3 上，创建如下集群：

        <Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster">
            <Channel className="org.apache.catalina.tribes.group.GroupChannel">
                <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
                      address="192.168.5.208"
                      port="4002"
                      selectorTimeout="100"
                      maxThreads="6"/>
            </Channel>
            <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"
                tempDir="/opt/tomcat6/tempdir/"
                deployDir="/opt/tomcat6/webapps/"
                watchDir="/opt/tomcat6/watchdir/"
                watchEnabled="false"/>
        </Cluster>

并将 *.war 文件复制到watchdir部署节点的目录中，将出现以下几行catalina.out：

INFO: check cluster wars at /usr/share/tomcat6/watchdir
Aug 17, 2011 2:07:53 PM org.apache.catalina.tribes.group.interceptors.TcpFailureDetector performBasicCheck
WARNING: Member added, even though we werent notified:org.apache.catalina.tribes.membership.MemberImpl[tcp://192.168.5.208:40
02,192.168.5.208,4002, alive=0,id={0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 }, payload={}, command={}, domain={115 116 97 103 105 110 
103 45 99 ...(15)}, ]
Aug 17, 2011 2:07:53 PM org.apache.catalina.ha.tcp.SimpleTcpCluster memberAdded
INFO: Replication member added:org.apache.catalina.tribes.membership.MemberImpl[tcp://192.168.5.208:4002,192.168.5.208,4002, 
alive=0,id={0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 }, payload={}, command={}, domain={115 116 97 103 105 110 103 45 99 ...(15)}, ]
Aug 17, 2011 2:08:12 PM org.apache.catalina.ha.deploy.WarWatcher check
INFO: check cluster wars at /usr/share/tomcat6/watchdir
Aug 17, 2011 2:08:12 PM org.apache.catalina.ha.deploy.FarmWarDeployer fileModified
INFO: Installing webapp[/cas] from /usr/share/tomcat6/webapps/cas.war
Aug 17, 2011 2:08:12 PM org.apache.catalina.ha.deploy.FarmWarDeployer remove
INFO: Cluster wide remove of web app /cas
Aug 17, 2011 2:08:13 PM org.apache.catalina.startup.HostConfig deployWAR
INFO: Deploying web application archive cas.war

检查webapps节点3上的文件夹：

drwxr-xr-x  8 root    root        4096 Aug 17 14:08 cas
-rw-r--r--  1 root    root    19962865 Aug 17 14:08 cas.war
...

以及catalina.out：

Aug 17, 2011 2:08:13 PM org.apache.catalina.startup.HostConfig deployWAR
INFO: Deploying web application archive cas.war

编辑

无效或不可读的 WAR 文件：无效的 CEN 标头（错误签名）

部署到其他 2 个节点时，WAR 文件似乎已损坏。这种情况发生的频率是多少？

除了 FarmDeployer 之外，是否可以让 FarmDeployer 与 tomcat 集群文档中的多播协同工作，这对我来说非常完美？

我找到了！原因是您没有为网络接口添加多播路由，因此无法在 Tomcat 节点之间发送/接收集群消息：

lsof -i :4000
COMMAND  PID   USER   FD   TYPE    DEVICE SIZE NODE NAME
java    9968 tomcat   37u  IPv6 121232775       TCP localhost:terabase (LISTEN)

请按照下列步骤进行：

确保您的网络接口已启用多播：

UP BROADCAST RUNNING MASTER MULTICAST MTU:1500 Metric:1
添加多播路由：

route add -host 228.0.0.4 dev bond1

（你应该改成bond1接收集群消息的网络接口）

测试对ping -c 4 228.0.0.4我来说不起作用。所以我下载了多播测试工具，运行它，我看到以下响应：

./bin/multicast-test.sh -local 192.168.5.149 -group 228.0.0.4:45564
PATH=/usr/lib64/qt-3.3/bin:/usr/kerberos/sbin:/usr/kerberos/bin:/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin:/var/ossec/bin
java version "1.6.0_13"
Java(TM) SE Runtime Environment (build 1.6.0_13-b03)
Java HotSpot(TM) 64-Bit Server VM (build 11.3-b02, mixed mode)

Oracle Coherence Version 3.3.1/389
 Grid Edition: Development mode
Copyright (c) 2000-2007 Oracle. All rights reserved.

Starting test on ip=/192.168.5.149, group=/228.0.0.4:45564, ttl=4
Configuring multicast socket...
Starting listener...
Fri Aug 19 10:19:14 ICT 2011: Sent packet 1.
Fri Aug 19 10:19:14 ICT 2011: Received test packet 1 from self (sent 9ms ago).
Fri Aug 19 10:19:14 ICT 2011: Received 69 bytes from an unknown multicast application at 192.168.5.199: ???
Fri Aug 19 10:19:14 ICT 2011: Received 69 bytes from an unknown multicast application at 192.168.5.149: ???

或者您可以检查lsof，，netstat...

lsof -i :4000
COMMAND   PID   USER   FD   TYPE    DEVICE SIZE NODE NAME
java    11084 tomcat   37u  IPv6 121236631       TCP localhost:terabase (LISTEN)
java    11084 tomcat   59u  IPv6 121236830       TCP localhost:terabase->192.168.5.199:43519 (ESTABLISHED)
java    11084 tomcat   66u  IPv6 121236835       TCP localhost:55538->192.168.5.199:terabase (ESTABLISHED)
java    11084 tomcat   67u  IPv6 121236836       TCP localhost:55539->192.168.5.199:terabase (ESTABLISHED)

您已准备好使用多播配置 Tomcat 集群。

启用与文档中提到的相同的集群配置，但将<Receiver地址从“自动”更改为指定接口：

<Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
                      address="192.168.5.149"
                      port="4000"
                      autoBind="100"
                      selectorTimeout="5000"
                      maxThreads="6"/>

对集群中的所有节点执行相同操作以查看其是否有效。

编辑2

改进：我很高兴地使用多播配置将 Receiver 中的自动更改为 ip，当我将 war 文件放在部署器 Web 服务器上的监视目录中时，我看到了另一台 Web 服务器上的 myapp.war。问题是，war 仅在部署器 Web 服务器上提取（创建目录），而不是在其他服务器上提取。

这意味着部署节点与其他节点之间的连接已建立。你还收到相同的错误吗？“无效或不可读的 WAR 文件：无效的 CEN 标头（错误签名）”？每次？

java.util.zip.ZipException: invalid END header (bad central directory offset)

根据错误45851，您应该升级 Tomcat 版本（至少 6.0.19）并重试。我使用的是 6.0.29 版本，如您所见，它运行良好。

需要在其他 Web 服务器上重新启动 tomcat，然后复制并提取，并且该站点可通过 other-web-severs-ip/myapp 访问，但不能通过域名访问（404 错误）。您将站点域名指向哪里？我将 DNS 中的站点域名指向 LB，并在所有具有相同域名的 tomcat Web 服务器中创建虚拟主机

不。看来你没有清理干净。不需要在所有Tomcat节点上创建虚拟主机。

假设在节点 1 上有 Apache HTTP 服务器和 Tomcat，IP 为 192.168.1.101。另外两个 Tomcat 节点分别位于 1.102、1.103。jvmRoute对应的节点为：tomcat1、tomcat2、tomcat3。

Apache mod_jk.confHTTP 服务器上：

LoadModule          jk_module modules/mod_jk.so

JkWorkersFile       /etc/httpd/conf/workers.properties
JkShmFile           /var/log/httpd/jk.shm

JkLogFile           /var/log/httpd/mod_jk.log
JkLogLevel          info
JkLogStampFormat    "[%a %b %d %H:%M:%S %Y] "

JkMount /myapp/*    cluster

是workers.properties这样的：

worker.list = cluster

worker.tomcat1.port=8009        
worker.tomcat1.host=localhost
worker.tomcat1.type=ajp13
worker.tomcat1.lbfactor=1

worker.tomcat2.port=8009        
worker.tomcat2.host=192.168.1.102
worker.tomcat2.type=ajp13
worker.tomcat2.lbfactor=1

worker.tomcat3.port=8009        
worker.tomcat3.host=192.168.1.103
worker.tomcat3.type=ajp13
worker.tomcat3.lbfactor=1

worker.cluster.type=lb
worker.cluster.balance_workers=tomcat1,tomcat2,tomcat3
worker.cluster.sticky_session=1

再试一次。

Answer 1