ActiveMq常见错误问题

activemq服务挂掉问题总结

activemq出问题时，比较直观的现象就是三台服务器的监控页面都打不开

一、进程不在

检查activemq进程是否还在，若全不在，优先检查磁盘空间。通过一段时间的观察，activemq进程挂掉大部分是由空间不足导致的。

二、进程运行正常

若进程运行正常，监控页面仍然打不开，则需要去看activemq日志文件。下面出现的这个问题，困扰了我一个星期，且大概两三个小时就会出现一次，导致zookeeper选主失败，错误信息如下：

org.apache.zookeeper.KeeperException$BadVersionException: KeeperErrorCode = BadVersion for /activemq/leveldb-stores/00000000039
先说明一下我们的环境：

（1）测试环境

一台服务器上搭建伪集群，用的zookeeper和activemq都是最新版本，运行稳定，未出现BadVersion错误

（2）生产环境

zookeeper  3.4.6版本   activemq  5.14.0版本，运行稳定，未出现任何错误

（3）新环境

zookeeper和activemq用的最新版本，出现上述问题

刚开始怀疑是版本问题，于是替换zookeeper为3.4.6版本，依然出现BadVersion，依次更替activemq版本，降级，大概换了三四个activemq版本，均出现上述问题，这是令人比较蛋疼的，3个环境所有配置均相同，显然不会是配置问题。

后经观察，zookeeper和activemq日志文件比服务器当前时间晚8个小时，由于activemq要经zookeeper同步数据，所以我们立即调整两个服务时间，使之与当前服务器时间同步。比较好的现象是，activemq稳定运行时间增长了，但activemq的master切换变的比较频繁，遗憾的是，上述问题依然出现。

网上类似问题说明非常少，搞的我有点没辙了。在此要说明一点，（1）、（2）环境的zookeeper都是相对独立的，没有其他应用连接zookeeper，而环境（3），很多应用连接zookeeper。

三、解决方式

最后我们尝试，单独配置3台zookeeper，只为activemq服务，不允许其他服务连接。奇迹出现了，activemq允许非常稳定，也不随意切换master。这和环境（2）方案一致，所以最终解决方式即是通过单独搭建zookeeper的方式，避免上述问题出现。

至于具体原因，后续再去研究吧，最近忙疯了。

四、activemq和zookeeper连接丢失问题

2017-07-06 22:09:10,250 | WARN  | Exception while executing listener (ignored) | org.apache.activemq.leveldb.replicated.groups.ZKClient | ZooKeeper state change dispatcher thread
org.apache.zookeeper.KeeperException$ConnectionLossException: KeeperErrorCode = ConnectionLoss for /activemq/leveldb-stores

该问题无需做特殊处理，activemq回去尝试重连zookeeper，且一般都会连接成功的。

五、activemq监控页面异常问题

activemq监控页面能打开，topic能打开，但queues打不开，日志信息如下
17:     limitations under the License.
18: --%>
19:
20:     <title><c:out value="${requestContext.brokerQuery.brokerAdmin.brokerName} : ${pageTitle}" /></title>
21:
22:     <meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1" />
23:     <style type="text/css" media="screen">
Stacktrace:
   at org.apache.jasper.servlet.JspServletWrapper.handleJspException(JspServletWrapper.java:568)[apache-jsp-8.0.9.M3.jar:2.3]

搜了一下，并且问了公司架构师大神，告知信息是activemq监控页面比较不稳定，该问题重启服务即可。有知道具体原因的小伙伴，还请告知一下。