<html>
<head>
<style><!--
.hmmessage P
{
margin:0px;
padding:0px
}
body.hmmessage
{
font-size: 12pt;
font-family:Calibri
}
--></style></head>
<body class='hmmessage'><div dir='ltr'>Hi all,<br><br>I am trying to shut-down the nodes in our cluster, but two of the fourteen nodes will not stop OCFS, returning the error "Unable to stop cluster as heartbeat region still active"<br><br>I'd like your help in identify why this is, and how to fix it.<br><br>Using RedHat 4.8 and ocfs 1.2.9<br><br><font style="" face="Courier New,sans-serif"># /etc/init.d/o2cb stop</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">Stopping O2CB cluster UATocfs2: Failed</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">Unable to stop cluster as heartbeat region still active</font><br><br><font style="" face="Courier New,sans-serif"># modinfo ocfs2</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">filename:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /lib/modules/2.6.9-89.0.26.ELsmp/kernel/fs/ocfs2/ocfs2.ko</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">license:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; GPL</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">author:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Oracle</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">version:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1.2.9 CF6A7A44EA2581415F3D612</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">description:&nbsp;&nbsp;&nbsp; OCFS2 1.2.9 Mon Dec&nbsp; 5 14:27:38 EST 2011 (build e5c3135c8cbf75f2620ff4c782d634f1)</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">depends:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; ocfs2_nodemanager,ocfs2_dlm,jbd,debugfs</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">vermagic:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 2.6.9-89.0.26.ELsmp SMP gcc-3.4</font><br><br><br>There are no mounts, either in /proc/mounts or from mtab<br><br><font style="" face="Courier New,sans-serif"># cat /proc/mounts | grep -i ocfs</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif"># mount | grep -i ocfs</font><br>#<br><br>On one of the nodes with the issue it only shows a single entry for heartbeat<br><br><font style="" face="Courier New,sans-serif"># ls -lR heartbeat/</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">heartbeat/:</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">total 4</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">drwxr-xr-x&nbsp; 2 root root 4096 Mar 15&nbsp; 2013 47B9FA48BFE74772AF3E6AAB1D3B3F9C</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">heartbeat/47B9FA48BFE74772AF3E6AAB1D3B3F9C:</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">total 16</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">-rw-r--r--&nbsp; 1 root root 4096 Mar 15&nbsp; 2013 block_bytes</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">-rw-r--r--&nbsp; 1 root root 4096 Mar 15&nbsp; 2013 blocks</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">-rw-r--r--&nbsp; 1 root root 4096 Mar 15&nbsp; 2013 dev</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">-rw-r--r--&nbsp; 1 root root 4096 Mar 15&nbsp; 2013 start_block</font><br><br>It does show the correct multipath LUN used by OCFS <br><br><font style="" face="Courier New,sans-serif"># cat /config/cluster/UATocfs2/heartbeat/47B9FA48BFE74772AF3E6AAB1D3B3F9C/dev</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">emcpowerq1</font><font style="" face="Courier New,sans-serif"><br></font><font style="" face="Courier New,sans-serif">#</font><br><br><br>Appreciate your help in getting the o2cb services stopped cleanly!<br><br>Thanks<br>Neil<br><br>                                               </div></body>
</html>