<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 14 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";
        mso-fareast-language:EN-US;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri","sans-serif";
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-family:"Calibri","sans-serif";
        mso-fareast-language:EN-US;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-GB" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal">Hi,<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">I have an issue with ocfs2 and I am not quite sure, where the problem is. I would be grateful for any feedback. The issue looks like a multipath issue, however I have redundant links, so not quite sure why ocfs2 would barf and bring the
 server down.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">I have a set of production servers that have started showing the same error.<o:p></o:p></p>
<p class="MsoNormal">I am not aware of any changes within the infrastructure.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">setup is.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">4 off Equallogic ps6100X.<o:p></o:p></p>
<p class="MsoNormal">lots of Dell R610 servers, all with multiple ISCSI interfaces.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">This has happened on 3 different servers in the last week, causing the servers to hang.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">I have checked all switches and logs and can see no flapping interfaces. I can see the ISCSI initiator make logout and login requests during this time period.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">I See in the logs <o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: eql-0-8a0906-2d6a4c605-13244eee0b250b79_a: Entering recovery mode: max_retries=5
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:176: mark as failed
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:16: mark as failed <o:p>
</o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:48: mark as failed <o:p>
</o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:64: mark as failed <o:p>
</o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:128: mark as failed
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:160: mark as failed
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: eql-0-8a0906-2d6a4c605-13244eee0b250b79_a: Entering recovery mode: max_retries=5
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:176: mark as failed
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:16: mark as failed <o:p>
</o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:48: mark as failed <o:p>
</o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:64: mark as failed <o:p>
</o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:128: mark as failed
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:09 servername multipathd: 8:160: mark as failed
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: (kmpathd/6,2888,6):o2hb_bio_end_io:241 ERROR: IO Error -5<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: Buffer I/O error on device dm-7, logical block 480<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: lost page write due to I/O error on dm-7<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: scsi 114:0:0:0: rejecting I/O to dead device<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: device-mapper: multipath: Failing path 8:176.<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: (o2hb-1B3B9BEE63,4754,7):o2hb_do_disk_heartbeat:772 ERROR: status = -5<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername multipathd: dm-4: add map (uevent)
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: scsi 115:0:0:0: rejecting I/O to dead device<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: device-mapper: multipath: Failing path 8:16.<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername multipathd: dm-4: devmap already registered
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername multipathd: dm-4: add map (uevent)
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername multipathd: dm-4: devmap already registered
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername multipathd: dm-3: add map (uevent)
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: scsi 110:0:0:0: rejecting I/O to dead device<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:11 servername kernel: device-mapper: multipath: Failing path 8:48.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Apr 22 15:53:17 servername multipathd: asvolume: load table [0 629145600 multipath 0 0 1 1 round-robin 0 6 1 8:32 10
<o:p></o:p></p>
<p class="MsoNormal">8:80 10 8:96 10 8:112 10 8:144 10 8:16 10] <o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:17 servername multipathd: dm-2: add map (uevent)
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:17 servername multipathd: dm-2: devmap already registered
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:17 servername multipathd: dm-8: add map (uevent)
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:17 servername iscsid: Connection117:0 to [target: iqn.2001-05.com.equallogic:0-8a0906-2d6a4c605-13244eee<o:p></o:p></p>
<p class="MsoNormal">0b250b79-as14volumeocfs2, portal: 192.168.5.100,3260] through [iface: eql.eth2_2] is operational now<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:22 servername multipathd: dm-3: add map (uevent)
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:22 servername multipathd: dm-3: devmap already registered
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:22 servername multipathd: dm-4: add map (uevent)
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:22 servername multipathd: dm-4: devmap already registered
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:22 servername multipathd: dm-5: add map (uevent)
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:22 servername multipathd: dm-5: devmap already registered
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:22 servername multipathd: dm-9: add map (uevent)
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:22 servername multipathd: dm-9: devmap already registered
<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:22 servername kernel: get_page_tbl ctx=0xffff810623d041c0 (253:6): bits=2, mask=0x3, num=20480, max=2048<o:p></o:p></p>
<p class="MsoNormal">0<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Then the ocfs2 has an issue.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Apr 22 15:53:23 servername kernel: (ocfs2cmt,4773,6):ocfs2_commit_cache:191 ERROR: status = -5<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:23 servername kernel: (ocfs2cmt,4773,6):ocfs2_commit_thread:1799 ERROR: status = -5<o:p></o:p></p>
<p class="MsoNormal">Apr 22 15:53:23 servername kernel: (ocfs2cmt,4773,6):ocfs2_commit_cache:191 ERROR: status = -5<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">then<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Apr 22 15:53:23 servername kernel: s2cmt,4773,6):ocfs2&lt;3&gt;(ocfs2c&lt;3&gt;(ocfs2cmt,4773,6):ocfs2_commit_cache:191 ERROR: status = -<o:p></o:p></p>
<p class="MsoNormal">5<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Apr 22 15:53:23 servername kernel: (ocfs2cmt,4773,6):ocfs2_commi&lt;3&gt;(ocfs2cm&lt;&lt;3&gt;(&lt;3&gt;(ocfs2cmt,4773,6):ocfs2_commit_cache:191 E<o:p></o:p></p>
<p class="MsoNormal">RROR: status = -5<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Apr 22 15:53:23 servername kernel: (ocfs2&lt;3&gt;(ocfs2cmt,47&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt,47&lt;3&gt;(ocfs&lt;3&gt;(ocfs2cmt,4&lt;3&gt;(ocf&lt;3&gt;(ocfs&lt;3&gt;(ocf&lt;3&gt;<o:p></o:p></p>
<p class="MsoNormal">(ocfs2cm&lt;3&gt;(o&lt;3&gt;(ocfs2cm&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;(o&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocfs2cm&lt;3&gt;(ocfs2c&lt;3&gt;&lt;3&gt;(ocfs2&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt,&lt;3&gt;(ocf&lt;3&gt;(oc<o:p></o:p></p>
<p class="MsoNormal">fs2cmt,47&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt,47&lt;3&gt;(ocfs&lt;3&gt;(ocfs2c&lt;3&gt;(o&lt;3&gt;(ocfs2c&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt,47&lt;3&gt;(o&lt;3&gt;(ocfs2cmt,477&lt;3&gt;(ocfs&lt;3&gt;(ocfs2c&lt;<o:p></o:p></p>
<p class="MsoNormal">3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;(&lt;3&gt;(ocfs2cmt,4773&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt,&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocfs&lt;3&gt;(ocfs2cm&lt;3&gt;(oc&lt;3&gt;(ocfs&lt;3&gt;(oc&lt;3&gt;(ocf&lt;3&gt;<o:p></o:p></p>
<p class="MsoNormal">(ocfs2cmt,&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocfs2&lt;3&gt;(ocfs2&lt;3&gt;(&lt;3&gt;(ocfs2cmt,4773,&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt,4773,&lt;3&gt;(ocfs&lt;3&gt;(ocfs2cmt&lt;3&gt;(oc&lt;3&gt;(ocf<o:p></o:p></p>
<p class="MsoNormal">s2cmt,477&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt,477&lt;3&gt;(&lt;3&gt;(ocfs2cmt,&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt,&lt;3&gt;(o&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocfs&lt;3&gt;(ocfs2c&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;<o:p></o:p></p>
<p class="MsoNormal">(ocfs&lt;3&gt;(ocfs2c&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;(&lt;3&gt;(ocfs2&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt&lt;3&gt;(oc&lt;3&gt;(ocfs&lt;3&gt;(ocfs2&lt;3&gt;(ocfs2c&lt;3&gt;(o&lt;3&gt;<o:p></o:p></p>
<p class="MsoNormal">(ocfs2cmt,4&lt;3&gt;(ocf&lt;3&gt;(ocfs2&lt;3&gt;(oc&lt;3&gt;(ocfs2cm&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocfs&lt;3&gt;(ocfs2cmt,&lt;3&gt;(ocfs&lt;3&gt;(ocfs2c&lt;3&gt;(oc<o:p></o:p></p>
<p class="MsoNormal">fs2&lt;3&gt;(ocfs2c&lt;3&gt;(ocfs2c&lt;3&gt;(ocf<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Apr 22 15:53:23 servername kernel: 2cmt,4773,6):&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt,&lt;3&gt;(ocfs2&lt;3&gt;(ocfs2cmt,&lt;3&gt;(ocfs&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocf&lt;3&gt;(ocfs<o:p></o:p></p>
<p class="MsoNormal">2cmt,47&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt,47&lt;3&gt;(ocfs&lt;3&gt;(ocfs2cmt,&lt;3&gt;(o&lt;3&gt;(ocfs2cmt,4&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocf&lt;3&gt;(ocfs2cm<o:p></o:p></p>
<p class="MsoNormal">t,&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocfs2&lt;3&gt;(ocfs2cmt&lt;3&gt;(&lt;3&gt;(ocfs2cm&lt;3&gt;(ocfs&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocfs2&lt;3&gt;(ocfs2cmt&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocfs&lt;<o:p></o:p></p>
<p class="MsoNormal">3&gt;(ocfs2&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt,4773,&lt;3&gt;(oc&lt;3&gt;(ocfs2cm&lt;3&gt;(ocfs2&lt;3&gt;(ocfs2cm&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt,4773,6):&lt;3&gt;(&lt;3&gt;(ocfs2cmt&lt;3&gt;(oc&lt;3&gt;(oc<o:p></o:p></p>
<p class="MsoNormal">fs2cm&lt;3&gt;(ocfs2&lt;3&gt;(ocfs2cmt&lt;3&gt;(o&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocf&lt;3&gt;(ocfs2c&lt;3&gt;(ocfs2c&lt;3&gt;(ocfs2cmt,&lt;3&gt;(oc&lt;3&gt;(ocfs2c&lt;3&gt;(ocfs2cm&lt;3&gt;(ocfs2cmt&lt;3&gt;<o:p></o:p></p>
<p class="MsoNormal">(o&lt;3&gt;(ocfs2cmt&lt;3&gt;(o&lt;3&gt;(ocfs2cm&lt;3&gt;&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocfs2c&lt;3&gt;(ocfs2cmt,&lt;3&gt;(o&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3<o:p></o:p></p>
<p class="MsoNormal">&gt;(o&lt;3&gt;(ocfs2&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt,47&lt;3&gt;(oc&lt;3&gt;(ocfs2cmt,4773,6&lt;3&gt;(o&lt;3&gt;(ocfs2cm&lt;3&gt;(ocf&lt;3&gt;(ocfs2&lt;3&gt;(o&lt;3&gt;(ocfs2&lt;3&gt;(&lt;3&gt;(ocfs2cm&lt;3&gt;(oc<o:p></o:p></p>
<p class="MsoNormal">&lt;3&gt;(ocfs&lt;3&gt;(ocfs2c&lt;3&gt;(ocfs2cmt&lt;3&gt;(o&lt;3&gt;(ocfs2cm&lt;3&gt;(ocf&lt;3&gt;(ocfs2cmt&lt;3&gt;&lt;3&gt;(ocfs2cmt,&lt;3&gt;(o&lt;3&gt;(ocfs2cmt,4&lt;3&gt;(oc&lt;3&gt;(ocfs2c&lt;3&gt;(o&lt;3&gt;(<o:p></o:p></p>
<p class="MsoNormal">ocfs2cmt,&lt;3&gt;(o&lt;3&gt;(ocfs2cmt&lt;3&gt;(<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Repeated thousands of times and bringing the server to a halt.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">cat /etc/multipath.conf<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">blacklist {<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; devnode &quot;^sd[a]$&quot;<o:p></o:p></p>
<p class="MsoNormal">}<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">## Use user friendly names, instead of using WWIDs as names.<o:p></o:p></p>
<p class="MsoNormal">defaults {<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; user_friendly_names yes<o:p></o:p></p>
<p class="MsoNormal">}<o:p></o:p></p>
<p class="MsoNormal">multipaths {<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; multipath {<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; wwid&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 36090a058604c6a2d790b250bee4exxxx
<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;alias&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; asvolume<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; path_grouping_policy&nbsp;&nbsp;&nbsp; multibus<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; #path_checker&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; readsector0<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; path_selector&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &quot;round-robin 0&quot;<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; failback&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; immediate<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; rr_weight&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; priorities<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; rr_min_io&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 10<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp; &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;no_path_retry&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 5<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; }<o:p></o:p></p>
<p class="MsoNormal">}<o:p></o:p></p>
<p class="MsoNormal">devices {<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; device {<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; vendor&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &quot;EQLOGIC&quot;<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; product&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &quot;100E-00&quot;<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; path_grouping_policy&nbsp;&nbsp;&nbsp; multibus<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; getuid_callout&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &quot;/sbin/scsi_id -g -u -s /block/%n&quot;<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; #features&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &quot;1 queue_if_no_path&quot;<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; path_checker&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; readsector0<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; path_selector&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &quot;round-robin 0&quot;<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; failback&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; immediate<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; rr_min_io&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 10<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; rr_weight&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; priorities<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; }<o:p></o:p></p>
<p class="MsoNormal">}<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">cat /etc/ocfs2/cluster.conf<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">node:&nbsp;&nbsp; <o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;ip_port = 8888<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; ip_address = x.x.x.x<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; number = 9<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; name = servername<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; cluster = ocfs<o:p></o:p></p>
<p class="MsoNormal">node:&nbsp;&nbsp; <o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;ip_port = 8888<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; ip_address = x.x.x.x<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; number = 109<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; name = servername1<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; cluster = ocfs<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">more nodes in here<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">cluster:<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; node_count = 22<o:p></o:p></p>
<p class="MsoNormal">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; name = ocfs<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Cluster consists of 14 nodes.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">/etc/init.d/o2cb status<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Driver for &quot;configfs&quot;: Loaded<o:p></o:p></p>
<p class="MsoNormal">Filesystem &quot;configfs&quot;: Mounted<o:p></o:p></p>
<p class="MsoNormal">Driver for &quot;ocfs2_dlmfs&quot;: Loaded<o:p></o:p></p>
<p class="MsoNormal">Filesystem &quot;ocfs2_dlmfs&quot;: Mounted<o:p></o:p></p>
<p class="MsoNormal">Checking O2CB cluster ocfs: Online<o:p></o:p></p>
<p class="MsoNormal">Heartbeat dead threshold = 61<o:p></o:p></p>
<p class="MsoNormal">&nbsp; Network idle timeout: 30000<o:p></o:p></p>
<p class="MsoNormal">&nbsp; Network keepalive delay: 2000<o:p></o:p></p>
<p class="MsoNormal">&nbsp; Network reconnect delay: 2000<o:p></o:p></p>
<p class="MsoNormal">Checking O2CB heartbeat: Active<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">Server and package information.<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">cat /etc/redhat-release<o:p></o:p></p>
<p class="MsoNormal">Red Hat Enterprise Linux Server release 5.10 (Tikanga)<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">rpm -qa | grep multipath<o:p></o:p></p>
<p class="MsoNormal">device-mapper-multipath-0.4.7-59.el5<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">rpm -qa | grep ocfs2<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">ocfs2-2.6.18-371.3.1.el5-1.4.10-1.el5<o:p></o:p></p>
<p class="MsoNormal">ocfs2-tools-1.4.4-1.el5<o:p></o:p></p>
<p class="MsoNormal">ocfs2console-1.4.4-1.el5<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">rpm -qa | grep kernel<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">kernel-2.6.18-371.3.1.el5<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">modinfo ocfs2<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">filename:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /lib/modules/2.6.18-371.3.1.el5/kernel/fs/ocfs2/ocfs2.ko<o:p></o:p></p>
<p class="MsoNormal">license:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; GPL<o:p></o:p></p>
<p class="MsoNormal">author:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Oracle<o:p></o:p></p>
<p class="MsoNormal">version:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1.4.10<o:p></o:p></p>
<p class="MsoNormal">description:&nbsp;&nbsp;&nbsp; OCFS2 1.4.10 Thu Dec&nbsp; 5 16:38:36 PST 2013 (build b703e5e0906b370c876b657dabe8d4c8)<o:p></o:p></p>
<p class="MsoNormal">srcversion:&nbsp;&nbsp;&nbsp;&nbsp; 41115DB9EFDAA5735C18810<o:p></o:p></p>
<p class="MsoNormal">depends:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; ocfs2_dlm,jbd,ocfs2_nodemanager<o:p></o:p></p>
<p class="MsoNormal">vermagic:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 2.6.18-371.3.1.el5 SMP mod_unload gcc-4.1<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
</div>
</body>
</html>