<div><strong><font color="#000066">Dear Sir,</font></strong></div><div><strong><font color="#000066"><br></font></strong></div><div><font color="#000066"><b>We have a HPC setup with four OSS server(OSS1 to OSS4) and two MDS Nodes(MDS1 to MDS2)</b></font></div>
<div><font color="#000066"><b>It has been running till yesterday without any problem. Today morning i found that OSS4 is in </b></font></div><div><font color="#000066"><b>shutdown condition. I have verified the OSS3 logs and found that it has been got to fencing state</b></font></div>
<div><b style="color:rgb(0,0,102)">I have again switched on OSS4  now its running</b>
</div><div><font color="#000066"><b><br></b></font></div><div><font color="#000066"><b>In OSS4 logs i saw some  "unreadable" error as mentioned below</b></font></div><div><font color="#000066"><b><br></b></font></div>
<div><font color="#000066"><b><div>Feb 26 04:24:43 oss4 smartd[9306]: Device: /dev/sda, 2 Currently unreadable (pending) sectors </div><div>Feb 26 04:54:43 oss4 smartd[9306]: Device: /dev/sda, 2 Currently unreadable (pending) sectors </div>
<div>Feb 26 05:24:43 oss4 smartd[9306]: Device: /dev/sda, 2 Currently unreadable (pending) sectors </div><div>Feb 26 05:54:43 oss4 smartd[9306]: Device: /dev/sda, 2 Currently unreadable (pending) sectors </div><div>Feb 26 06:24:43 oss4 smartd[9306]: Device: /dev/sda, 2 Currently unreadable (pending) sectors </div>
<div>Feb 26 06:54:43 oss4 smartd[9306]: Device: /dev/sda, 2 Currently unreadable (pending) sectors </div><div>Feb 26 07:24:43 oss4 smartd[9306]: Device: /dev/sda, 2 Currently unreadable (pending) sectors </div><div><br></div>
<div>/dev/sda is a local hard disk. Is it possible the Node fencing is due to this error ? </div><div>While running the e2fsck will resolve this issue ?</div><div><br></div></b></font></div><div><font color="#000066"><b>Herewith i have attached the /var/log/messages of OSS3 and OSS4</b></font></div>
<div><font color="#000066"><b>can anybody please analyse the log file and kindly assist me what to do ? </b></font></div><div><font color="#000066"><b><br></b></font></div><div><font color="#000066"><b><br></b></font></div>
<div><font color="#000066"><b><br></b></font></div><div><strong><font color="#000066">Thanks & Regards<br> <br></font></strong></div><div><font color="#000066" face="verdana, sans-serif"><b>VIJESH</b></font></div>