<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1">
<style type="text/css" style="display:none;"><!-- P {margin-top:0;margin-bottom:0;} --></style>
</head>
<body dir="ltr">
<div id="divtagdefaultwrapper" style="font-size:12pt;color:#000000;font-family:Calibri,Helvetica,sans-serif;" dir="ltr">
<p style="margin-top:0;margin-bottom:0">Please help,first i am going to narrate my scenarios </p>
<p style="margin-top:0;margin-bottom:0"><br>
</p>
<p style="margin-top:0;margin-bottom:0">MDS Node :- mds1 and mds2 (running on HA)</p>
<p style="margin-top:0;margin-bottom:0">  File system :- /scratch and /home</p>
<p style="margin-top:0;margin-bottom:0"> mds1 serving request for /scratch</p>
<p style="margin-top:0;margin-bottom:0">mds 2 serving request for /home</p>
<p style="margin-top:0;margin-bottom:0"><br>
</p>
<p style="margin-top:0;margin-bottom:0">OSS node:-</p>
<p style="margin-top:0;margin-bottom:0">oss1 :-  serving /scratch OST</p>
<p style="margin-top:0;margin-bottom:0">oss2:-  serving /home    OST</p>
<p style="margin-top:0;margin-bottom:0"><br>
</p>
<p style="margin-top:0;margin-bottom:0">In MDS and OSS node pacemaker clustre is running </p>
<p style="margin-top:0;margin-bottom:0">Now actual issue "i am not able to mount /scratch file system on loginnode,while trying to mount following error</p>
<p style="margin-top:0;margin-bottom:0">Error:-   /scratch failed:invalid argument</p>
<p style="margin-top:0;margin-bottom:0">this may have multiple cause "is cratch correct file system name'</p>
<p style="margin-top:0;margin-bottom:0">are the mount option correct</p>
<p style="margin-top:0;margin-bottom:0"><br>
</p>
<p style="margin-top:0;margin-bottom:0"><b>To diagnose issue open /var/log/message there i found below error message</b></p>
<p style="margin-top:0;margin-bottom:0"><b></b></p>
<div><b>LustreError: 156-2: The client profile 'scratch-client' could not be read from the MGS.  Does that filesystem exist?</b></div>
<div><b>Mar  9 11:45:15 loginnode1 kernel: [15878205.790422] LustreError: 3009:0:(lov_obd.c:945:lov_cleanup()) scratch-clilov-ffff8820238f6000: lov tgt 0 not cleaned! deathrow=0, lovrc=1</b></div>
<div><b>Mar  9 11:45:15 loginnode1 kernel: [15878205.790640] Lustre: Unmounted scratch-client</b></div>
<div><b>Mar  9 11:45:15 loginnode1 kernel: [15878205.793283] LustreError: 27884:0:(obd_mount.c:1343:lustre_fill_super()) Unable to mount  (-22)</b></div>
<div><br>
</div>
Once i login to MDS1 server and run 'dmesg" below error found
<p></p>
<p style="margin-top:0;margin-bottom:0"><br>
</p>
<p style="margin-top:0;margin-bottom:0"><br>
</p>
<p style="margin-top:0;margin-bottom:0"></p>
<div> scratch-OST0000-osc-MDT0000: operation ost_connect to node 10.20.1.53@o2ib failed: rc = -19</div>
<div>IP address(<span style="font-family: Calibri, Helvetica, sans-serif, EmojiFont, "Apple Color Emoji", "Segoe UI Emoji", NotoColorEmoji, "Segoe UI Symbol", "Android Emoji", EmojiSymbols; font-size: 16px;"> 10.20.1.53@o2ib) trying to connect is nids of oss2
 which serving file system /Home./home file system having no issues.</span></div>
<div><span style="font-family: Calibri, Helvetica, sans-serif, EmojiFont, "Apple Color Emoji", "Segoe UI Emoji", NotoColorEmoji, "Segoe UI Symbol", "Android Emoji", EmojiSymbols; font-size: 16px;"><br>
</span></div>
<div><span style="font-family: Calibri, Helvetica, sans-serif, EmojiFont, "Apple Color Emoji", "Segoe UI Emoji", NotoColorEmoji, "Segoe UI Symbol", "Android Emoji", EmojiSymbols; font-size: 16px;">kindly assist me </span></div>
<div><br>
</div>
<br>
<p></p>
<p style="margin-top:0;margin-bottom:0"><br>
</p>
<div id="Signature">
<div id="divtagdefaultwrapper" style="font-size: 12pt; color: rgb(0, 0, 0); background-color: rgb(255, 255, 255); font-family: Calibri, Arial, Helvetica, sans-serif, EmojiFont, "Apple Color Emoji", "Segoe UI Emoji", NotoColorEmoji, "Segoe UI Symbol", "Android Emoji", EmojiSymbols;">
<p><b>Thanks & Regards</b></p>
<p><b><span style="font-size:12pt">Rahul Tiwari</span><br>
</b></p>
<p><span style="font-size:12pt"><b><br>
</b></span></p>
<p><br>
</p>
</div>
</div>
</div>
</body>
</html>