<div dir="ltr">Hi all,<div><br></div><div>We have build a lustre cluster server environment on CentOS7 and lustre 2.12.7<br>The clients are using 2.12.5<br>The setup is 3 clusters for a 3PB filesystem<br>One cluster is a two node cluster built for MGS and MDT's <br>The other two clusters are also two node cluster used for the OST's</div><div>The cluster framework is working as expected.<br><br>The servers are connected in a multirail network, because some clients are in IB and the other clients are on ethernet<br><br>But we have the following problem. When an OST failover to the second node the clients are unable to contact the OST that is started on the oder node.<br>The OST recovery status is waiting for clients</div><div>When we fail it back it starts working again and the recovery status is compple</div><div><br>We tried to abort the recovery but that does not work.</div><div><br></div><div>We used these documents to build the cluster:</div><div><a href="https://wiki.lustre.org/Creating_the_Lustre_Management_Service_(MGS)">https://wiki.lustre.org/Creating_the_Lustre_Management_Service_(MGS)</a><br><a href="https://wiki.lustre.org/Creating_the_Lustre_Metadata_Service_(MDS)">https://wiki.lustre.org/Creating_the_Lustre_Metadata_Service_(MDS)</a><br><a href="https://wiki.lustre.org/Creating_Lustre_Object_Storage_Services_(OSS)">https://wiki.lustre.org/Creating_Lustre_Object_Storage_Services_(OSS)</a><br><a href="https://wiki.lustre.org/Creating_Pacemaker_Resources_for_Lustre_Storage_Services">https://wiki.lustre.org/Creating_Pacemaker_Resources_for_Lustre_Storage_Services</a><br></div><div><br></div><div>I'm not sure what the next steps must be to find the problem and where to look.</div><div><br></div><div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div dir="ltr"><div>Best regards</div><div>Koos Meijering</div><div>........................................................................</div><div>HPC Team<br></div><div></div><div>Rijksuniversiteit Groningen<br></div><div>........................................................................</div></div></div></div></div></div>