
<html>

  <head>


    <meta http-equiv="content-type" content="text/html; charset=utf-8">

  </head>

  <body text="#000000" bgcolor="#FFFFFF">

    Hello,<br>

    I am trying to deploy a multi rail configuration on Lustre 2.10.0 on

    RHEL73.<br>

    My goal is to use both the IB interfaces on OSSes and client.<br>

    I have one client and two OSSes and 1 MDS<br>

    My LNet network is labelled o2ib5 and tcp5 just for my own

    convenience. What I did is to modify the configuration of

    lustre.conf<br>

    <br>

    options lnet networks=o2ib5(ib0,ib1),tcp5(enp1s0f0)<br>

    <br>

    lctl list_nids on either hte OSSes or the client shows me both local

    IB interfaces:<br>

    <br>

    <b>172.21.52.86@o2ib5</b><b><br>

    </b><b>172.21.52.118@o2ib5</b><br>

    172.21.42.211@tcp5<br>

    <p>anyway I can't run a LNet selftest using the new nids, it fails.</p>

    Seems like they are unused.<br>

    Any hint on the multi-rail configuration needed?<br>

    What I'd like to do is use both InfiniBand cards (ib0,ib1)  on my

    two OSSes and on my client to leverage more bandwidth usage<br>

    since with only one InfiniBand I cannot saturate the disk

    performance.<br>

    thank you

    <p><br>

    </p>

  </body>

</html>