
<html><head></head><body>The limit of IPoIB is active/backup when using traditional bonding, however I believe you are wanting to multirail your IB. This is achieved buy using multiple LNet's (assuming it uses the same fabric), you should be able to configure for active/active.<br><br><a href="https://wiki.whamcloud.com/display/LNet/Multi-Rail+Overview">https://wiki.whamcloud.com/display/LNet/Multi-Rail+Overview</a><br><br>This should help with most of the concepts.<br><br>-- Lauz<br><br><div class="gmail_quote">On 16 January 2022 11:56:16 GMT, "E.S. Rosenberg" <esr+lustre@mail.hebrew.edu> wrote:<blockquote class="gmail_quote" style="margin: 0pt 0pt 0pt 0.8ex; border-left: 1px solid rgb(204, 204, 204); padding-left: 1ex;">

<div dir="ltr"><div>Hey everyone,</div><div><br></div><div>This is probably off-topic but I can't find any documents on the subject and since Lustre uses IPoIB I suspect others here have dealt with this question.</div><div><br></div><div>If I have a node connected with multiple IB links should each connected IB port have it's own IP address or is there a way similar to LACP on the Ethernet side to bond all the links and use only a single IP address to refer to the node? And what is the better method?</div><div><br></div><div>In the past I never had this luxury, but now I'm starting a small new cluster currently made up of a few GPU nodes and a Lustre filesystem so plenty of IB ports to go around.<br></div><div><br></div><div>Thanks!</div><div>Eli<br></div></div>

</blockquote></div></body></html>