You can do this, simply define networks for both devices. <div>Assuming ib0, and eth0, you would have</div><div>options lnet networks="tcp0(eth0),o2ib0(ib0)"</div><div><br></div><div>The IB clients will mount using a @o2ib0 NID, and the ethernet clients will mount using @tcp0 NIDs. Since you are explicitly specifying the network, the hop rule doesn't apply.</div>
<div>cliffw</div><div><br><br><div class="gmail_quote">On Fri, Dec 16, 2011 at 9:49 AM, Patrice Hamelin <span dir="ltr"><<a href="mailto:patrice.hamelin@ec.gc.ca">patrice.hamelin@ec.gc.ca</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<u></u>

  
    
  
  <div bgcolor="#ffffff" text="#000000">
    Hi,<br>
    <br>
      I have two Infiniband clusters, each in a separate location with a
    solid ethernet connectivity between each of them.  Say they are
    named cluster A and cluster B.  All members of each clusters have
    both IB and eth networks available to them, and the IB network is
    not routed between cluster A and B, but ethernet is.  On each
    clusters, I have 4 OSS's serving FC disks.  Clients on cluster A
    mounts Lustre disk from their local cluster, and the same goes on
    for for cluster B, both on Infiniband NIDs.<br>
    <br>
      What I would like to achieve is client from cluster A to mount
    disks from OSS's on cluster B on the ethernet connection.  The same
    goes on for clients in cluster B to mount disks from OSS's on
    cluster A.<br>
    <br>
      From my readings in the luster 1.8.7 manual, I got:<br>
    <br>
    7.1.1 Modprobe.conf<br>
    Options under modprobe.conf are used to specify the networks
    available to a node.<br>
    You have the choice of two different options – the networks option,
    which explicitly<br>
    lists the networks available and the ip2nets option, which provides
    a list-matching<br>
    lookup. Only one option can be used at any one time. The order of
    LNET lines in<br>
    modprobe.conf is important when configuring multi-homed servers. <b>If


      a server<br>
      node can be reached using more than one network, the first network
      specified in<br>
      modprobe.conf will be used.</b><br>
    <br>
    Is the last sentence means that I cannot do that?<br>
    <br>
    Thanks.<span class="HOEnZb"><font color="#888888"><br>
    <br>
    -- <br>
    Patrice Hamelin<br>
    Specialiste sénior en systèmes d'exploitation | Senior OS specialist<br>
    Environnement Canada | Environment Canada<br>
    2121, route Transcanadienne | 2121 Transcanada Highway<br>
    Dorval, QC H9P 1J3<br>
    Gouvernement du Canada | Government of Canada<br>
    <br>
  </font></span></div>

<br>_______________________________________________<br>
Lustre-discuss mailing list<br>
<a href="mailto:Lustre-discuss@lists.lustre.org">Lustre-discuss@lists.lustre.org</a><br>
<a href="http://lists.lustre.org/mailman/listinfo/lustre-discuss" target="_blank">http://lists.lustre.org/mailman/listinfo/lustre-discuss</a><br>
<br></blockquote></div><br><br clear="all"><div><br></div>-- <br>cliffw<div>Support Guy</div><div>WhamCloud, Inc. </div><div><a href="http://www.whamcloud.com" target="_blank">www.whamcloud.com</a></div><div><br></div><br>

</div>