You can do this, simply define networks for both devices.<div>Assuming ib0, and eth0, you would have</div><div>options lnet networks=&quot;tcp0(eth0),o2ib0(ib0)&quot;</div><div><br></div><div>The IB clients will mount using a @o2ib0 NID, and the ethernet clients will mount using @tcp0 NIDs. Since you are explicitly specifying the network, the hop rule doesn&#39;t apply.</div>
<div>cliffw</div><div><br><br><div class="gmail_quote">On Fri, Dec 16, 2011 at 9:49 AM, Patrice Hamelin <span dir="ltr">&lt;<a href="mailto:patrice.hamelin@ec.gc.ca">patrice.hamelin@ec.gc.ca</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<u></u>

  
    
  
  <div bgcolor="#ffffff" text="#000000">
    Hi,<br>
    <br>
     I have two Infiniband clusters, each in a separate location with a
    solid ethernet connectivity between each of them. Say they are
    named cluster A and cluster B. All members of each clusters have
    both IB and eth networks available to them, and the IB network is
    not routed between cluster A and B, but ethernet is. On each
    clusters, I have 4 OSS&#39;s serving FC disks. Clients on cluster A
    mounts Lustre disk from their local cluster, and the same goes on
    for for cluster B, both on Infiniband NIDs.<br>
    <br>
     What I would like to achieve is client from cluster A to mount
    disks from OSS&#39;s on cluster B on the ethernet connection. The same
    goes on for clients in cluster B to mount disks from OSS&#39;s on
    cluster A.<br>
    <br>
     From my readings in the luster 1.8.7 manual, I got:<br>
    <br>
    7.1.1 Modprobe.conf<br>
    Options under modprobe.conf are used to specify the networks
    available to a node.<br>
    You have the choice of two different options  the networks option,
    which explicitly<br>
    lists the networks available and the ip2nets option, which provides
    a list-matching<br>
    lookup. Only one option can be used at any one time. The order of
    LNET lines in<br>
    modprobe.conf is important when configuring multi-homed servers. <b>If


      a server<br>
      node can be reached using more than one network, the first network
      specified in<br>
      modprobe.conf will be used.</b><br>
    <br>
    Is the last sentence means that I cannot do that?<br>
    <br>
    Thanks.<span class="HOEnZb"><font color="#888888"><br>
    <br>
    -- <br>
    Patrice Hamelin<br>
    Specialiste snior en systmes d&#39;exploitation | Senior OS specialist<br>
    Environnement Canada | Environment Canada<br>
    2121, route Transcanadienne | 2121 Transcanada Highway<br>
    Dorval, QC H9P 1J3<br>
    Gouvernement du Canada | Government of Canada<br>
    <br>
  </font></span></div>

<br>_______________________________________________<br>
Lustre-discuss mailing list<br>
<a href="mailto:Lustre-discuss@lists.lustre.org">Lustre-discuss@lists.lustre.org</a><br>
<a href="http://lists.lustre.org/mailman/listinfo/lustre-discuss" target="_blank">http://lists.lustre.org/mailman/listinfo/lustre-discuss</a><br>
<br></blockquote></div><br><br clear="all"><div><br></div>-- <br>cliffw<div>Support Guy</div><div>WhamCloud, Inc.</div><div><a href="http://www.whamcloud.com" target="_blank">www.whamcloud.com</a></div><div><br></div><br>

</div>