<div>Though I think its marked as development or experimental in the Lustre documention or source &quot;lctl set_route&quot; has worked fine for me in the past with no issues.</div>
<div></div>
<div>lctl set_route &lt;nid&gt; up</div>
<div></div>
<div>is the syntax I believe.</div>
<div></div>
<div>Jeremy<br><br></div>
<div class="gmail_quote">On Tue, Jan 25, 2011 at 9:52 AM, Michael Kluge <span dir="ltr">&lt;<a href="mailto:Michael.Kluge@tu-dresden.de">Michael.Kluge@tu-dresden.de</a>&gt;</span> wrote:<br>
<blockquote style="BORDER-LEFT: #ccc 1px solid; MARGIN: 0px 0px 0px 0.8ex; PADDING-LEFT: 1ex" class="gmail_quote">Jason, Michael,<br><br>thanks y lot for your replies. I pinged everone from all directions but<br>the router is still marked &quot;down&quot; on the client. I even removed and<br>
re-added the router entry via lctl --net tcp1 del_route xyz@o2ib and<br>lctl --net tcp1 add_route xyz@o2ib . No luck. So I think I&#39;ll wait for<br>the next maintenance window. Oh, and I forgot to mention that the<br>servers run a 1.6.7.2, the router as well and the clients 1.8.5. Works<br>
good so far.<br><br><br>Thanks, Michael<br><br><br>Am Dienstag, den 25.01.2011, 15:12 +0100 schrieb Temple Jason:<br>
<div>
<div></div>
<div class="h5">&gt; I&#39;ve found that even with the Protocal Error, it still works.<br>&gt;<br>&gt; -Jason<br>&gt;<br>&gt; -----Original Message-----<br>&gt; From: <a href="mailto:lustre-discuss-bounces@lists.lustre.org">lustre-discuss-bounces@lists.lustre.org</a> [mailto:<a href="mailto:lustre-discuss-bounces@lists.lustre.org">lustre-discuss-bounces@lists.lustre.org</a>] On Behalf Of Michael Shuey<br>
&gt; Sent: marted, 25. gennaio 2011 14:45<br>&gt; To: Michael Kluge<br>&gt; Cc: Lustre Diskussionsliste<br>&gt; Subject: Re: [Lustre-discuss] &quot;up&quot; a router that is marked &quot;down&quot;<br>&gt;<br>&gt; You&#39;ll want to add the &quot;dead_router_check_interval&quot; lnet module<br>
&gt; parameter as soon as you are able. As near as I can tell, without<br>&gt; that there&#39;s no automatic check to make sure the router is alive.<br>&gt;<br>&gt; I&#39;ve had some success in getting machines to recognize that a router<br>
&gt; is alive again by doing an lctl ping of their side of a router (e.g.,<br>&gt; on a tcp0 client, `lctl ping &lt;routerIP&gt;@tcp0`, then `lctl ping<br>&gt; &lt;routerIP&gt;@o2ib0` from an o2ib0 client). If you have a server/client<br>
&gt; version mismatch, where lctl ping returns a protocol error, you may be<br>&gt; out of luck.<br>&gt;<br>&gt; --<br>&gt; Mike Shuey<br>&gt;<br>&gt;<br>&gt;<br>&gt; On Tue, Jan 25, 2011 at 8:38 AM, Michael Kluge<br>&gt; &lt;<a href="mailto:Michael.Kluge@tu-dresden.de">Michael.Kluge@tu-dresden.de</a>&gt; wrote:<br>
&gt; &gt; Hi list,<br>&gt; &gt;<br>&gt; &gt; if a Lustre router is down, comes back to life and the servers do not<br>&gt; &gt; actively test the routers periodically: is it possible to mark a Lustre<br>&gt; &gt; router as &quot;up&quot;? Or to tell the servers to ping the router?<br>
&gt; &gt;<br>&gt; &gt; Or can I enable the &quot;router pinger&quot; in a live system without unloading<br>&gt; &gt; and loading the Lustre kernel modules?<br>&gt; &gt;<br>&gt; &gt;<br>&gt; &gt; Regards, Michael<br>&gt; &gt;<br>
&gt; &gt; --<br>&gt; &gt;<br>&gt; &gt; Michael Kluge, M.Sc.<br>&gt; &gt;<br>&gt; &gt; Technische Universitt Dresden<br>&gt; &gt; Center for Information Services and<br>&gt; &gt; High Performance Computing (ZIH)<br>&gt; &gt; D-01062 Dresden<br>
&gt; &gt; Germany<br>&gt; &gt;<br>&gt; &gt; Contact:<br>&gt; &gt; Willersbau, Room A 208<br>&gt; &gt; Phone: (+49) 351 463-34217<br>&gt; &gt; Fax:  (+49) 351 463-37773<br>&gt; &gt; e-mail: <a href="mailto:michael.kluge@tu-dresden.de">michael.kluge@tu-dresden.de</a><br>
&gt; &gt; WWW:  <a href="http://www.tu-dresden.de/zih" target="_blank">http://www.tu-dresden.de/zih</a><br>&gt; &gt;<br>&gt; &gt; _______________________________________________<br>&gt; &gt; Lustre-discuss mailing list<br>
&gt; &gt; <a href="mailto:Lustre-discuss@lists.lustre.org">Lustre-discuss@lists.lustre.org</a><br>&gt; &gt; <a href="http://lists.lustre.org/mailman/listinfo/lustre-discuss" target="_blank">http://lists.lustre.org/mailman/listinfo/lustre-discuss</a><br>
&gt; &gt;<br>&gt; &gt;<br>&gt; _______________________________________________<br>&gt; Lustre-discuss mailing list<br>&gt; <a href="mailto:Lustre-discuss@lists.lustre.org">Lustre-discuss@lists.lustre.org</a><br>&gt; <a href="http://lists.lustre.org/mailman/listinfo/lustre-discuss" target="_blank">http://lists.lustre.org/mailman/listinfo/lustre-discuss</a><br>
&gt;<br><br></div></div>--<br>
<div>
<div></div>
<div class="h5"><br>Michael Kluge, M.Sc.<br><br>Technische Universitt Dresden<br>Center for Information Services and<br>High Performance Computing (ZIH)<br>D-01062 Dresden<br>Germany<br><br>Contact:<br>Willersbau, Room A 208<br>
Phone: (+49) 351 463-34217<br>Fax:  (+49) 351 463-37773<br>e-mail: <a href="mailto:michael.kluge@tu-dresden.de">michael.kluge@tu-dresden.de</a><br>WWW:  <a href="http://www.tu-dresden.de/zih" target="_blank">http://www.tu-dresden.de/zih</a><br>
</div></div><br>_______________________________________________<br>Lustre-discuss mailing list<br><a href="mailto:Lustre-discuss@lists.lustre.org">Lustre-discuss@lists.lustre.org</a><br><a href="http://lists.lustre.org/mailman/listinfo/lustre-discuss" target="_blank">http://lists.lustre.org/mailman/listinfo/lustre-discuss</a><br>
<br></blockquote></div><br>