<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.0 Transitional//EN">
<HTML><HEAD>
<META content="text/html; charset=gb2312" http-equiv=Content-Type>
<META name=GENERATOR content="MSHTML 8.00.6001.18813">
<STYLE>@font-face {
        font-family: 宋体;
}
@font-face {
        font-family: Verdana;
}
@font-face {
        font-family: @宋体;
}
@page Section1 {size: 595.3pt 841.9pt; margin: 72.0pt 90.0pt 72.0pt 90.0pt; layout-grid: 15.6pt; }
P.MsoNormal {
        TEXT-JUSTIFY: inter-ideograph; TEXT-ALIGN: justify; MARGIN: 0cm 0cm 0pt; FONT-FAMILY: "Times New Roman"; FONT-SIZE: 10.5pt
}
LI.MsoNormal {
        TEXT-JUSTIFY: inter-ideograph; TEXT-ALIGN: justify; MARGIN: 0cm 0cm 0pt; FONT-FAMILY: "Times New Roman"; FONT-SIZE: 10.5pt
}
DIV.MsoNormal {
        TEXT-JUSTIFY: inter-ideograph; TEXT-ALIGN: justify; MARGIN: 0cm 0cm 0pt; FONT-FAMILY: "Times New Roman"; FONT-SIZE: 10.5pt
}
A:link {
        COLOR: blue; TEXT-DECORATION: underline
}
SPAN.MsoHyperlink {
        COLOR: blue; TEXT-DECORATION: underline
}
A:visited {
        COLOR: purple; TEXT-DECORATION: underline
}
SPAN.MsoHyperlinkFollowed {
        COLOR: purple; TEXT-DECORATION: underline
}
SPAN.EmailStyle17 {
        FONT-STYLE: normal; FONT-FAMILY: Verdana; COLOR: windowtext; FONT-WEIGHT: normal; TEXT-DECORATION: none; mso-style-type: personal-compose
}
DIV.Section1 {
        page: Section1
}
UNKNOWN {
        FONT-SIZE: 10pt
}
BLOCKQUOTE {
        MARGIN-TOP: 0px; MARGIN-BOTTOM: 0px; MARGIN-LEFT: 2em
}
OL {
        MARGIN-TOP: 0px; MARGIN-BOTTOM: 0px
}
UL {
        MARGIN-TOP: 0px; MARGIN-BOTTOM: 0px
}
</STYLE>
</HEAD>
<BODY style="MARGIN: 10px; FONT-FAMILY: verdana; FONT-SIZE: 10pt">
<DIV><FONT color=#000080 size=2 face=Verdana>Hi, all</FONT></DIV>
<DIV><FONT color=#000080></FONT> </DIV>
<DIV><FONT color=#000080>Sorry, I should show the lustre version in 
details. The </FONT><FONT color=#000080>version for our system as 
follows:</FONT></DIV>
<DIV><FONT color=#000080></FONT> </DIV>
<DIV><FONT color=#000080>MDS:    V1.6.5</FONT></DIV>
<DIV><FONT color=#000080>OSS:    V1.6.6</FONT></DIV>
<DIV><FONT color=#000080>Clients: V1.6.6</FONT></DIV>
<DIV><FONT color=#000080 size=2 face=Verdana></FONT> </DIV>
<DIV><FONT color=#000080>Thank you for your help.</FONT></DIV>
<DIV><FONT color=#000080></FONT> </DIV>
<DIV><FONT color=#000080>Best wishes,</FONT></DIV>
<DIV><FONT color=#000080>Sarea</FONT></DIV>
<DIV><FONT color=#000080 size=2 face=Verdana></FONT> </DIV>
<DIV><FONT color=#c0c0c0 size=2 face=Verdana>2009-08-18 </FONT></DIV><FONT 
color=#000080 size=2 face=Verdana>
<HR style="WIDTH: 100px" align=left color=#b5c4df SIZE=1>
</FONT>
<DIV><FONT color=#c0c0c0 size=2 face=Verdana><SPAN>huangql</SPAN> </FONT></DIV>
<HR color=#b5c4df SIZE=1>

<DIV><FONT size=2 face=Verdana><STRONG>发件人:</STRONG> Alexey Lyashkov 
</FONT></DIV>
<DIV><FONT size=2 face=Verdana><STRONG>发送时间:</STRONG> 2009-08-17  22:31:58 
</FONT></DIV>
<DIV><FONT size=2 face=Verdana><STRONG>收件人:</STRONG> huangql </FONT></DIV>
<DIV><FONT size=2 face=Verdana><STRONG>抄送:</STRONG> lustre-discuss </FONT></DIV>
<DIV><FONT size=2 face=Verdana><STRONG>主题:</STRONG> Re: [Lustre-discuss] Why are 
there many threads named "ll_imp_inval"in client? </FONT></DIV>
<DIV><FONT size=2 face=Verdana></FONT> </DIV>
<DIV><FONT size=2 face=Verdana>
<DIV>Hi huangql,</DIV>
<DIV></DIV>
<DIV>which lustre version you using? </DIV>
<DIV></DIV>
<DIV>On Mon, 2009-08-17 at 15:23 +0800, huangql wrote:</DIV>
<DIV>> Hi, all</DIV>
<DIV>>  </DIV>
<DIV>> Our system run well past two weeks, However, we found there are some</DIV>
<DIV>> computing nodes which has so many threads named "ll_imp_inval", and</DIV>
<DIV>> the load average of the clients(computing nodes) is up to 28. As a</DIV>
<DIV>> results, Users can't submit jobs to the clients.  I read the source</DIV>
<DIV>> file(import.c) and In my opinion, when each ptlrpc-connect-import or</DIV>
<DIV>> ptlrpc-import-recovery, the ll_imp_inval thread is triggered. So if</DIV>
<DIV>> the server or clients have something wrong, the thread will not exit.</DIV>
<DIV>> Is it right?</DIV>
<DIV>>  </DIV>
<DIV>don't. ll_imp_inval is evictor thread - which started if client isn't</DIV>
<DIV>connected to server (MDS or OST) until recovery is finished, and server</DIV>
<DIV>ask client to flush own staled data.</DIV>
<DIV></DIV>
<DIV></DIV>
<DIV>>  </DIV>
<DIV>> we run 'ps -aux | grep ll_imp_inval' ,the results as follows:</DIV>
<DIV>>  </DIV>
<DIV>> root     22568  0.0  0.0   0   0 ?   D  Aug13  0:00 [ll_imp_inval]</DIV>
<DIV>> root     22569  0.0  0.0   0   0 ?   D  Aug13  0:00 [ll_imp_inval]</DIV>
<DIV>> root     22570  0.0  0.0   0   0 ?   D  Aug13  0:00 [ll_imp_inval]</DIV>
<DIV>> root     22571  0.0  0.0   0   0 ?   D  Aug13  0:00 [ll_imp_inval]</DIV>
<DIV>> ...</DIV>
<DIV>is possible to see output from sysrq-t (echo t > /proc/sysrq-trigger) ?</DIV>
<DIV></DIV>
<DIV></DIV>
<DIV>>  </DIV>
<DIV>> We had check out the log, and found the main messages as follows,and</DIV>
<DIV>> in other nodes we can get the client evicted messages:</DIV>
<DIV>>  </DIV>
<DIV>>  </DIV>
<DIV>>  </DIV>
<DIV>> Thank you for your help in advance and I hope receive your letter as</DIV>
<DIV>> soon as possible.</DIV>
<DIV>>  </DIV>
<DIV>>  </DIV>
<DIV>> Best wishes,</DIV>
<DIV>> Sarea</DIV>
<DIV>>  </DIV>
<DIV>>  </DIV>
<DIV>> 2009-08-17 </DIV>
<DIV>> </DIV>
<DIV>> ______________________________________________________________________</DIV>
<DIV>> huangql </DIV>
<DIV>> _______________________________________________</DIV>
<DIV>> Lustre-discuss mailing list</DIV>
<DIV>> Lustre-discuss@lists.lustre.org</DIV>
<DIV>> http://lists.lustre.org/mailman/listinfo/lustre-discuss</DIV>
<DIV></DIV>
<DIV></DIV></FONT></DIV></BODY></HTML>