<div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr">Hi <div>  </div><div>    Thank you very much for your reply.</div><div><br></div><div>I looked in the /sys but also did not find the osc/*/stats or llite/*/stats files. </div><div><br></div><div>I understand what you are saying about the lctl becoming the new standard way.</div><div>But I just want to make sure that this is not due to sth. wrong with my system or setup.</div><div><br></div><div>FYI, I am using CentOS 7.6 kernel 3.10.0-957.el7.x86_64 and *_lustre* for my clients and </div><div>lustre servers with Lustre version 2.12.0 using IB FDR as the LNET.</div><div><br></div><div>Would the missing stats files in /sys/fs/lustre or /proc/fs/lustre considered normal?<br></div><div><br></div><div> Any monitoring tool you would suggest to use instead of lustre gmond_python_modules in order </div><div>to avoid reading stats files? My initial review of LMT3 also indicate that it too reading data from </div><div>stats file rather than using lctl. </div><div><br></div><div>Cheers,</div><div>Utane</div><div>  <br></div><div><div><div dir="ltr" class="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div><div><div dir="ltr"><font face="times new roman, serif"><span><span style="color:rgb(0,0,0)">---------------------------------------------------------------------------------------</span><br style="color:rgb(0,0,0)"><span style="color:rgb(0,0,0)">Utane Sawangwit, PhD.</span><br style="color:rgb(0,0,0)"><span style="color:rgb(0,0,0)">Research Astronomer</span><br style="color:rgb(0,0,0)"><span style="color:rgb(0,0,0)">National Astronomical Research Institute of Thailand (NARIT)</span><br style="color:rgb(0,0,0)"></span><font color="#000000">Sirindhon AstroPark, 260, Mue 4, Donkaew</font></font></div><div dir="ltr"><font face="times new roman, serif"><font color="#000000">Mae-Rim, Chiang Mai, 50180, Thailand</font></font><div><font face="times new roman, serif"><span><span style="color:rgb(0,0,0)">----------------------------------------------------------------------------------------</span><br style="color:rgb(0,0,0)"><span style="color:rgb(0,0,0)">ดร. อุเทน แสวงวิทย์</span><br style="color:rgb(0,0,0)"></span><span style="color:rgb(0,0,0)">นักวิจัยชำนาญการ</span><span><br style="color:rgb(0,0,0)"><span style="color:rgb(0,0,0)">สถาบันวิจัยดาราศาสตร์แห่งชาติ(องค์การมหาชน)</span><br style="color:rgb(0,0,0)"></span><font color="#000000">อุทยานดาราศาสตร์สิรินธร 260 หมู่ 4 ต.ดอนแก้ว</font></font></div><div><font face="times new roman, serif"><font color="#000000">อ.แม่ริม จ.เชียงใหม่ 50180</font></font></div><div><span><font face="times new roman, serif"><span style="color:rgb(0,0,0)">---------------------------------------------------------------------------------------</span></font><br></span></div><div><span><font face="times new roman, serif"><span style="color:rgb(0,0,0)"><br></span></font></span></div></div></div></div><div><div></div></div></div></div></div></div></div></div><br></div></div></div></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, 25 Jul 2019 at 22:05, Degremont, Aurelien <<a href="mailto:degremoa@amazon.com">degremoa@amazon.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-style:solid;border-left-color:rgb(204,204,204);padding-left:1ex">





<div lang="FR">
<div class="gmail-m_-8281126666136594716WordSection1">
<p class="MsoNormal"><span>Lustre is transitionning /proc files to /sys per kernel developer requests.<u></u><u></u></span></p>
<p class="MsoNormal"><span><u></u> <u></u></span></p>
<p class="MsoNormal"><span>Instead of chasing where these files are located now depending on your Lustre version, 'lctl get_param' is the official way to read them.<u></u><u></u></span></p>
<p class="MsoNormal"><span>This command will figure out where to properly read the files.<u></u><u></u></span></p>
<p class="MsoNormal"><span><u></u> <u></u></span></p>
<div style="border-style:solid none none;border-top-width:1pt;border-top-color:rgb(181,196,223);padding:3pt 0cm 0cm">
<p class="MsoNormal"><b><span style="font-size:12pt;color:black">De : </span></b><span style="font-size:12pt;color:black">lustre-discuss <<a href="mailto:lustre-discuss-bounces@lists.lustre.org" target="_blank">lustre-discuss-bounces@lists.lustre.org</a>> au nom de U Sawangwit <<a href="mailto:u.sawangwit@gmail.com" target="_blank">u.sawangwit@gmail.com</a>><br>
<b>Date : </b>jeudi 25 juillet 2019 à 13:15<br>
<b>À : </b>"<a href="mailto:lustre-discuss@lists.lustre.org" target="_blank">lustre-discuss@lists.lustre.org</a>" <<a href="mailto:lustre-discuss@lists.lustre.org" target="_blank">lustre-discuss@lists.lustre.org</a>><br>
<b>Objet : </b>[lustre-discuss] osc and llite stats files are not exported to clients<u></u><u></u></span></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<div>
<div>
<div>
<div>
<div>
<p class="MsoNormal">Dear all, <u></u><u></u></p>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">   I am having trouble with lustre monitoring using Ganglia gmond_python_modules <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">(<a href="https://github.com/ganglia/gmond_python_modules/tree/master/lustre" target="_blank">https://github.com/ganglia/gmond_python_modules/tree/master/lustre</a>).<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">    Upon closer inspections, I found that the stats files in /proc/fs/lustre/osc/*/<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">and /proc/fs/lustre/llite are missing (among other similar files in these directories). <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">     However, lctl get_param osc.*.stats and lctl get_param llite.*.stats return <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">parameters and values as you would expect. The stats files are what the <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">gmond_python_modules wants hence the problem monitoring with Ganglia. <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">    After many searching around, could not figure out what I could have done to <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">have stats export normally to clients and remounting did not help. On MDS and OSS,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">I can see the obdfiler/*/export/*/stats or mdt/*/export/*/stats<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">    The lustre manual also said that the exporting of these info to client should be by <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">default.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"> <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">  Thank you in advance.<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Cheers,<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">Utane  <u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">  <u></u><u></u></p>
</div>
<div>
<div>
<div>
<div>
<div>
<div>
<div>
<div>
<div>
<div>
<p class="MsoNormal"><span style="font-family:"Times New Roman",serif;color:black">---------------------------------------------------------------------------------------<br>
Utane Sawangwit, PhD.<br>
Research Astronomer<br>
National Astronomical Research Institute of Thailand (NARIT)<br>
Sirindhon AstroPark, 260, Mue 4, Donkaew</span><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><span style="font-family:"Times New Roman",serif;color:black">Mae-Rim, Chiang Mai, 50180, Thailand</span>
<u></u><u></u></p>
<div>
<p class="MsoNormal"><span style="font-family:"Times New Roman",serif;color:black">----------------------------------------------------------------------------------------<br>
</span><span style="font-family:Tahoma,sans-serif;color:black">ดร</span><span style="font-family:"Times New Roman",serif;color:black">.
</span><span style="font-family:Tahoma,sans-serif;color:black">อุเทน</span><span style="font-family:"Times New Roman",serif;color:black">
</span><span style="font-family:Tahoma,sans-serif;color:black">แสวงวิทย์</span><span style="font-family:"Times New Roman",serif;color:black"><br>
</span><span style="font-family:Tahoma,sans-serif;color:black">นักวิจัยชำนาญการ</span><span style="font-family:"Times New Roman",serif;color:black"><br>
</span><span style="font-family:Tahoma,sans-serif;color:black">สถาบันวิจัยดาราศาสตร์แห่งชาติ</span><span style="font-family:"Times New Roman",serif;color:black">(</span><span style="font-family:Tahoma,sans-serif;color:black">องค์การมหาชน</span><span style="font-family:"Times New Roman",serif;color:black">)<br>
</span><span style="font-family:Tahoma,sans-serif;color:black">อุทยานดาราศาสตร์สิรินธร</span><span style="font-family:"Times New Roman",serif;color:black"> 260
</span><span style="font-family:Tahoma,sans-serif;color:black">หมู่</span><span style="font-family:"Times New Roman",serif;color:black"> 4
</span><span style="font-family:Tahoma,sans-serif;color:black">ต</span><span style="font-family:"Times New Roman",serif;color:black">.</span><span style="font-family:Tahoma,sans-serif;color:black">ดอนแก้ว</span><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><span style="font-family:Tahoma,sans-serif;color:black">อ</span><span style="font-family:"Times New Roman",serif;color:black">.</span><span style="font-family:Tahoma,sans-serif;color:black">แม่ริม</span><span style="font-family:"Times New Roman",serif;color:black">
</span><span style="font-family:Tahoma,sans-serif;color:black">จ</span><span style="font-family:"Times New Roman",serif;color:black">.</span><span style="font-family:Tahoma,sans-serif;color:black">เชียงใหม่</span><span style="font-family:"Times New Roman",serif;color:black">
 50180</span><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><span style="font-family:"Times New Roman",serif;color:black">---------------------------------------------------------------------------------------</span><u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>

</blockquote></div>