<div dir="ltr"><div>Hi all,</div><div><br></div><div>We are having a strange issue where it seems like the quota summary for a particular group is wrong, which seems directly related to having inactive OSTs (they were fully drained, then active=0 on the MGS, for both the osc and osp services). </div><div><br></div><div>For instance:</div><div>"""</div><div>$ lfs quota -g groupname /h4<br>Disk quotas for grp groupname (gid XXXX):<br>     Filesystem  kbytes   quota   limit   grace   files   quota   limit   grace<br>            /fs4 [5109145]       0       0       -  537293       0       0       -<br>Some errors happened when getting quota info. Some devices may be not working or deactivated. The data in "[]" is inaccurate.<br></div><div>"""</div><div><br></div><div>If you run with the -v flag with lfs quota, all of the columns for each active OST add up to the expected quota. We do get these extra messages when running with -v:</div><div><br></div><div>"""</div><div>quotactl ost19 failed.<br>quotactl ost20 failed.<br>quotactl ost21 failed.<br></div><div>"""</div><div><br></div><div>The current client I'm testing with is 2.10.5 (also tested 2.10.1, 2.12.3), servers are 2.10.1 (yes, I know old). But even upgrading a client to 2.12.3 doesn't resolve the issue. We've tried a variety of things, but the only systems that haven't unmounted the file system in awhile. It gets more bizarre that other client machines running the same exact software stack (including Lustre version) show different results. </div><div><br></div><div>The machines that do show the correct output on the summary line about do not have any OSTs in "IN" state (via lctl dl), not sure what else is different. This means that "working" systems have an import state of FULL, whereas non-working systems have a state of disconnected. For the particular OSTs that we've removed from this file system, both working and non-working quota clients show the osc.${ost}.active as '0'.</div><div><br></div><div>For now we are summing the verbose output columns, but does the issue jump out to anyone? </div><br clear="all"><div><br></div>-- <br><div dir="ltr" data-smartmail="gmail_signature"><div dir="ltr"><p style="line-height:1.44;margin-top:0pt;margin-bottom:0pt"><font color="#000000" face="Arial"><span style="font-size:13.3333px;white-space:pre-wrap"><b>Steve Crusan</b></span></font></p><p style="line-height:1.44;margin-top:0pt;margin-bottom:0pt"><br></p></div></div></div>