This error message you are seeing is what Andreas was talking about - you must use the<div>ext4-based version, as you will not need any option with your size LUNS. The 'must use force_over_8tb'</div><div>error is the key here, you most certainly want/need to *.ext4.rpm versions of stuff. </div>
<div>cliffw</div><div><br><br><div class="gmail_quote">On Thu, Jul 14, 2011 at 11:10 AM, Theodore Omtzigt <span dir="ltr"><<a href="mailto:theo@stillwater-sc.com">theo@stillwater-sc.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">
Michael:<br>
<br>
    The reason I had to do it on the OST's is because when issuing the<br>
mkfs.lustre command to build the OST it would error out with the message<br>
that I should use the force_over_8tb mount option. I was not able to<br>
create an OST on that device without the force_over_8tb option.<br>
<br>
Your insights on the writeconf are excellent: good to know that<br>
writeconf is solid. Thank you.<br>
<br>
Theo<br>
<div><div></div><div class="h5"><br>
On 7/14/2011 1:29 PM, Michael Barnes wrote:<br>
> On Jul 14, 2011, at 1:15 PM, Theodore Omtzigt wrote:<br>
><br>
>> Two part question:<br>
>> 1- do I need to set that parameter on the MGS/MDS server as well<br>
> No, they are different filesystems.  You shouldn't need to do this on the OSTs either.  You must be using an older lustre release.<br>
><br>
>> 2- if yes, how do I properly add this parameter on this running Lustre<br>
>> file system (100TB on 9 storage servers)<br>
> covered<br>
><br>
>> I can't resolve the ambiguity in the documentation as I can't find a<br>
>> good explanation of the configuration log mechanism that is being<br>
>> referenced in the man pages. The fact that the doc for --writeconf<br>
>> states "This is very dangerous", I am hesitant to pull the trigger as<br>
>> there is 60TB of data on this file system that I rather not lose.<br>
> I've had no issues with writeconf.  Its nice because it shows you the old and new parameters.  Make sure that the changes that you made were the what you want, and that the old parameters that you want to keep are still in tact.  I don't remember the exact circumstances, but I've found settings were lost when doing a writeconf, and I had to explictly put these settings in tunefs.lustre command to preserve them.<br>

><br>
> -mb<br>
><br>
> --<br>
> +-----------------------------------------------<br>
> | Michael Barnes<br>
> |<br>
> | Thomas Jefferson National Accelerator Facility<br>
> | Scientific Computing Group<br>
> | 12000 Jefferson Ave.<br>
> | Newport News, VA 23606<br>
> | <a href="tel:%28757%29%20269-7634" value="+17572697634">(757) 269-7634</a><br>
> +-----------------------------------------------<br>
><br>
><br>
><br>
><br>
><br>
_______________________________________________<br>
Lustre-discuss mailing list<br>
<a href="mailto:Lustre-discuss@lists.lustre.org">Lustre-discuss@lists.lustre.org</a><br>
<a href="http://lists.lustre.org/mailman/listinfo/lustre-discuss" target="_blank">http://lists.lustre.org/mailman/listinfo/lustre-discuss</a><br>
</div></div></blockquote></div><br><br clear="all"><br>-- <br>cliffw<div>Support Guy</div><div>WhamCloud, Inc. </div><div><a href="http://www.whamcloud.com" target="_blank">www.whamcloud.com</a></div><div><br></div><br>
</div>