<div dir="auto"><div>Hi Sid,<div dir="auto"><br></div><div dir="auto">Start here <a href="https://wiki.lustre.org/LNET_Selftest">https://wiki.lustre.org/LNET_Selftest</a></div><div dir="auto"><br></div><div dir="auto">That should get you near wire speed numbers and you can use it to play around with your network tunables.</div><div dir="auto"><br></div><div dir="auto">After that, obdfilter-survey, mdtest, IOR and fio amongst others will help you determine hero and average numbers for your whole I/O path.</div><div dir="auto"><br></div><div dir="auto">Cheers </div><div dir="auto"><br></div><div dir="auto">-cf</div><br><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Mon, Mar 8, 2021, 4:17 PM Sid Young via lustre-discuss <<a href="mailto:lustre-discuss@lists.lustre.org">lustre-discuss@lists.lustre.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">G'Day all,<div><br></div><div>What sort of transfer speeds should I expect to see from  a client writing a 1G file into the Lustre storage via RoCE on a 100G ConnectX5 (write block size is 1M)?</div><div><br></div><div>I have done virtually no tuning yet and the MTU is showing as "active 1024".</div><div><br></div><div>If you have any links to share with some performance benchmarks and config examples that would be much appreciated.</div><div><br></div><div>Thanks<br clear="all"><div><div dir="ltr" data-smartmail="gmail_signature"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div><br></div><div><br></div><div>Sid Young</div><div><br></div></div></div></div></div></div></div></div></div></div></div></div>
_______________________________________________<br>
lustre-discuss mailing list<br>
<a href="mailto:lustre-discuss@lists.lustre.org" target="_blank" rel="noreferrer">lustre-discuss@lists.lustre.org</a><br>
<a href="http://lists.lustre.org/listinfo.cgi/lustre-discuss-lustre.org" rel="noreferrer noreferrer" target="_blank">http://lists.lustre.org/listinfo.cgi/lustre-discuss-lustre.org</a><br>
</blockquote></div></div></div>