<div dir="ltr"><div>Hi Jon,</div><div><br></div><div>We have been running ZFS MDSs for 10-ish years, and while I'm sure there is still some performance to be gained by using ldiskfs due to among other things the missing support for ZFS ZIL, it's worth it to get rid of the of the absolute BS mess that ldiskfs is. The big performance hits where before we all switched away from rotating rust for MDS. Flash storage makes it pretty manageable.</div><div><br></div><div>Without switching to ZFS NSC would frankly not still be using Lustre, ldiskfs creates too much friction.<br></div><div><br></div><div>Regards,</div><div>-- <br></div><div>Peter Bortas<br></div><div>Swedish National Supercomputer Centre</div><div>Linköping University</div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Jul 21, 2023 at 1:34 PM Jon Marshall via lustre-discuss <<a href="mailto:lustre-discuss@lists.lustre.org">lustre-discuss@lists.lustre.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div class="msg-7379358757337775173">




<div dir="ltr">
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
Hi,</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
<br>
</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
Me again! I now have a successful build of lustre server with ZFS support, thanks all for your help with this. I'm now stuck on getting ldiskfs support to work - specifically it requires the kernel-debuginfo and debugsource packages, which on Rocky 8.6, don't
 exist for the kernel I'm building against (4.18.0-372.9.1.el8.x86_64). I've installed the only ones that exist, for kernel 4.18.0-477.15.1.el8_8 and hackily symlinked it to the current kernel to get lustre to build against it, which it does, but then it fails
 on applying patches, which I suppose is not surprising. I assumed that having the e2fsprogs devel installed would do the trick but the build is specific in looking in /usr/src/kernel and /usr/src/debug/kernel, neither of which have it.</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
<br>
</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
I'd like ldiskfs support as we currently run this fs on the MDT. However, we're only doing that because when we put the filesystem in place (which was a while ago) I'd read a fair amount warning against using ZFS on MDT due to potential performance issues.
 I've had a trawl through the mailing list and I can't see anyone having issues with newer ZFS versions so I guess my question is, is this still a thing? I've been planning to move to ZFS at some point anyway and it seems like this would be a good opportunity
 to do so but I thought I'd check and see if anyone had any advice.</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
<br>
</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
Thanks in advance</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
Jon</div>
<div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
<br>
</div>
<div id="m_-7379358757337775173Signature">
<div>
<div></div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><span style="color:rgb(89,89,89)">Jon Marshall</span></p>
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><span style="font-size:10pt;color:rgb(89,89,89)">High Performance Computing Specialist<br>
</span></p>
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><span style="font-size:10pt;color:rgb(89,89,89)"> </span></p>
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><b><span style="color:rgb(89,89,89)">IT and Scientific Computing Team</span></b><span style="font-size:10pt;color:rgb(89,89,89)"></span></p>
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><span style="font-size:10pt;color:rgb(89,89,89)"> </span></p>
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><span style="font-size:10pt;color:rgb(89,89,89)">Cancer Research UK Cambridge Institute</span></p>
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><span style="font-size:10pt;color:rgb(89,89,89)">Li Ka Shing Centre | Robinson Way | Cambridge | CB2 0RE</span></p>
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><span><a href="http://www.cruk.cam.ac.uk/" rel="noopener noreferrer" target="_blank"><span style="font-size:10pt;color:rgb(0,112,192)">Web</span></a></span><span style="font-size:10pt;color:rgb(0,112,192)">
 | </span><span><a href="http://www.facebook.com/cancerresearchuk" rel="noopener noreferrer" target="_blank"><span style="font-size:10pt;color:rgb(0,112,192)">Facebook</span></a></span><span style="font-size:10pt;color:rgb(0,112,192)"> |
</span><span><a href="http://twitter.com/CR_UK" rel="noopener noreferrer" target="_blank"><span style="font-size:10pt;color:rgb(0,112,192)">Twitter</span></a></span></p>
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><span style="font-size:10pt;color:rgb(0,112,192)"> </span></p>
<p style="font-size:11pt;font-family:Calibri,sans-serif;margin:0px"><a href="http://www.cruk.cam.ac.uk/" rel="noopener noreferrer" target="_blank"><span style="font-size:10.5pt;font-family:"Times New Roman",serif,serif,EmojiFont;color:blue"><img alt="Description: CRI Logo" style="width: 176.99pt; height: 38.99pt;"></span></a></p>
<br>
</div>
</div>
</div>
</div>
</div>

_______________________________________________<br>
lustre-discuss mailing list<br>
<a href="mailto:lustre-discuss@lists.lustre.org" target="_blank">lustre-discuss@lists.lustre.org</a><br>
<a href="http://lists.lustre.org/listinfo.cgi/lustre-discuss-lustre.org" rel="noreferrer" target="_blank">http://lists.lustre.org/listinfo.cgi/lustre-discuss-lustre.org</a><br>
</div></blockquote></div>