<div dir="ltr">you can have a better understanding of the gap from this presentation: <a href="http://www.eofs.eu/_media/events/lad16/02_zfs_md_performance_improvements_zhuravlev.pdf">ZFS metadata performance improvements</a></div><div class="gmail_extra"><br><div class="gmail_quote">On 14 October 2016 at 08:42, Dilger, Andreas <span dir="ltr">&lt;<a href="mailto:andreas.dilger@intel.com" target="_blank">andreas.dilger@intel.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span class="">On Oct 13, 2016 19:02, Riccardo Veraldi &lt;<a href="mailto:Riccardo.Veraldi@cnaf.infn.it">Riccardo.Veraldi@cnaf.infn.it</a><wbr>&gt; wrote:<br>
&gt;<br>
&gt; Hello,<br>
&gt; will the lustre 2.9.0 rpm be released on the Intel site ?<br>
&gt; Also the latest rpm for zfsonlinux  available is 0.6.5.8<br>
<br>
</span>The Lustre 2.9.0 packages will be released, when the release is complete.<br>
You are welcome to test the pre-release version from Git, if you are<br>
interested.<br>
<br>
You are also correct that the ZoL 0.7.0 release is not yet available.<br>
There are still improvements when using ZoL 0.6.5.8, but some of these<br>
patches only made it into 0.7.0.<br>
<br>
Cheers, Andreas<br>
<div class="HOEnZb"><div class="h5"><br>
&gt; On 13/10/16 11:16, Dilger, Andreas wrote:<br>
&gt;&gt; On Oct 13, 2016, at 10:32, E.S. Rosenberg &lt;<a href="mailto:esr%2Blustre@mail.hebrew.edu">esr+lustre@mail.hebrew.edu</a>&gt; wrote:<br>
&gt;&gt;&gt; On Fri, Oct 7, 2016 at 9:16 AM, Xiong, Jinshan &lt;<a href="mailto:jinshan.xiong@intel.com">jinshan.xiong@intel.com</a>&gt; wrote:<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt;&gt; On Oct 6, 2016, at 2:04 AM, Phill Harvey-Smith &lt;<a href="mailto:p.harvey-smith@warwick.ac.uk">p.harvey-smith@warwick.ac.uk</a>&gt; wrote:<br>
&gt;&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt;&gt; Having tested a simple setup for lustre / zfs, I&#39;d like to try and<br>
&gt;&gt;&gt;&gt;&gt; replicate on the test system what we currently have on the production<br>
&gt;&gt;&gt;&gt;&gt; system, which uses a much older version of lustre (2.0 IIRC).<br>
&gt;&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt;&gt; Currently we have a combined mgs / mds node and a single oss node.<br>
&gt;&gt;&gt;&gt;&gt; we have 3 filesystems : home, storage and scratch.<br>
&gt;&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt;&gt; The MGS/MDS node currently has the mgs on a seperate block device and<br>
&gt;&gt;&gt;&gt;&gt; the 3 mds on a combined lvm volume.<br>
&gt;&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt;&gt; The OSS has an ost each (on a separate disks) for scratch and home<br>
&gt;&gt;&gt;&gt;&gt; and two ost for storage.<br>
&gt;&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt;&gt; If we migrate this setup to a ZFS based one, will I need to create a<br>
&gt;&gt;&gt;&gt;&gt; separate zpool for each mdt / mgt / oss  or will I be able to create<br>
&gt;&gt;&gt;&gt;&gt; a single zpool and split it up between the individual mdt / oss blocks,<br>
&gt;&gt;&gt;&gt;&gt; if so how do I tell each filesystem how big it should be?<br>
&gt;&gt;&gt;&gt; We strongly recommend to create separate ZFS pools for OSTs, otherwise grant, which is a Lustre internal space reserve algorithm, won\u2019t work properly.<br>
&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt; It\u2019s possible to create a single zpool for MDTs and MGS, and you can use \u2018zfs set reservation=&lt;space&gt; &lt;target&gt;\u2019 to reserve spaces for different targets.<br>
&gt;&gt;&gt; I thought ZFS was only recommended for OSTs and not for MDTs/MGS?<br>
&gt;&gt; The MGT/MDT can definitely be on ZFS.  The performance of ZFS has been<br>
&gt;&gt; trailing behind that of ldiskfs, but we&#39;ve made significant performance<br>
&gt;&gt; improvements with Lustre 2.9 and ZFS 0.7.0.  Many people use ZFS for the<br>
&gt;&gt; MDT backend because of the checksums and integrated JBOD management, as<br>
&gt;&gt; well as the ability to create snapshots, data compression, etc.<br>
&gt;&gt;<br>
&gt;&gt; Cheers, Andreas<br>
&gt;&gt;<br>
&gt;&gt; ______________________________<wbr>_________________<br>
&gt;&gt; lustre-discuss mailing list<br>
&gt;&gt; <a href="mailto:lustre-discuss@lists.lustre.org">lustre-discuss@lists.lustre.<wbr>org</a><br>
&gt;&gt; <a href="http://lists.lustre.org/listinfo.cgi/lustre-discuss-lustre.org" rel="noreferrer" target="_blank">http://lists.lustre.org/<wbr>listinfo.cgi/lustre-discuss-<wbr>lustre.org</a><br>
&gt;&gt;<br>
&gt;<br>
&gt; ______________________________<wbr>_________________<br>
&gt; lustre-discuss mailing list<br>
&gt; <a href="mailto:lustre-discuss@lists.lustre.org">lustre-discuss@lists.lustre.<wbr>org</a><br>
&gt; <a href="http://lists.lustre.org/listinfo.cgi/lustre-discuss-lustre.org" rel="noreferrer" target="_blank">http://lists.lustre.org/<wbr>listinfo.cgi/lustre-discuss-<wbr>lustre.org</a><br>
<br>
______________________________<wbr>_________________<br>
lustre-discuss mailing list<br>
<a href="mailto:lustre-discuss@lists.lustre.org">lustre-discuss@lists.lustre.<wbr>org</a><br>
<a href="http://lists.lustre.org/listinfo.cgi/lustre-discuss-lustre.org" rel="noreferrer" target="_blank">http://lists.lustre.org/<wbr>listinfo.cgi/lustre-discuss-<wbr>lustre.org</a><br>
</div></div></blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature" data-smartmail="gmail_signature">www: <a href="http://paciucci.blogspot.com" target="_blank">http://paciucci.blogspot.com</a></div>
</div>