<html xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:"Times New Roman \(Body CS\)";
        panose-1:2 11 6 4 2 2 2 2 2 4;}
@font-face
        {font-family:Consolas;
        panose-1:2 11 6 9 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
pre
        {mso-style-priority:99;
        mso-style-link:"HTML Preformatted Char";
        margin:0in;
        margin-bottom:.0001pt;
        font-size:10.0pt;
        font-family:"Courier New";}
span.HTMLPreformattedChar
        {mso-style-name:"HTML Preformatted Char";
        mso-style-priority:99;
        mso-style-link:"HTML Preformatted";
        font-family:"Consolas",serif;}
span.gmail-y2iqfc
        {mso-style-name:gmail-y2iqfc;}
span.EmailStyle21
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.line
        {mso-style-name:line;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;
        mso-ligatures:none;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style>
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72" style="word-wrap:break-word">
<div class="WordSection1">
<p class="MsoNormal">Sorry to hear this.&nbsp; We are dealing with MDT data loss right now as well and its no fun.&nbsp; Please look at my posts to the list from last week for some more information about what we are doing to recover. &nbsp;Our situation is not as bad as yours,
 we only lost part of our MDT data (the last 3 months of a filesystem we\u2019ve had in service for over 7 years).&nbsp; If you get to the point where you can get the OST\u2019s attached to a functioning lustre filesystem, you might be able to run an lfsck to move all of
 your files into lost+found.&nbsp; We started our lfsck as follows:<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><span class="line"><span style="font-size:10.0pt;font-family:&quot;Courier New&quot;">[root@hpfs-fsl-mds1 hpfs3-eg3]# lctl lfsck_start -M scratch-MDT0000 -o</span></span><o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal">When finished, this is on a client:<o:p></o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[root@hpfs-fsl-lmon0 MDT0000]# \ls | head<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20000bdbe:0x1eae1:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20000bdeb:0x12c3e:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20001f801:0x296f:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20001f801:0x57:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20001f801:0x58:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20001f805:0x1000:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20001f805:0x100:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20001f805:0x1001:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20001f805:0x1002:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[0x20001f805:0x1003:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[root@hpfs-fsl-lmon0 MDT0000]# ls -l [0x20000bdbe:0x1eae1:0x0]-R-0<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">-r-------- 1 damocles_runner damocles 3162 Sep 24 14:45 [0x20000bdbe:0x1eae1:0x0]-R-0
<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[root@hpfs-fsl-lmon0 MDT0000]# pwd<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">/scratch-lustre/.lustre/lost+found/MDT0000<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:&quot;Courier New&quot;">[root@hpfs-fsl-lmon0 MDT0000]#<o:p></o:p></span></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:12.0pt;color:black">From: </span></b><span style="font-size:12.0pt;color:black">lustre-discuss &lt;lustre-discuss-bounces@lists.lustre.org&gt; on behalf of Sergey Astafyev via lustre-discuss &lt;lustre-discuss@lists.lustre.org&gt;<br>
<b>Reply-To: </b>Sergey Astafyev &lt;astafyev.sergey@gmail.com&gt;<br>
<b>Date: </b>Monday, September 25, 2023 at 4:27 AM<br>
<b>To: </b>&quot;lustre-discuss@lists.lustre.org&quot; &lt;lustre-discuss@lists.lustre.org&gt;<br>
<b>Subject: </b>[EXTERNAL] [BULK] [lustre-discuss] mds and mst are lost<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
</div>
<table class="MsoNormalTable" border="1" cellspacing="0" cellpadding="0" align="left" style="border:solid black 1.5pt">
<tbody>
<tr>
<td width="100%" style="width:100.0%;border:none;background:#FFEB9C;padding:3.75pt 3.75pt 3.75pt 3.75pt">
<p class="MsoNormal" style="mso-element:frame;mso-element-frame-hspace:2.25pt;mso-element-wrap:around;mso-element-anchor-vertical:paragraph;mso-element-anchor-horizontal:column;mso-height-rule:exactly">
<b><span style="font-size:10.0pt;color:black">CAUTION:</span></b><span style="color:black">
</span><span style="font-size:10.0pt;color:black">This email originated from outside of NASA.&nbsp; Please take care when clicking links or opening attachments.&nbsp; Use the &quot;Report Message&quot; button to report suspicious messages to the NASA&nbsp;SOC.</span><span style="color:black">
</span><o:p></o:p></p>
</td>
</tr>
</tbody>
</table>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
<br>
<o:p></o:p></p>
<div>
<div>
<div>
<div id="gmail-tw-target">
<div id="gmail-kAz1tf">
<div id="gmail-tw-target-text-container">
<pre><span class="gmail-y2iqfc"><span lang="EN">Hello.<o:p></o:p></span></span></pre>
<pre><span class="gmail-y2iqfc"><span lang="EN">Please help.<o:p></o:p></span></span></pre>
<pre><span class="gmail-y2iqfc"><span lang="EN">It doesn\u2019t really matter how, but MDS and MDT servers are&nbsp; lost.<o:p></o:p></span></span></pre>
<pre><br><span class="gmail-y2iqfc"><span lang="EN">I connected old OSTs to the new lustre, but I don\u2019t see any information.<o:p></o:p></span></span></pre>
<pre style="margin-bottom:12.0pt"><span class="gmail-y2iqfc"><span lang="EN">lfs find tells me cannot get lov name : inappropriate ioctl for device</span></span><span lang="EN"><br><br><span class="gmail-y2iqfc">Is there any mechanism for recovering information from orphaned OST partitions?</span></span><o:p></o:p></pre>
<pre id="gmail-tw-target-text">best regards<o:p></o:p></pre>
<pre id="gmail-tw-target-text"><span class="gmail-y2iqfc"><span lang="EN">S.Astafev</span></span><o:p></o:p></pre>
<pre id="gmail-tw-target-text"><o:p>&nbsp;</o:p></pre>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</body>
</html>