<HTML><HEAD></HEAD>
<BODY dir=ltr>
<DIV dir=ltr>
<DIV style="FONT-FAMILY: 'Calibri'; COLOR: #000000; FONT-SIZE: 12pt">
<DIV>Thanks for the link. I know the undeleteable file is on the lost OST. I 
will try to append a new OST with the same index of the lost OST. Perhaps I 
avoid the invalid argument error and so delete the file.</DIV>
<DIV 
style="FONT-STYLE: normal; DISPLAY: inline; FONT-FAMILY: 'Calibri'; COLOR: #000000; FONT-SIZE: small; FONT-WEIGHT: normal; TEXT-DECORATION: none">
<DIV style="FONT: 10pt tahoma">
<DIV>&nbsp;</DIV>
<DIV style="BACKGROUND: #f5f5f5">
<DIV style="font-color: black"><B>From:</B> <A 
title=parinay_kondekar@xyratex.com 
href="mailto:parinay_kondekar@xyratex.com">Parinay Kondekar</A> </DIV>
<DIV><B>Sent:</B> Friday, June 07, 2013 8:50 AM</DIV>
<DIV><B>To:</B> <A title=alfonso.pardo@ciemat.es 
href="mailto:alfonso.pardo@ciemat.es">Alfonso Pardo</A> </DIV>
<DIV><B>Subject:</B> Re: [Lustre-discuss] Remove a lost OST</DIV></DIV></DIV>
<DIV>&nbsp;</DIV></DIV>
<DIV 
style="FONT-STYLE: normal; DISPLAY: inline; FONT-FAMILY: 'Calibri'; COLOR: #000000; FONT-SIZE: small; FONT-WEIGHT: normal; TEXT-DECORATION: none">
<DIV dir=ltr>one more link :)&nbsp; - <A 
href="http://wiki.lustre.org/manual/LustreManual20_HTML/LustreOperations.html#50438194_30872">http://wiki.lustre.org/manual/LustreManual20_HTML/LustreOperations.html#50438194_30872</A> 

<DIV>&nbsp;</DIV>
<DIV>The idea is to get, if the file you want to refer is on that inactive OST. 
If so, you need to spend time in recovering the lost OST. (The earlier link to 
man page would help in that).</DIV>
<DIV>&nbsp;</DIV>
<DIV>HTH</DIV>
<DIV>p</DIV>
<DIV>&nbsp;</DIV></DIV>
<DIV class=gmail_extra><BR><BR>
<DIV class=gmail_quote>On 5 June 2013 13:49, Alfonso Pardo <SPAN dir=ltr>&lt;<A 
href="mailto:alfonso.pardo@ciemat.es" 
target=_blank>alfonso.pardo@ciemat.es</A>&gt;</SPAN> wrote:<BR>
<BLOCKQUOTE 
style="BORDER-LEFT: #ccc 1px solid; MARGIN: 0px 0px 0px 0.8ex; PADDING-LEFT: 1ex" 
class=gmail_quote>
  <DIV dir=ltr>
  <DIV dir=ltr>
  <DIV style="FONT-FAMILY: 'Calibri'; FONT-SIZE: 12pt">
  <DIV>Thanks for your help, but I still have the same error with any command 
  applied to the file:</DIV>
  <DIV>&nbsp;</DIV>
  <DIV>#&gt; chmod g+x .viminfo</DIV>
  <DIV>chmod: cannot access `.viminfo': Invalid argument</DIV>
  <DIV>&nbsp;</DIV>
  <DIV>&nbsp;</DIV>
  <DIV 
  style="FONT-STYLE: normal; DISPLAY: inline; FONT-FAMILY: 'Calibri'; FONT-SIZE: small; FONT-WEIGHT: normal; TEXT-DECORATION: none">
  <DIV style="FONT: 10pt tahoma">
  <DIV><FONT size=3 face=Calibri>I think the problem is, I the client try to 
  connect to the missing OST, and show the error.</FONT></DIV>
  <DIV><FONT size=3 face=Calibri></FONT>&nbsp;</DIV>
  <DIV><FONT size=3 face=Calibri></FONT>&nbsp;</DIV>
  <DIV style="BACKGROUND: #f5f5f5">
  <DIV><B>From:</B> <A title=parinay_kondekar@xyratex.com 
  href="mailto:parinay_kondekar@xyratex.com" target=_blank>Parinay Kondekar</A> 
  </DIV>
  <DIV><B>Sent:</B> Tuesday, June 04, 2013 3:27 PM</DIV>
  <DIV><B>To:</B> <A title=alfonso.pardo@ciemat.es 
  href="mailto:alfonso.pardo@ciemat.es" target=_blank>Alfonso Pardo</A> </DIV>
  <DIV><B>Subject:</B> Re: [Lustre-discuss] Remove a lost OST</DIV></DIV></DIV>
  <DIV>&nbsp;</DIV></DIV>
  <DIV>
  <DIV class=h5>
  <DIV 
  style="FONT-STYLE: normal; DISPLAY: inline; FONT-FAMILY: 'Calibri'; FONT-SIZE: small; FONT-WEIGHT: normal; TEXT-DECORATION: none">
  <DIV dir=ltr>Not sure, if this would help, but still sharing, 
  <DIV>&nbsp;</DIV>
  <DIV><A 
  href="http://serverfault.com/questions/65616/question-marks-showing-in-ls-of-directory-io-errors-too" 
  target=_blank>http://serverfault.com/questions/65616/question-marks-showing-in-ls-of-directory-io-errors-too</A><BR></DIV>
  <DIV>&nbsp;</DIV>
  <DIV>cheers</DIV>
  <DIV>p</DIV></DIV>
  <DIV class=gmail_extra><BR><BR>
  <DIV class=gmail_quote>On 4 June 2013 18:54, Parinay Kondekar <SPAN 
  dir=ltr>&lt;<A href="mailto:parinay_kondekar@xyratex.com" 
  target=_blank>parinay_kondekar@xyratex.com</A>&gt;</SPAN> wrote:<BR>
  <BLOCKQUOTE 
  style="BORDER-LEFT: #ccc 1px solid; MARGIN: 0px 0px 0px 0.8ex; PADDING-LEFT: 1ex" 
  class=gmail_quote>
    <DIV dir=ltr><A 
    href="http://wiki.lustre.org/manual/LustreManual20_HTML/LustreMaintenance.html#50438199_pgfId-1298977" 
    target=_blank>http://wiki.lustre.org/manual/LustreManual20_HTML/LustreMaintenance.html#50438199_pgfId-1298977</A><BR>
    <DIV>&nbsp;</DIV>
    <DIV>Any log would help.</DIV><SPAN><FONT color=#888888>
    <DIV>&nbsp;</DIV>
    <DIV>p</DIV></FONT></SPAN></DIV>
    <DIV class=gmail_extra><BR><BR>
    <DIV class=gmail_quote>
    <DIV>
    <DIV>On 4 June 2013 13:58, Alfonso Pardo <SPAN dir=ltr>&lt;<A 
    href="mailto:alfonso.pardo@ciemat.es" 
    target=_blank>alfonso.pardo@ciemat.es</A>&gt;</SPAN> wrote:<BR></DIV></DIV>
    <BLOCKQUOTE 
    style="BORDER-LEFT: #ccc 1px solid; MARGIN: 0px 0px 0px 0.8ex; PADDING-LEFT: 1ex" 
    class=gmail_quote>
      <DIV>
      <DIV>
      <DIV dir=ltr>
      <DIV dir=ltr>
      <DIV style="FONT-FAMILY: 'Calibri'; FONT-SIZE: 12pt">
      <DIV>Hi,</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>In a few days I will stop my lustre infrastructure, and I will can 
      solved a old problem that I have with a lost OST.</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>I have a lost OST than I cant recover (the OST0014):</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>UUID&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 
      1K-blocks&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 
      Used&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 
      Available&nbsp;&nbsp;&nbsp; Use%&nbsp;&nbsp;&nbsp; Mounted on</DIV>
      <DIV>cetafs-MDT0000_UUID&nbsp; 1462920404&nbsp;&nbsp;&nbsp; 
      64895656&nbsp;&nbsp; 1300479028&nbsp;&nbsp; 5% /mnt/data[MDT:0]</DIV>
      <DIV>cetafs-OST0000_UUID&nbsp;&nbsp; 9760101272&nbsp; 1542373104&nbsp; 
      7729446316&nbsp; 17% /mnt/data[OST:0]</DIV>
      <DIV>cetafs-OST0001_UUID&nbsp;&nbsp; 9760101272&nbsp; 1414302924&nbsp; 
      7857519284&nbsp; 15% /mnt/data[OST:1]</DIV>
      <DIV>cetafs-OST0002_UUID&nbsp;&nbsp; 9760101272&nbsp; 1738339152&nbsp; 
      7533482352&nbsp; 19% /mnt/data[OST:2]</DIV>
      <DIV>cetafs-OST0003_UUID&nbsp;&nbsp; 9760101272&nbsp; 1464825624&nbsp; 
      7806995228&nbsp; 16% /mnt/data[OST:3]</DIV>
      <DIV>cetafs-OST0004_UUID&nbsp;&nbsp; 9760101272&nbsp; 1422237284&nbsp; 
      7849582828&nbsp; 15% /mnt/data[OST:4]</DIV>
      <DIV>cetafs-OST0005_UUID&nbsp;&nbsp; 9760101272&nbsp; 1418003120&nbsp; 
      7853817040&nbsp; 15% /mnt/data[OST:5]</DIV>
      <DIV>cetafs-OST0006_UUID&nbsp;&nbsp; 9760101272&nbsp; 1723708200&nbsp; 
      7548112848&nbsp; 19% /mnt/data[OST:6]</DIV>
      <DIV>cetafs-OST0007_UUID&nbsp;&nbsp; 9760101272&nbsp; 1373973876&nbsp; 
      7897847276&nbsp; 15% /mnt/data[OST:7]</DIV>
      <DIV>cetafs-OST0008_UUID&nbsp;&nbsp; 9760101272&nbsp; 1548924900&nbsp; 
      7722894388&nbsp; 17% /mnt/data[OST:8]</DIV>
      <DIV>cetafs-OST0009_UUID&nbsp;&nbsp; 9760101272&nbsp; 1482367088&nbsp; 
      7789454088&nbsp; 16% /mnt/data[OST:9]</DIV>
      <DIV>cetafs-OST000a_UUID&nbsp;&nbsp; 9760101272&nbsp; 1528436432&nbsp; 
      7743377448&nbsp; 16% /mnt/data[OST:10]</DIV>
      <DIV>cetafs-OST000b_UUID&nbsp;&nbsp; 9760101272&nbsp; 1500889020&nbsp; 
      7770929664&nbsp; 16% /mnt/data[OST:11]</DIV>
      <DIV>cetafs-OST000c_UUID&nbsp;&nbsp; 9760101272&nbsp; 1477190776&nbsp; 
      7794629116&nbsp; 16% /mnt/data[OST:12]</DIV>
      <DIV>cetafs-OST000d_UUID&nbsp;&nbsp; 9760101272&nbsp; 1862887572&nbsp; 
      7408933996&nbsp; 20% /mnt/data[OST:13]</DIV>
      <DIV>cetafs-OST000e_UUID&nbsp;&nbsp; 9760101272&nbsp; 1504771732&nbsp; 
      7767050696&nbsp; 16% /mnt/data[OST:14]</DIV>
      <DIV>cetafs-OST000f_UUID&nbsp;&nbsp; 9760101272&nbsp; 1578360196&nbsp; 
      7693460648&nbsp; 17% /mnt/data[OST:15]</DIV>
      <DIV>cetafs-OST0010_UUID&nbsp;&nbsp; 9760101272&nbsp; 1801015216&nbsp; 
      7470806488&nbsp; 19% /mnt/data[OST:16]</DIV>
      <DIV>cetafs-OST0011_UUID&nbsp;&nbsp; 9760101272&nbsp; 1552896208&nbsp; 
      7718917064&nbsp; 17% /mnt/data[OST:17]</DIV>
      <DIV>cetafs-OST0012_UUID&nbsp;&nbsp; 9760101272&nbsp;&nbsp; 
      673033020&nbsp; 8598788676&nbsp;&nbsp; 7% /mnt/data[OST:18]</DIV>
      <DIV>cetafs-OST0013_UUID&nbsp;&nbsp; 9760101272&nbsp;&nbsp; 
      673728700&nbsp; 8598092076&nbsp;&nbsp; 7% /mnt/data[OST:19]</DIV>
      <DIV>OST0014&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 
      : Resource temporarily unavailable</DIV>
      <DIV>cetafs-OST0015_UUID&nbsp;&nbsp; 1948881116&nbsp;&nbsp; 
      146169284&nbsp; 1705166048&nbsp;&nbsp; 8% /mnt/data[OST:21]</DIV>
      <DIV>cetafs-OST0016_UUID&nbsp;&nbsp; 1948881116&nbsp;&nbsp;&nbsp; 
      86958272&nbsp; 1764377060&nbsp;&nbsp; 5% /mnt/data[OST:22]</DIV>
      <DIV>cetafs-OST0017_UUID&nbsp;&nbsp; 1948881116&nbsp;&nbsp; 
      129321128&nbsp; 1722014204&nbsp;&nbsp; 7% /mnt/data[OST:23]</DIV>
      <DIV>cetafs-OST0018_UUID&nbsp;&nbsp; 1948881116&nbsp;&nbsp; 
      131278224&nbsp; 1720057108&nbsp;&nbsp; 7% /mnt/data[OST:24]</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>And I have a couple of files that a part or stripe was stored in the 
      lost OST0014:</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>#&gt; ls</DIV>
      <DIV>-?????????&nbsp;&nbsp; ? ?&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 
      ?&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 
      ?&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; ? 
      .viminfo</DIV>
      <DIV>#&gt; rm f .viminfo</DIV>
      <DIV>rm: cannot remove `.viminfo': Invalid argument</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>Can somebody tell my how I remove this files from the filesystem and 
      erase permanent the lost OST0014? During the lustre filesystem STOP I will 
      can do any kind of lfsck, fsck, mount ldiskfs... any ideas?</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>&nbsp;</DIV>
      <DIV>Thanks in advance</DIV>
      <DIV>&nbsp;</DIV>
      <DIV style="FONT-FAMILY: 'Calibri'; FONT-SIZE: 12pt">
      <P><I><SPAN><SPAN 
      style="FONT-FAMILY: century gothic,sans-serif,10">Alfonso Pardo Diaz 
      </SPAN></SPAN></I><BR><I><B><SPAN 
      style="FONT-FAMILY: century gothic,sans-serif">System Administrator / 
      Researcher </SPAN></B></I><BR><I><SPAN 
      style="FONT-FAMILY: century gothic,sans-serif">c/ Sola n 1; 10200 
      TRUJILLO, SPAIN </SPAN></I><BR><I><SPAN 
      style="FONT-FAMILY: century gothic,sans-serif">Tel: +34 927 65 93 17 Fax: 
      +34 927 32 32 37 </SPAN></I></P>
      <P><SPAN><A href="http://www.ceta-ciemat.es/" target=_blank><IMG border=0 
      alt="CETA-Ciemat logo" width=383 height=76> 
      </A></SPAN></P></DIV></DIV></DIV>---------------------------- 
      Confidencialidad: Este mensaje y sus ficheros adjuntos se dirige 
      exclusivamente a su destinatario y puede contener informacin privilegiada 
      o confidencial. Si no es vd. el destinatario indicado, queda notificado de 
      que la utilizacin, divulgacin y/o copia sin autorizacin est prohibida 
      en virtud de la legislacin vigente. Si ha recibido este mensaje por 
      error, le rogamos que nos lo comunique inmediatamente respondiendo al 
      mensaje y proceda a su destruccin. Disclaimer: This message and its 
      attached files is intended exclusively for its recipients and may contain 
      confidential information. If you received this e-mail in error you are 
      hereby notified that any dissemination, copy or disclosure of this 
      communication is strictly prohibited and may be unlawful. In this case, 
      please notify us by a reply and delete this email and its contents 
      immediately. ---------------------------- </DIV>
      <DIV>&nbsp;</DIV></DIV></DIV>
      <DIV>_______________________________________________<BR>Lustre-discuss 
      mailing list<BR><A href="mailto:Lustre-discuss@lists.lustre.org" 
      target=_blank>Lustre-discuss@lists.lustre.org</A><BR><A 
      href="http://lists.lustre.org/mailman/listinfo/lustre-discuss" 
      target=_blank>http://lists.lustre.org/mailman/listinfo/lustre-discuss</A><BR><BR></DIV></BLOCKQUOTE></DIV>
    <DIV>&nbsp;</DIV></DIV></BLOCKQUOTE></DIV>
  <DIV>&nbsp;</DIV></DIV></DIV></DIV></DIV></DIV></DIV></DIV></BLOCKQUOTE></DIV>
<DIV>&nbsp;</DIV></DIV></DIV></DIV></DIV></BODY></HTML>