<div dir="ltr">#winning ;-)  happy Friday</div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Apr 12, 2019 at 11:41 AM Kurt Strosahl <<a href="mailto:strosahl@jlab.org">strosahl@jlab.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">




<div dir="ltr">
<div id="gmail-m_-4425827174815899921divtagdefaultwrapper" style="font-size:12pt;color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif" dir="ltr">
<p style="margin-top:0px;margin-bottom:0px">Thanks, that was exactly what I needed to dig out the bad modules!</p>
<p style="margin-top:0px;margin-bottom:0px"><br>
</p>
<br>
<br>
<div style="color:rgb(0,0,0)">
<hr style="display:inline-block;width:98%">
<div id="gmail-m_-4425827174815899921divRplyFwdMsg" dir="ltr"><font face="Calibri, sans-serif" style="font-size:11pt" color="#000000"><b>From:</b> Jeff Johnson <<a href="mailto:jeff.johnson@aeoncomputing.com" target="_blank">jeff.johnson@aeoncomputing.com</a>><br>
<b>Sent:</b> Friday, April 12, 2019 12:00 PM<br>
<b>To:</b> Kurt Strosahl<br>
<b>Cc:</b> <a href="mailto:lustre-discuss@lists.lustre.org" target="_blank">lustre-discuss@lists.lustre.org</a><br>
<b>Subject:</b> Re: [lustre-discuss] Issue updating lustre from 2.10.6 to 2.10.7</font>
<div> </div>
</div>
<div>
<div dir="ltr">Kurt,
<div><br>
</div>
<div>I see you're using dkms. Take a look at `dkms status` and ensure that there are no lingering installs from the previous version. Sometimes the older version doesn't get uninstalled from /lib/modules/`uname -r`/ and the dkms install process for the new
 version doesn't overwrite them.</div>
<div><br>
</div>
<div>--Jeff</div>
<div><br>
</div>
</div>
<br>
<div class="gmail-m_-4425827174815899921x_gmail_quote">
<div dir="ltr" class="gmail-m_-4425827174815899921x_gmail_attr">On Fri, Apr 12, 2019 at 8:34 AM Kurt Strosahl <<a href="mailto:strosahl@jlab.org" id="gmail-m_-4425827174815899921LPlnk315686" class="gmail-m_-4425827174815899921OWAAutoLink" target="_blank">strosahl@jlab.org</a>> wrote:<br>
</div>
<blockquote class="gmail-m_-4425827174815899921x_gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div dir="ltr">
<div id="gmail-m_-4425827174815899921x_gmail-m_-1235057287165426093divtagdefaultwrapper" dir="ltr" style="font-size:12pt;color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif">
<p style="margin-top:0px;margin-bottom:0px">Good Morning,</p>
<p style="margin-top:0px;margin-bottom:0px"><br>
</p>
<p style="margin-top:0px;margin-bottom:0px">   I've encountered an issue updating lustre from 2.10.6 to 2.10.7 on my metadata system.</p>
<p style="margin-top:0px;margin-bottom:0px"><br>
</p>
<p style="margin-top:0px;margin-bottom:0px">I installed the updated RPMs using whamcloud's yum repository, but when I run modprobe -v lustre I get the following errors:</p>
<p style="margin-top:0px;margin-bottom:0px"></p>
<div>insmod /lib/modules/3.10.0-957.1.3.el7_lustre.x86_64/extra/libcfs.ko.xz </div>
<div>insmod /lib/modules/3.10.0-957.1.3.el7_lustre.x86_64/extra/lnet.ko.xz networks=o2ib0(bond0) </div>
<div>insmod /lib/modules/3.10.0-957.1.3.el7_lustre.x86_64/extra/obdclass.ko.xz </div>
<div>insmod /lib/modules/3.10.0-957.1.3.el7_lustre.x86_64/extra/ptlrpc.ko.xz </div>
<div>insmod /lib/modules/3.10.0-957.1.3.el7_lustre.x86_64/extra/fld.ko.xz </div>
<div>modprobe: ERROR: could not insert 'lustre': Invalid argument</div>
<div><br>
</div>
<div>dmesg shows the following:</div>
<div><br>
</div>
<div>[ 377.981515] fld: disagrees about version of symbol class_export_put</div>
<div>[ 377.981518] fld: Unknown symbol class_export_put (err -22)</div>
<div>[ 377.981529] fld: disagrees about version of symbol req_capsule_server_pack</div>
<div>[ 377.981531] fld: Unknown symbol req_capsule_server_pack (err -22)</div>
<div>[ 377.981537] fld: disagrees about version of symbol req_capsule_set_size</div>
<div>[ 377.981538] fld: Unknown symbol req_capsule_set_size (err -22)</div>
<div>[ 377.981542] fld: disagrees about version of symbol req_capsule_client_get</div>
<div>[ 377.981543] fld: Unknown symbol req_capsule_client_get (err -22)</div>
<div>[ 377.981555] fld: disagrees about version of symbol lu_env_init</div>
<div>[ 377.981556] fld: Unknown symbol lu_env_init (err -22)</div>
<div>[ 377.981562] fld: disagrees about version of symbol ptlrpc_queue_wait</div>
<div>[ 377.981563] fld: Unknown symbol ptlrpc_queue_wait (err -22)</div>
<div>[ 377.981571] fld: disagrees about version of symbol lu_context_key_get</div>
<div>[ 377.981573] fld: Unknown symbol lu_context_key_get (err -22)</div>
<div>[ 377.981604] fld: disagrees about version of symbol lu_env_fini</div>
<div>[ 377.981606] fld: Unknown symbol lu_env_fini (err -22)</div>
<div>[ 377.981611] fld: disagrees about version of symbol lu_context_key_degister</div>
<div>[ 377.981612] fld: Unknown symbol lu_context_key_degister (err -22)</div>
<div>[ 377.981623] fld: disagrees about version of symbol class_exp2cliimp</div>
<div>[ 377.981625] fld: Unknown symbol class_exp2cliimp (err -22)</div>
<div>[ 377.981631] fld: disagrees about version of symbol req_capsule_set</div>
<div>[ 377.981632] fld: Unknown symbol req_capsule_set (err -22)</div>
<br>
<p></p>
<p style="margin-top:0px;margin-bottom:0px">I've tried uninstalling and reinstalling the RPMs but this is always the state I end up in.</p>
<p style="margin-top:0px;margin-bottom:0px"><br>
</p>
<p style="margin-top:0px;margin-bottom:0px">I'm using zfs for the back end, and those modules work after the upgrade </p>
<p style="margin-top:0px;margin-bottom:0px"><br>
</p>
<p style="margin-top:0px;margin-bottom:0px">Here are the RPMs currently installed.</p>
<p style="margin-top:0px;margin-bottom:0px"></p>
<div>perf-3.10.0-957.1.3.el7_lustre.x86_64</div>
<div>lustre-resource-agents-2.10.7-1.el7.x86_64</div>
<div>lustre-osd-zfs-mount-2.10.7-1.el7.x86_64</div>
<div>kernel-headers-3.10.0-957.1.3.el7_lustre.x86_64</div>
<div>lustre-2.10.7-1.el7.x86_64</div>
<div>kernel-3.10.0-957.1.3.el7_lustre.x86_64</div>
<div>perf-debuginfo-3.10.0-957.el7_lustre.x86_64</div>
<div>lustre-zfs-dkms-2.10.7-1.el7.noarch</div>
<div>kernel-debuginfo-common-x86_64-3.10.0-957.el7_lustre.x86_64</div>
<div>kernel-devel-3.10.0-957.1.3.el7_lustre.x86_64</div>
<div>bpftool-3.10.0-957.el7_lustre.x86_64</div>
<div><br>
</div>
<br>
<p></p>
<p style="margin-top:0px;margin-bottom:0px">Thank you,</p>
<div id="gmail-m_-4425827174815899921x_gmail-m_-1235057287165426093Signature">
<div id="gmail-m_-4425827174815899921x_gmail-m_-1235057287165426093divtagdefaultwrapper" dir="ltr" style="font-size:12pt;color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif,EmojiFont,"Apple Color Emoji","Segoe UI Emoji",NotoColorEmoji,"Segoe UI Symbol","Android Emoji",EmojiSymbols">
<p style="margin-top:0px;margin-bottom:0px"><span style="color:rgb(51,51,51);font-family:monospace;font-size:14.16px">Kurt J. Strosahl</span><br style="color:rgb(51,51,51);font-family:monospace;font-size:14.16px">
<span style="color:rgb(51,51,51);font-family:monospace;font-size:14.16px">System Administrator: Lustre, HPC</span><br style="color:rgb(51,51,51);font-family:monospace;font-size:14.16px">
<span style="color:rgb(51,51,51);font-family:monospace;font-size:14.16px">Scientific Computing Group, Thomas Jefferson National Accelerator Facility</span><br>
</p>
</div>
</div>
</div>
</div>
_______________________________________________<br>
lustre-discuss mailing list<br>
<a href="mailto:lustre-discuss@lists.lustre.org" id="gmail-m_-4425827174815899921LPlnk393529" class="gmail-m_-4425827174815899921OWAAutoLink" target="_blank">lustre-discuss@lists.lustre.org</a><br>
<a href="https://gcc01.safelinks.protection.outlook.com/?url=http%3A%2F%2Flists.lustre.org%2Flistinfo.cgi%2Flustre-discuss-lustre.org&data=02%7C01%7Cstrosahl%40jlab.org%7Ca0a639bae29b43dcc64f08d6bf5ff962%7Cb4d7ee1f4fb34f0690372b5b522042ab%7C1%7C1%7C636906816276221845&sdata=1hd1cgdHo7g%2BBbX39Wak9xjIeto0%2FB4Vj5rZHJIUO4s%3D&reserved=0" rel="noreferrer" id="gmail-m_-4425827174815899921LPlnk854783" class="gmail-m_-4425827174815899921OWAAutoLink" target="_blank">http://lists.lustre.org/listinfo.cgi/lustre-discuss-lustre.org</a><br>
</blockquote>
</div>
<br clear="all">
<div><br>
</div>
-- <br>
<div dir="ltr" class="gmail-m_-4425827174815899921x_gmail_signature">
<div dir="ltr">
<div>
<div dir="ltr">------------------------------<br>
Jeff Johnson<br>
Co-Founder<br>
Aeon Computing<br>
<br>
<a href="mailto:jeff.johnson@aeoncomputing.com" id="gmail-m_-4425827174815899921LPlnk982785" class="gmail-m_-4425827174815899921OWAAutoLink" target="_blank">jeff.johnson@aeoncomputing.com</a><br>
<a href="https://gcc01.safelinks.protection.outlook.com/?url=http%3A%2F%2Fwww.aeoncomputing.com&data=02%7C01%7Cstrosahl%40jlab.org%7Ca0a639bae29b43dcc64f08d6bf5ff962%7Cb4d7ee1f4fb34f0690372b5b522042ab%7C1%7C1%7C636906816276231849&sdata=BwElgBPP9ehr98Qfm23I0mu3OhJfrrW9DC8QjGEEXnI%3D&reserved=0" id="gmail-m_-4425827174815899921LPlnk904045" class="gmail-m_-4425827174815899921OWAAutoLink" target="_blank">www.aeoncomputing.com</a><br>
t: 858-412-3810 x1001   f: 858-412-3845<br>
m: 619-204-9061<br>
<br>
4170 Morena Boulevard, Suite C - San Diego, CA 92117
<div><br>
</div>
<div>High-Performance Computing / Lustre Filesystems / Scale-out Storage</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>

</blockquote></div><br clear="all"><div><br></div>-- <br><div dir="ltr" class="gmail_signature"><div dir="ltr"><div><div dir="ltr">------------------------------<br>Jeff Johnson<br>Co-Founder<br>Aeon Computing<br><br><a href="mailto:jeff.johnson@aeoncomputing.com" target="_blank">jeff.johnson@aeoncomputing.com</a><br><a href="http://www.aeoncomputing.com" target="_blank">www.aeoncomputing.com</a><br>t: 858-412-3810 x1001   f: 858-412-3845<br>m: 619-204-9061<br><br>4170 Morena Boulevard, Suite C - San Diego, CA 92117<div><br></div><div>High-Performance Computing / Lustre Filesystems / Scale-out Storage</div></div></div></div></div>