<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=us-ascii"><meta name=Generator content="Microsoft Word 12 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
span.EmailStyle18
        {mso-style-type:personal-reply;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=FR-CA link=blue vlink=purple><div class=WordSection1><p class=MsoNormal><span lang=EN-US style='color:#1F497D'>I get the messages below when I’m trying to mount or unmount Lustre filesystems (ost or mdt) on a brand new server. The same OS with<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='color:#1F497D'>the same patched kernel and the same Lustre version (1.8.5) has been running for months without any problem another server with different hardware<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='color:#1F497D'>configuration.<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='color:#1F497D'><o:p> </o:p></span></p><p class=MsoNormal><span lang=EN-US style='color:#1F497D'>The new server is an HP ProLiant DL380G7 with two hexacore processors, 12GB of RAM, four 7.2TB (5*2TB SAS RAID5) OSTs on two P812 controllers<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='color:#1F497D'>(2 OSTs per controller) and eight 146GB SAS disks on a P410 controller (OS, MGS/MDT and external journals for the OSTs).<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='color:#1F497D'><o:p> </o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LDISKFS-fs (cciss!c1d1p1): barriers disabled<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LDISKFS-fs (cciss!c1d1p1): mounted filesystem with ordered data mode<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LDISKFS-fs (cciss!c1d1p1): barriers disabled<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LDISKFS-fs (cciss!c1d1p1): mounted filesystem with ordered data mode<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>general protection fault: 0000 [#1] SMP <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>last sysfs file: /sys/devices/system/cpu/cpu15/cache/index2/shared_cpu_map<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CPU 0 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Modules linked in: obdfilter ost mds fsfilt_ldiskfs mgs mgc ldiskfs lustre lov mdc lquota osc ksocklnd ptlrpc obdclass <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>lnet lvfs libcfs ipv6 dm_multipath kvm uinput iTCO_wdt bnx2 iTCO_vendor_support serio_raw hpwdt power_meter joydev <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>cciss radeon ttm drm_kms_helper drm i2c_algo_bit i2c_core [last unloaded: scsi_wait_scan]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Pid: 2148, comm: mount.lustre Not tainted 2.6.32.19-163.lustre_1.8.5.fc12.x86_64 #1 ProLiant DL380 G7<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP: 0010:[<ffffffff8110e668>]  [<ffffffff8110e668>] __kmalloc+0xf3/0x15e<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RSP: 0018:ffff88030d4919f8  EFLAGS: 00010006<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RAX: 0000000000000000 RBX: 2d3165727473756c RCX: ffffffffa0175791<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RDX: 0000000000000000 RSI: 00000000000006b7 RDI: 0000000000000010<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RBP: ffff88030d491a48 R08: ffff880007411f40 R09: ffff88030d491a38<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R10: 0000000000000000 R11: 0000086400000000 R12: ffffffff8169e600<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R13: 0000000000000010 R14: 0000000000000050 R15: 0000000000000050<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>FS:  00007f08490ed700(0000) GS:ffff880007400000(0000) knlGS:0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CS:  0010 DS: 0000 ES: 0000 CR0: 000000008005003b<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CR2: 00007f0db5cfc000 CR3: 000000031727c000 CR4: 00000000000006f0<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR0: 0000000000000000 DR1: 0000000000000000 DR2: 0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR3: 0000000000000000 DR6: 00000000ffff0ff0 DR7: 0000000000000400<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Process mount.lustre (pid: 2148, threadinfo ffff88030d490000, task ffff880317d59760)<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Stack:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> ffff88030d491a28 ffffffffa0175791 000000100d491a38 0000000000000246<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> 0000000000000000 0000000000000000 ffff880196a71600 0000000000000010<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> 0000000000000010 ffff880196a71600 ffff88030d491a78 ffffffffa0175791<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Call Trace:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffffa0175791>] ? cfs_alloc+0x91/0xf0 [libcfs]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffffa0175791>] cfs_alloc+0x91/0xf0 [libcfs]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffffa028e59a>] server_register_mount+0xda/0x8c0 [obdclass]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffffa0294a02>] server_start_targets+0x2f2/0x1a50 [obdclass]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff810db54b>] ? free_hot_page+0x22/0x27<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffffa029907b>] server_fill_super+0xc0b/0x1bb0 [obdclass]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffffa029b349>] lustre_fill_super+0x1329/0x1b4c [obdclass]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81132de1>] ? get_filesystem+0x4d/0x4f<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111d32f>] ? set_anon_super+0x0/0xdb<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81135579>] ? alloc_vfsmnt+0xa3/0x179<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffffa029a020>] ? lustre_fill_super+0x0/0x1b4c [obdclass]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111e3d4>] get_sb_nodev+0x55/0x8e<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffffa028bd68>] lustre_get_sb+0x18/0x20 [obdclass]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111e10e>] vfs_kern_mount+0xa9/0x168<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111e235>] do_kern_mount+0x4d/0xed<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8113612d>] do_mount+0x731/0x793<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811054bb>] ? alloc_pages_current+0x95/0x9e<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81136217>] sys_mount+0x88/0xc2<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81011d32>] system_call_fastpath+0x16/0x1b<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Code: 66 0f 1f 44 00 00 65 8b 04 25 68 e3 00 00 48 98 4d 8b 84 c4 f0 10 00 00 41 8b 78 18 89 7d c4 49 8b 18 48 85 db 74 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>0d 41 8b 40 14 <48> 8b 04 c3 49 89 00 eb 11 83 ca ff 44 89 fe 4c 89 e7 e8 18 e9 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP  [<ffffffff8110e668>] __kmalloc+0xf3/0x15e<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> RSP <ffff88030d4919f8><o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>---[ end trace 16cdf3f5a3291370 ]---<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>general protection fault: 0000 [#2] SMP <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>last sysfs file: /sys/devices/system/cpu/cpu15/cache/index2/shared_cpu_map<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CPU 0 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Modules linked in: obdfilter ost mds fsfilt_ldiskfs mgs mgc ldiskfs lustre lov mdc lquota osc ksocklnd ptlrpc obdclass <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>lnet lvfs libcfs ipv6 dm_multipath kvm uinput iTCO_wdt bnx2 iTCO_vendor_support serio_raw hpwdt power_meter joydev <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>cciss radeon ttm drm_kms_helper drm i2c_algo_bit i2c_core [last unloaded: scsi_wait_scan]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Pid: 1636, comm: bash Tainted: G      D    2.6.32.19-163.lustre_1.8.5.fc12.x86_64 #1 ProLiant DL380 G7<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP: 0010:[<ffffffff8110d768>]  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RSP: 0018:ffff88019810de28  EFLAGS: 00010006<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RAX: 0000000000000000 RBX: 00000000000080d0 RCX: ffff880317b63b00<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>RDX: 2d3165727473756c RSI: 00000000000006b7 RDI: ffffffff815d5786<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>RBP: ffff88019810de58 R08: ffff880007411f40 R09: ffff880195c1a3c0<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>R10: 0000000000000001 R11: 7fffffffffffffff R12: ffffffff8169e600<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R13: 0000000000000010 R14: ffffffff811ed1a6 R15: 0000000000000246<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>FS:  00007f8b2174a700(0000) GS:ffff880007400000(0000) knlGS:0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CR2: 00000000006d8738 CR3: 00000001969ed000 CR4: 00000000000006f0<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR0: 0000000000000000 DR1: 0000000000000000 DR2: 0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR3: 0000000000000000 DR6: 00000000ffff0ff0 DR7: 0000000000000400<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Process bash (pid: 1636, threadinfo ffff88019810c000, task ffff88019677dd80)<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Stack:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> ffff88019810de48 0000000000000001 ffff88018b7e4480 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> 00000000ffffffff 0000000000000000 ffff88019810de88 ffffffff811ed1a6<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> 0000000000000000 ffff88018b7e4480 ffff880317b63b00 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Call Trace:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811ed1a6>] selinux_file_alloc_security+0x3d/0x85<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811e6971>] security_file_alloc+0x16/0x18<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111cfa0>] get_empty_filp+0xa9/0x142<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff813a0f67>] sock_alloc_fd+0x22/0x49<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff813a107d>] sock_map_fd+0x21/0x69<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff813a1d4d>] sys_socket+0x40/0x5c<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81011d32>] system_call_fastpath+0x16/0x1b<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Code: 89 c7 fa 66 0f 1f 44 00 00 65 8b 04 25 68 e3 00 00 48 98 4d 8b 84 c4 f0 10 00 00 49 8b 10 45 8b 68 18 48 85 d2 74 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>0d 41 8b 40 14 <48> 8b 04 c2 49 89 00 eb 13 83 ca ff 4c 89 f1 89 de 4c 89 e7 e8 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> RSP <ffff88019810de28><o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>---[ end trace 16cdf3f5a3291371 ]---<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>general protection fault: 0000 [#3] SMP <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>last sysfs file: /sys/devices/system/cpu/cpu15/cache/index2/shared_cpu_map<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CPU 0 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Modules linked in: obdfilter ost mds fsfilt_ldiskfs mgs mgc ldiskfs lustre lov mdc lquota osc ksocklnd ptlrpc obdclass <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>lnet lvfs libcfs ipv6 dm_multipath kvm uinput iTCO_wdt bnx2 iTCO_vendor_support serio_raw hpwdt power_meter joydev <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>cciss radeon ttm drm_kms_helper drm i2c_algo_bit i2c_core [last unloaded: scsi_wait_scan]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Pid: 1633, comm: sshd Tainted: G      D    2.6.32.19-163.lustre_1.8.5.fc12.x86_64 #1 ProLiant DL380 G7<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP: 0010:[<ffffffff8110d768>]  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RSP: 0018:ffff880196a21d28  EFLAGS: 00010006<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RAX: 0000000000000000 RBX: 00000000000080d0 RCX: ffff880317b8d500<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>RDX: 2d3165727473756c RSI: 00000000000006b7 RDI: ffffffff815d5786<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RBP: ffff880196a21d58 R08: ffff880007411f40 R09: ffff88019674a190<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R10: 0000000000000000 R11: 0000000000000246 R12: ffffffff8169e600<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R13: 0000000000000010 R14: ffffffff811ed1a6 R15: 0000000000000246<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>FS:  00007f0c86b737a0(0000) GS:ffff880007400000(0000) knlGS:0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CR2: 00007f0c82e6d360 CR3: 0000000196b0f000 CR4: 00000000000006f0<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR0: 0000000000000000 DR1: 0000000000000000 DR2: 0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR3: 0000000000000000 DR6: 00000000ffff0ff0 DR7: 0000000000000400<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Process sshd (pid: 1633, threadinfo ffff880196a20000, task ffff88019677c620)<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Stack:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> ffff880196a21d88 0000000000000001 ffff88018b7e4540 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> 00000000000001b6 0000000000000001 ffff880196a21d88 ffffffff811ed1a6<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> ffffea00058580e8 ffff88018b7e4540 ffff880317b8d500 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Call Trace:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811ed1a6>] selinux_file_alloc_security+0x3d/0x85<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811e6971>] security_file_alloc+0x16/0x18<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111cfa0>] get_empty_filp+0xa9/0x142<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81127f7f>] do_filp_open+0xa8/0x95a<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811288bc>] ? getname+0x31/0x1c2<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8122e526>] ? might_fault+0x21/0x23<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8122e625>] ? __strncpy_from_user+0x1e/0x49<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81132a63>] ? alloc_fd+0x7b/0x124<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111943c>] do_sys_open+0x63/0x10f<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111951b>] sys_open+0x20/0x22<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81011d32>] system_call_fastpath+0x16/0x1b<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Code: 89 c7 fa 66 0f 1f 44 00 00 65 8b 04 25 68 e3 00 00 48 98 4d 8b 84 c4 f0 10 00 00 49 8b 10 45 8b 68 18 48 85 d2 74 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>0d 41 8b 40 14 <48> 8b 04 c2 49 89 00 eb 13 83 ca ff 4c 89 f1 89 de 4c 89 e7 e8 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> RSP <ffff880196a21d28><o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>---[ end trace 16cdf3f5a3291372 ]---<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>general protection fault: 0000 [#4] SMP <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>last sysfs file: /sys/devices/system/cpu/cpu15/cache/index2/shared_cpu_map<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CPU 0 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Modules linked in: obdfilter ost mds fsfilt_ldiskfs mgs mgc ldiskfs lustre lov mdc lquota osc ksocklnd ptlrpc obdclass <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>lnet lvfs libcfs ipv6 dm_multipath kvm uinput iTCO_wdt bnx2 iTCO_vendor_support serio_raw hpwdt power_meter joydev <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>cciss radeon ttm drm_kms_helper drm i2c_algo_bit i2c_core [last unloaded: scsi_wait_scan]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Pid: 1633, comm: sshd Tainted: G      D    2.6.32.19-163.lustre_1.8.5.fc12.x86_64 #1 ProLiant DL380 G7<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP: 0010:[<ffffffff8110d768>]  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RSP: 0018:ffff880196a21828  EFLAGS: 00010006<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RAX: 0000000000000000 RBX: 00000000000000d0 RCX: 00000000000044dc<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RDX: 2d3165727473756c RSI: 00000000000006b7 RDI: ffffffff815d5786<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RBP: ffff880196a21858 R08: ffff880007411f40 R09: 0000000000000282<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R10: ffff880196a21848 R11: ffff880195f6a000 R12: ffffffff8169e600<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R13: 0000000000000010 R14: ffffffff812b0962 R15: 0000000000000246<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>FS:  0000000000000000(0000) GS:ffff880007400000(0000) knlGS:0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>CS:  0010 DS: 0000 ES: 0000 CR0: 000000008005003b<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>CR2: 00007f0c82e6d360 CR3: 0000000001001000 CR4: 00000000000006f0<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR0: 0000000000000000 DR1: 0000000000000000 DR2: 0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR3: 0000000000000000 DR6: 00000000ffff0ff0 DR7: 0000000000000400<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Process sshd (pid: 1633, threadinfo ffff880196a20000, task ffff88019677c620)<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Stack:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> 0000000000000000 ffffffff816f3570 0000000000000000 ffff880195f6a020<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> 0000000000000000 ffff880195f6a208 ffff880196a21888 ffffffff812b0962<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> ffff880195f6a000 0000000000000000 ffff880195f6a020 0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Call Trace:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff812b0962>] tty_ldisc_get+0x6e/0xe2<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff812b0a41>] tty_ldisc_reinit+0x34/0x54<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff812b0b60>] tty_ldisc_hangup+0xff/0x18a<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff812aa13c>] do_tty_hangup+0xf5/0x30f<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff812aa36b>] tty_vhangup+0x15/0x17<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff812b22df>] pty_close+0x127/0x12b<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff812abc00>] tty_release_dev+0x1b9/0x4ed<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8110cdda>] ? __slab_free+0x82/0x23f<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8112dd27>] ? __d_free+0x50/0x55<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff812abf52>] tty_release+0x1e/0x29<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111cd9d>] __fput+0x12a/0x1d4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111ce61>] fput+0x1a/0x1c<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811192fd>] filp_close+0x68/0x72<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81058ae8>] put_files_struct+0x6a/0xcc<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81058b84>] exit_files+0x3a/0x3f<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8105a415>] do_exit+0x253/0x6f9<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81056be9>] ? release_console_sem+0x192/0x1c3<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff814545af>] oops_end+0xbf/0xc7<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81015591>] die+0x5a/0x63<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811ed1a6>] ? selinux_file_alloc_security+0x3d/0x85<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81454198>] do_general_protection+0x12e/0x137<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81453a15>] general_protection+0x25/0x30<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811ed1a6>] ? selinux_file_alloc_security+0x3d/0x85<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8110d768>] ? kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811ed1a6>] selinux_file_alloc_security+0x3d/0x85<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811e6971>] security_file_alloc+0x16/0x18<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111cfa0>] get_empty_filp+0xa9/0x142<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81127f7f>] do_filp_open+0xa8/0x95a<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811288bc>] ? getname+0x31/0x1c2<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8122e526>] ? might_fault+0x21/0x23<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8122e625>] ? __strncpy_from_user+0x1e/0x49<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81132a63>] ? alloc_fd+0x7b/0x124<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111943c>] do_sys_open+0x63/0x10f<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111951b>] sys_open+0x20/0x22<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81011d32>] system_call_fastpath+0x16/0x1b<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Code: 89 c7 fa 66 0f 1f 44 00 00 65 8b 04 25 68 e3 00 00 48 98 4d 8b 84 c4 f0 10 00 00 49 8b 10 45 8b 68 18 48 85 d2 74 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>0d 41 8b 40 14 <48> 8b 04 c2 49 89 00 eb 13 83 ca ff 4c 89 f1 89 de 4c 89 e7 e8 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> RSP <ffff880196a21828><o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>---[ end trace 16cdf3f5a3291373 ]---<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Fixing recursive fault but reboot is needed!<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Lustre: 1691:0:(import.c:517:import_select_connection()) lustre1-OST0001-osc: tried all connections, increasing latency <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>to 5s<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Lustre: 1691:0:(import.c:517:import_select_connection()) Skipped 2 previous similar messages<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: 137-5: UUID 'lustre1-OST0001_UUID' is not available  for connect (no target)<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: 1892:0:(ldlm_lib.c:1919:target_send_reply_msg()) @@@ processing error (-19)  req@ffff88018b767000 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>x1401501248389164/t0 o8-><?>@<?>:0/0 lens 368/0 e 0 to 0 dl 1336575989 ref 1 fl Interpret:/0/0 rc -19/0<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: 1892:0:(ldlm_lib.c:1919:target_send_reply_msg()) Skipped 2 previous similar messages<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: 11-0: an error occurred while communicating with 0@lo. The ost_connect operation failed with -19<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: Skipped 2 previous similar messages<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: Skipped 4 previous similar messages<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>general protection fault: 0000 [#5] SMP <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>last sysfs file: /sys/devices/system/cpu/cpu15/cache/index2/shared_cpu_map<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CPU 0 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Modules linked in: obdfilter ost mds fsfilt_ldiskfs mgs mgc ldiskfs lustre lov mdc lquota osc ksocklnd ptlrpc obdclass <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>lnet lvfs libcfs ipv6 dm_multipath kvm uinput iTCO_wdt bnx2 iTCO_vendor_support serio_raw hpwdt power_meter joydev <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>cciss radeon ttm drm_kms_helper drm i2c_algo_bit i2c_core [last unloaded: scsi_wait_scan]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Pid: 2186, comm: bash Tainted: G      D    2.6.32.19-163.lustre_1.8.5.fc12.x86_64 #1 ProLiant DL380 G7<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP: 0010:[<ffffffff8110d768>]  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RSP: 0018:ffff88031707bdb8  EFLAGS: 00010006<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RAX: 0000000000000000 RBX: 00000000000080d0 RCX: ffff880316163680<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>RDX: 2d3165727473756c RSI: 00000000000006b7 RDI: ffffffff815d5786<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>RBP: ffff88031707bde8 R08: ffff880007411f40 R09: 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R10: 0000000000000008 R11: ffff88031707be48 R12: ffffffff8169e600<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R13: 0000000000000010 R14: ffffffff811ed1a6 R15: 0000000000000246<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>FS:  00007effd64f1700(0000) GS:ffff880007400000(0000) knlGS:0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>CR2: 00000000013d8a50 CR3: 000000019813e000 CR4: 00000000000006f0<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR0: 0000000000000000 DR1: 0000000000000000 DR2: 0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR3: 0000000000000000 DR6: 00000000ffff0ff0 DR7: 0000000000000400<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Process bash (pid: 2186, threadinfo ffff88031707a000, task ffff880317d58000)<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Stack:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> ffff88031707bde8 0000000000000001 ffff88018b7e4600 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> 0000000000000002 ffff88031707bf38 ffff88031707be18 ffffffff811ed1a6<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> ffff88031707be48 ffff88018b7e4600 ffff880316163680 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Call Trace:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811ed1a6>] selinux_file_alloc_security+0x3d/0x85<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811e6971>] security_file_alloc+0x16/0x18<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111cfa0>] get_empty_filp+0xa9/0x142<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111d05f>] alloc_file+0x26/0x53<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811243a0>] create_write_pipe+0x148/0x1b2<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8112443e>] do_pipe_flags+0x34/0x10e<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81124539>] sys_pipe2+0x21/0x5f<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81124587>] sys_pipe+0x10/0x15<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81011d32>] system_call_fastpath+0x16/0x1b<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Code: 89 c7 fa 66 0f 1f 44 00 00 65 8b 04 25 68 e3 00 00 48 98 4d 8b 84 c4 f0 10 00 00 49 8b 10 45 8b 68 18 48 85 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>d2 74 0d 41 8b 40 14 <48> 8b 04 c2 49 89 00 eb 13 83 ca ff 4c 89 f1 89 de 4c 89 e7 e8 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> RSP <ffff88031707bdb8><o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>---[ end trace 16cdf3f5a3291374 ]---<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Lustre: 1691:0:(import.c:517:import_select_connection()) lustre1-OST0001-osc: tried all connections, increasing <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>latency to 6s<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Lustre: 1691:0:(import.c:517:import_select_connection()) Skipped 2 previous similar messages<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: 137-5: UUID 'lustre1-OST0001_UUID' is not available  for connect (no target)<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: 1900:0:(ldlm_lib.c:1919:target_send_reply_msg()) @@@ processing error (-19)  req@ffff88018b766000 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>x1401501248389169/t0 o8-><?>@<?>:0/0 lens 368/0 e 0 to 0 dl 1336576014 ref 1 fl Interpret:/0/0 rc -19/0<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: 1900:0:(ldlm_lib.c:1919:target_send_reply_msg()) Skipped 2 previous similar messages<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: 11-0: an error occurred while communicating with 0@lo. The ost_connect operation failed with -19<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: Skipped 2 previous similar messages<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>LustreError: Skipped 2 previous similar messages<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>general protection fault: 0000 [#6] SMP <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>last sysfs file: /sys/devices/system/cpu/cpu15/cache/index2/shared_cpu_map<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>CPU 0 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Modules linked in: obdfilter ost mds fsfilt_ldiskfs mgs mgc ldiskfs lustre lov mdc lquota osc ksocklnd ptlrpc <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>obdclass lnet lvfs libcfs ipv6 dm_multipath kvm uinput iTCO_wdt bnx2 iTCO_vendor_support serio_raw hpwdt <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>power_meter joydev cciss radeon ttm drm_kms_helper drm i2c_algo_bit i2c_core [last unloaded: scsi_wait_scan]<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Pid: 2191, comm: bash Tainted: G      D    2.6.32.19-163.lustre_1.8.5.fc12.x86_64 #1 ProLiant DL380 G7<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP: 0010:[<ffffffff8110d768>]  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RSP: 0018:ffff88030c40ddb8  EFLAGS: 00010006<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RAX: 0000000000000000 RBX: 00000000000080d0 RCX: ffff880316163980<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>RDX: 2d3165727473756c RSI: 00000000000006b7 RDI: ffffffff815d5786<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RBP: ffff88030c40dde8 R08: ffff880007411f40 R09: 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R10: 0000000000000008 R11: ffff88030c40de48 R12: ffffffff8169e600<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>R13: 0000000000000010 R14: ffffffff811ed1a6 R15: 0000000000000246<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>FS:  00007fdb8806e700(0000) GS:ffff880007400000(0000) knlGS:0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>CR2: 000000000245ca50 CR3: 0000000197393000 CR4: 00000000000006f0<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR0: 0000000000000000 DR1: 0000000000000000 DR2: 0000000000000000<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>DR3: 0000000000000000 DR6: 00000000ffff0ff0 DR7: 0000000000000400<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Process bash (pid: 2191, threadinfo ffff88030c40c000, task ffff880317d5aec0)<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Stack:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> ffff88030c40dde8 0000000000000001 ffff88018b7e4cc0 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> 0000000000000002 ffff88030c40df38 ffff88030c40de18 ffffffff811ed1a6<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><0> ffff88030c40de48 ffff88018b7e4cc0 ffff880316163980 0000000000000001<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Call Trace:<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811ed1a6>] selinux_file_alloc_security+0x3d/0x85<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811e6971>] security_file_alloc+0x16/0x18<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111cfa0>] get_empty_filp+0xa9/0x142<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8111d05f>] alloc_file+0x26/0x53<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff811243a0>] create_write_pipe+0x148/0x1b2<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff8112443e>] do_pipe_flags+0x34/0x10e<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81124539>] sys_pipe2+0x21/0x5f<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81124587>] sys_pipe+0x10/0x15<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> [<ffffffff81011d32>] system_call_fastpath+0x16/0x1b<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>Code: 89 c7 fa 66 0f 1f 44 00 00 65 8b 04 25 68 e3 00 00 48 98 4d 8b 84 c4 f0 10 00 00 49 8b 10 45 8b 68 18 48 85 d2 74 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span style='font-family:"Courier New"'>0d 41 8b 40 14 <48> 8b 04 c2 49 89 00 eb 13 83 ca ff 4c 89 f1 89 de 4c 89 e7 e8 <o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>RIP  [<ffffffff8110d768>] kmem_cache_alloc_notrace+0x75/0xc4<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'> RSP <ffff88030c40ddb8><o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'>---[ end trace 16cdf3f5a3291375 ]---<o:p></o:p></span></p><p class=MsoNormal style='text-autospace:none'><span lang=EN-US style='font-family:"Courier New"'><o:p> </o:p></span></p><p class=MsoNormal><span style='color:#1F497D'><o:p> </o:p></span></p><p class=MsoNormal><b><span style='color:#1F497D'>Denis Charland<o:p></o:p></span></b></p><p class=MsoNormal><span lang=EN-US style='font-size:9.0pt;color:#1F497D'>UNIX Systems Administrator<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:9.0pt;color:#1F497D'>National Research Council Canada<o:p></o:p></span></p></div></body></html>