<div dir="ltr"><div>Hi Gupta,<br><br></div>What I see is<br><br><ol><li>there is no MDS and/or filesystem name</li><li>mount command did not specify filesystem name, otherwise the filesystem name is "client1"</li></ol><p>try preparing MDT volume and format it with a filesystem name( on the MGS is okay) and mount the MDT, and retry lustre mount with following command</p><p><span style="color:red">[root@Client ~]# mount -t lustre 10.177.33.10@tcp:/<FILESYSTEMNAME> /mnt/lustre</span></p><p> Regards,</p><p>Jongwoo Han<br></p><div><div><div><div><div class="gmail_extra"><br><div class="gmail_quote">2015-01-07 22:25 GMT+09:00 Gupta, Amit <span dir="ltr"><<a href="mailto:amit.gupta@optum.com" target="_blank">amit.gupta@optum.com</a>></span>:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">





<div link="blue" vlink="purple" lang="EN-US">
<div>
<p class="MsoNormal">Hi All ,<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">Need some guidance on getting past this error that I get mounting the OST on the Client. This is the first time I am trying to mount it so not sure what I could be missing.. I will be glad to provide any other logs that would be helpful
 to determine the root cause of this issue.. <u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">Thanks <u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">There are 3 servers in the configuration running Lustre  <span style="background:none repeat scroll 0% 0% yellow">kernel-2.6.32-431.20.3.el6_lustre.x86_64</span><u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><span style="background:none repeat scroll 0% 0% yellow">10.177.33.10 is MGS/MGT Server<u></u><u></u></span></p>
<p class="MsoNormal"><span style="background:none repeat scroll 0% 0% yellow">10.177.33.9 is the Lustre Client<u></u><u></u></span></p>
<p class="MsoNormal"><span style="background:none repeat scroll 0% 0% yellow">10.177.33.22 is OSS</span><u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><span style="color:red">[root@Client ~]# mount -t lustre 10.177.33.10@tcp:/client1 /mnt/lustre<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">mount.lustre: mount 10.177.33.10@tcp:/client1 at /mnt/lustre failed: Invalid argument<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">This may have multiple causes.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">Is 'client1' the correct filesystem name?<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">Are the mount options correct?<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">Check the syslog for more info<u></u><u></u></span></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><span style="background:none repeat scroll 0% 0% yellow">The OST is mounted on OSS as Client1</span><u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><b>Error from Logs<u></u><u></u></b></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><span style="color:red">Jan  7 13:10:46 client kernel: LustreError: 156-2: The client profile 'client1-client' could not be read from the MGS.  Does that
<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red"><u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">filesystem exist?<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">Jan  7 13:10:46 client kernel: LustreError: 11278:0:(lov_obd.c:951:lov_cleanup()) client1-clilov-ffff8820337cec00: lov tgt 0 not
<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red"><u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">cleaned! deathrow=0, lovrc=1<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">Jan  7 13:10:46 client kernel: Lustre: Unmounted client1-client<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:red">Jan  7 13:10:46 client kernel: LustreError: 13167:0:(obd_mount.c:1342:lustre_fill_super()) Unable to mount  (-22)<u></u><u></u></span></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">================================================<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><span style="background:none repeat scroll 0% 0% yellow">Pinging MGS and Client from OSS</span><u></u><u></u></p>
<p class="MsoNormal">=================================================<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">[root@OSS ]# lctl ping 10.177.33.10<u></u><u></u></p>
<p class="MsoNormal">12345-0@lo<u></u><u></u></p>
<p class="MsoNormal">12345-10.177.33.10@tcp<u></u><u></u></p>
<p class="MsoNormal">[root@OSS]# lctl ping 10.177.33.9<u></u><u></u></p>
<p class="MsoNormal">12345-0@lo<u></u><u></u></p>
<p class="MsoNormal">12345-10.177.33.9@tcp<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">=====================<u></u><u></u></p>
<p class="MsoNormal">OST mounted as Client1 on OSS<u></u><u></u></p>
<p class="MsoNormal">=============================<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">/<span style="background:none repeat scroll 0% 0% yellow">dev/zd912             1069706420   483556   1013552180   1% /client1</span><u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">[root@OSS]# tunefs.lustre /dev/zd912<u></u><u></u></p>
<p class="MsoNormal">checking for existing Lustre data: found<u></u><u></u></p>
<p class="MsoNormal">Reading CONFIGS/mountdata<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">   Read previous values:<u></u><u></u></p>
<p class="MsoNormal">Target:     client1-OST0000<u></u><u></u></p>
<p class="MsoNormal">Index:      0<u></u><u></u></p>
<p class="MsoNormal">Lustre FS:  client1<u></u><u></u></p>
<p class="MsoNormal">Mount type: ldiskfs<u></u><u></u></p>
<p class="MsoNormal">Flags:      0x2<u></u><u></u></p>
<p class="MsoNormal">              (OST )<u></u><u></u></p>
<p class="MsoNormal">Persistent mount opts: errors=remount-ro<u></u><u></u></p>
<p class="MsoNormal">Parameters: mgsnode=10.177.33.10@tcp<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">   Permanent disk data:<u></u><u></u></p>
<p class="MsoNormal">Target:     client1-OST0000<u></u><u></u></p>
<p class="MsoNormal">Index:      0<u></u><u></u></p>
<p class="MsoNormal">Lustre FS:  client1<u></u><u></u></p>
<p class="MsoNormal">Mount type: ldiskfs<u></u><u></u></p>
<p class="MsoNormal">Flags:      0x2<u></u><u></u></p>
<p class="MsoNormal">              (OST )<u></u><u></u></p>
<p class="MsoNormal">Persistent mount opts: errors=remount-ro<u></u><u></u></p>
<p class="MsoNormal">Parameters: mgsnode=10.177.33.10@tcp<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">lctl > modules<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/osp/osp.o 0xffffffffa10f5000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mdd/mdd.o 0xffffffffa0b12000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lod/lod.o 0xffffffffa109f000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mdt/mdt.o 0xffffffffa0fe7000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mgs/mgs.o 0xffffffffa08c9000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lfsck/lfsck.o 0xffffffffa0f17000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/ost/ost.o 0xffffffffa018c000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mgc/mgc.o 0xffffffffa0ef9000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/quota/lquota.o 0xffffffffa0dfc000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/llite/lustre.o 0xffffffffa0ce2000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lov/lov.o 0xffffffffa0c66000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mdc/mdc.o 0xffffffffa0c25000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/fid/fid.o 0xffffffffa0c07000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lmv/lmv.o 0xffffffffa0bbc000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/fld/fld.o 0xffffffffa0b9d000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lnet/klnds/socklnd/ksocklnd.o 0xffffffffa0b64000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/ptlrpc/ptlrpc.o 0xffffffffa0923000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/obdclass/obdclass.o 0xffffffffa06e4000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lnet/lnet/lnet.o 0xffffffffa067b000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file libcfs/libcfs/libcfs.o 0xffffffffa05e1000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file ldiskfs/ldiskfs.o 0xffffffffa055d000<u></u><u></u></p>
<p class="MsoNormal">lctl > lustre_build_version<u></u><u></u></p>
<p class="MsoNormal">Lustre version: 2.6.0-RC2--PRISTINE-2.6.32-431.20.3.el6_lustre.x86_64<u></u><u></u></p>
<p class="MsoNormal">lctl   version: 2.6.0-RC2--PRISTINE-2.6.32-431.20.3.el6_lustre.x86_64<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]<u></u><u></u></p>
<p class="MsoNormal">==================================================<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><span style="background:none repeat scroll 0% 0% yellow">On MGS Server</span><u></u><u></u></p>
<p class="MsoNormal">====================================================<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">[root@MGS ~]# lctl ping 10.177.33.9@tcp<u></u><u></u></p>
<p class="MsoNormal">12345-0@lo<u></u><u></u></p>
<p class="MsoNormal">12345-10.177.33.9@tcp<u></u><u></u></p>
<p class="MsoNormal">[root@MGS ~]# lctl ping 10.177.33.22@tcp<u></u><u></u></p>
<p class="MsoNormal">12345-0@lo<u></u><u></u></p>
<p class="MsoNormal">12345-10.177.33.22@tcp<u></u><u></u></p>
<p class="MsoNormal">[root@MGS ~]# cat /proc/fs/lustre/mgs/MGS/live/*<u></u><u></u></p>
<p class="MsoNormal">fsname: client1<u></u><u></u></p>
<p class="MsoNormal">flags: 0x20     gen: 5<u></u><u></u></p>
<p class="MsoNormal">client1-OST0000<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">Secure RPC Config Rules:<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">imperative_recovery_state:<u></u><u></u></p>
<p class="MsoNormal">    state: full<u></u><u></u></p>
<p class="MsoNormal">    nonir_clients: 0<u></u><u></u></p>
<p class="MsoNormal">    nidtbl_version: 3<u></u><u></u></p>
<p class="MsoNormal">    notify_duration_total: 0.000000<u></u><u></u></p>
<p class="MsoNormal">    notify_duation_max: 0.000000<u></u><u></u></p>
<p class="MsoNormal">    notify_count: 1<u></u><u></u></p>
<p class="MsoNormal">fsname: params<u></u><u></u></p>
<p class="MsoNormal">flags: 0x21     gen: 1<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">Secure RPC Config Rules:<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">imperative_recovery_state:<u></u><u></u></p>
<p class="MsoNormal">    state: full<u></u><u></u></p>
<p class="MsoNormal">    nonir_clients: 0<u></u><u></u></p>
<p class="MsoNormal">    nidtbl_version: 2<u></u><u></u></p>
<p class="MsoNormal">    notify_duration_total: 0.000000<u></u><u></u></p>
<p class="MsoNormal">    notify_duation_max: 0.000000<u></u><u></u></p>
<p class="MsoNormal">    notify_count: 0<u></u><u></u></p>
<p class="MsoNormal">fsname: temp<u></u><u></u></p>
<p class="MsoNormal">flags: 0x20     gen: 7<u></u><u></u></p>
<p class="MsoNormal">temp-MDT0000<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">Secure RPC Config Rules:<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">imperative_recovery_state:<u></u><u></u></p>
<p class="MsoNormal">    state: full<u></u><u></u></p>
<p class="MsoNormal">    nonir_clients: 0<u></u><u></u></p>
<p class="MsoNormal">    nidtbl_version: 4<u></u><u></u></p>
<p class="MsoNormal">    notify_duration_total: 0.000000<u></u><u></u></p>
<p class="MsoNormal">    notify_duation_max: 0.000000<u></u><u></u></p>
<p class="MsoNormal">    notify_count: 1<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">lctl > lustre_build_version<u></u><u></u></p>
<p class="MsoNormal">Lustre version: 2.6.0-RC2--PRISTINE-2.6.32-431.20.3.el6_lustre.x86_64<u></u><u></u></p>
<p class="MsoNormal">lctl   version: 2.6.0-RC2--PRISTINE-2.6.32-431.20.3.el6_lustre.x86_64<u></u><u></u></p>
<p class="MsoNormal">lctl > modules<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/osp/osp.o 0xffffffffa10bc000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mdd/mdd.o 0xffffffffa1057000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lod/lod.o 0xffffffffa0fed000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mdt/mdt.o 0xffffffffa0f0d000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lfsck/lfsck.o 0xffffffffa0e97000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mgs/mgs.o 0xffffffffa0e3c000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mgc/mgc.o 0xffffffffa0e10000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/quota/lquota.o 0xffffffffa0d13000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file ldiskfs/ldiskfs.o 0xffffffffa0c8f000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/llite/lustre.o 0xffffffffa0b75000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lov/lov.o 0xffffffffa0af9000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mdc/mdc.o 0xffffffffa0ab8000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/fid/fid.o 0xffffffffa0a9a000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lmv/lmv.o 0xffffffffa0a4f000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/fld/fld.o 0xffffffffa0a38000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lnet/klnds/socklnd/ksocklnd.o 0xffffffffa09ff000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/ptlrpc/ptlrpc.o 0xffffffffa07be000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/obdclass/obdclass.o 0xffffffffa057f000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lnet/lnet/lnet.o 0xffffffffa0516000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file libcfs/libcfs/libcfs.o 0xffffffffa047c000<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">====================================================<u></u><u></u></p>
<p class="MsoNormal"><span style="background:none repeat scroll 0% 0% yellow">Trying to Mount OST on the Client</span><u></u><u></u></p>
<p class="MsoNormal">=====================================================<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">[root@Client ~]# mount -t lustre 10.177.33.10@tcp:/client1 /mnt/lustre<u></u><u></u></p>
<p class="MsoNormal">mount.lustre: mount 10.177.33.10@tcp:/client1 at /mnt/lustre failed: Invalid argument<u></u><u></u></p>
<p class="MsoNormal">This may have multiple causes.<u></u><u></u></p>
<p class="MsoNormal">Is 'client1' the correct filesystem name?<u></u><u></u></p>
<p class="MsoNormal">Are the mount options correct?<u></u><u></u></p>
<p class="MsoNormal">Check the syslog for more info.<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">[root@client ~]# lctl ping 10.177.33.10@tcp<u></u><u></u></p>
<p class="MsoNormal">12345-0@lo<u></u><u></u></p>
<p class="MsoNormal">12345-10.177.33.10@tcp<u></u><u></u></p>
<p class="MsoNormal">[root@client ~]# lctl ping 10.177.33.22@tcp<u></u><u></u></p>
<p class="MsoNormal">12345-0@lo<u></u><u></u></p>
<p class="MsoNormal">12345-10.177.33.22@tcp<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">[root@client ~]# lctl<u></u><u></u></p>
<p class="MsoNormal">lctl > lustre_build_version<u></u><u></u></p>
<p class="MsoNormal">Lustre version: 2.6.0-RC2--PRISTINE-2.6.32-431.20.3.el6.x86_64<u></u><u></u></p>
<p class="MsoNormal">lctl   version: 2.6.0-RC2--PRISTINE-2.6.32-431.20.3.el6.x86_64<u></u><u></u></p>
<p class="MsoNormal">lctl > modules<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/osc/osc.o 0xffffffffa1212000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mgc/mgc.o 0xffffffffa11f4000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/llite/lustre.o 0xffffffffa10da000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lov/lov.o 0xffffffffa105e000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/mdc/mdc.o 0xffffffffa101d000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/fid/fid.o 0xffffffffa100f000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/lmv/lmv.o 0xffffffffa0fc4000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/fld/fld.o 0xffffffffa0fb3000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/ptlrpc/ptlrpc.o 0xffffffffa0e0b000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lustre/obdclass/obdclass.o 0xffffffffa0bff000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lnet/klnds/socklnd/ksocklnd.o 0xffffffffa08f8000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file lnet/lnet/lnet.o 0xffffffffa04db000<u></u><u></u></p>
<p class="MsoNormal">add-symbol-file libcfs/libcfs/libcfs.o 0xffffffffa0441000<u></u><u></u></p>
</div>
<p><br>
This e-mail, including attachments, may include confidential and/or<br>
proprietary information, and may be used only by the person or entity<br>
to which it is addressed. If the reader of this e-mail is not the intended<br>
recipient or his or her authorized agent, the reader is hereby notified<br>
that any dissemination, distribution or copying of this e-mail is<br>
prohibited. If you have received this e-mail in error, please notify the<br>
sender by replying to this message and delete this e-mail immediately.</p></div>

<br>_______________________________________________<br>
Lustre-discuss mailing list<br>
<a href="mailto:Lustre-discuss@lists.lustre.org">Lustre-discuss@lists.lustre.org</a><br>
<a href="http://lists.lustre.org/mailman/listinfo/lustre-discuss" target="_blank">http://lists.lustre.org/mailman/listinfo/lustre-discuss</a><br>
<br></blockquote></div><br><br clear="all"><br>-- <br><div class="gmail_signature"><span style="font-family:courier new,monospace">Jongwoo Han</span><br><div style="margin-left:40px"><span style="font-family:courier new,monospace"></span></div><span style="font-family:courier new,monospace">Principal consultant<br style="font-family:courier new,monospace"></span><span style="font-family:courier new,monospace"><a href="mailto:jw.han@apexcns.com" target="_blank">jw.han@apexcns.com</a></span><br style="font-family:courier new,monospace"><span style="font-family:courier new,monospace">Tel:   +82- 2-3413-1704</span><br style="font-family:courier new,monospace"><span style="font-family:courier new,monospace">Mobile:+82-505-227-6108</span><br style="font-family:courier new,monospace"><span style="font-family:courier new,monospace">Fax: : +82-  2-544-7962</span><br></div>
</div></div></div></div></div></div>