<html><body bgcolor="#FFFFFF"><div>Hi Lakshmana,</div><div><br></div><div>You can use standard ofed tools like ib_rdma_bw to check Infiniband bandwidth between pair of nodes.</div><div><br></div><div>Lustre provides lnet selftest tool for measuring IB bandwidth between pair or group of nodes. Check lustre manual for how tos.</div><div><br></div><div>Finally, can you post IOR parameters you are using?</div><div><br></div><div>Cheers,</div><div>Atul</div><div><br></div><div><br><br>Sent from my iPhone</div><div><br>On Dec 31, 2009, at 5:13 PM, lakshmana swamy <<a href="mailto:klakshman03@hotmail.com">klakshman03@hotmail.com</a>> wrote:<br><br></div><div></div><blockquote type="cite"><div>
 <br>
  Dear All,<br>
 <br>
  Whats the maximum write speed can be achieved with Infiniband QDR HCA card.<br>
 <br>
 <br>
 The Question arised from my lustre  setup where Iam not able to exceed 500MB/s (write speed) with two OSSs and one MDS<br>
 <br>
 Each OSS has four OSTs and one HCA card. I would like to know which is the bottleneck here.<br>
 <br>
 <br>
 I have been using IOR for benchmarking<br>
 <br>
Thank you<br>
 <br>
LakshmaN<br>                                        <br><hr>New Windows 7: Simplify what you do everyday. <a href="http://windows.microsoft.com/shop" target="_new">Find the right PC for you.</a>

</div></blockquote><blockquote type="cite"><div><span>_______________________________________________</span><br><span>Lustre-discuss mailing list</span><br><span><a href="mailto:Lustre-discuss@lists.lustre.org">Lustre-discuss@lists.lustre.org</a></span><br><span><a href="http://lists.lustre.org/mailman/listinfo/lustre-discuss">http://lists.lustre.org/mailman/listinfo/lustre-discuss</a></span><br></div></blockquote></body></html>