我在hyperv服务器(dynamic )虚拟磁盘上的xfs分区上设置了4个具有glusterfs的分布式复制服务器。NIC为6x1Gbit (在hyperv上合作)。我通过samba与windows客户端共享它。我遇到的问题是,对于大量的小文件(读和写),我的性能真的很差,当有很多10k文件时,我的传输速率大约是300 of (在本地客户机上的传输速度也没有那么快)。这个问题有什么解决办法吗?还是我的配置不好?大文件传输良好(利用所有带宽)
发布于 2013-09-04 20:18:00
我尝试使用GlusterFS进行web应用程序部署,并在多个服务器之间共享大量用户上传的文件。我大概花了4个月的时间才能得到合理的速度,但我永远也做不到。如果你真的尝试的话,你可以调整它大约25%-40%的速度增长,但是它还不够快。
我忘记了确切的技术细节,但是GlusterFS协议非常冗长,即使在只读系统中也是如此。正如Danila所说,如果您想要共享小文件,最好通过gluster使用NFS协议。这样做的最大缺点是NFS。
另一种选择是Ceph。它发展迅速,在最新的Ubuntu内核上非常有用。
老实说,如果可以的话,我建议放弃共享FS。过会儿你会感谢我的。
发布于 2013-09-04 20:08:23
GlusterFS本地FUSE客户端非常糟糕,有大量的小文件。您也可以尝试在GlusterFS中使用NFS。此外,我不认为xfs分区在这种设置中比本机EXT4更有优势。您可以在本文中阅读更多信息:
http://lwn.net/Articles/476263/
https://serverfault.com/questions/536394
复制相似问题