首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Glusterfs分布式复制小文件性能

Glusterfs分布式复制小文件性能
EN

Server Fault用户
提问于 2013-09-04 19:48:04
回答 2查看 4.7K关注 0票数 2

我在hyperv服务器(dynamic )虚拟磁盘上的xfs分区上设置了4个具有glusterfs的分布式复制服务器。NIC为6x1Gbit (在hyperv上合作)。我通过samba与windows客户端共享它。我遇到的问题是,对于大量的小文件(读和写),我的性能真的很差,当有很多10k文件时,我的传输速率大约是300 of (在本地客户机上的传输速度也没有那么快)。这个问题有什么解决办法吗?还是我的配置不好?大文件传输良好(利用所有带宽)

EN

回答 2

Server Fault用户

发布于 2013-09-04 20:18:00

我尝试使用GlusterFS进行web应用程序部署,并在多个服务器之间共享大量用户上传的文件。我大概花了4个月的时间才能得到合理的速度,但我永远也做不到。如果你真的尝试的话,你可以调整它大约25%-40%的速度增长,但是它还不够快。

我忘记了确切的技术细节,但是GlusterFS协议非常冗长,即使在只读系统中也是如此。正如Danila所说,如果您想要共享小文件,最好通过gluster使用NFS协议。这样做的最大缺点是NFS。

另一种选择是Ceph。它发展迅速,在最新的Ubuntu内核上非常有用。

老实说,如果可以的话,我建议放弃共享FS。过会儿你会感谢我的。

票数 4
EN

Server Fault用户

发布于 2013-09-04 20:08:23

GlusterFS本地FUSE客户端非常糟糕,有大量的小文件。您也可以尝试在GlusterFS中使用NFS。此外,我不认为xfs分区在这种设置中比本机EXT4更有优势。您可以在本文中阅读更多信息:

http://lwn.net/Articles/476263/

票数 3
EN
页面原文内容由Server Fault提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://serverfault.com/questions/536394

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档