将大量数据同步到s3 (aws)
将大量数据同步到s3 (aws)
提问于 2016-01-13 10:34:44
我需要在AWS中将2.5TB的数据从文件系统同步到s3。
我将使用AWS CLI命令：
aws s3同步. s3://MyBucket
此命令将将当前文件夹同步到一个名为MyBucket的桶( s3中)。
我的问题是：
( 1)在不超时的情况下，一次就能做到这一点吗？
2)考虑到数据量，我期望的限制/问题是什么？
回答 1
Stack Overflow用户
回答已采纳
发布于 2016-01-13 18:01:24
假设您指的是单个文件，还是几个非常大的文件？如果是的话：
( 1)是的，文件会被上传成小部分，这样你就不用担心这种事情了。2)这将需要很长的时间，这是不可避免的。如果对于给定的文件部件上载失败次数太多，则上载将被中止。
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/34764352
复制相关文章
相似问题
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号