首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >Google存储-使用gsutil的低上传速度

Google存储-使用gsutil的低上传速度
EN

Server Fault用户
提问于 2015-09-15 13:01:26
回答 1查看 2K关注 0票数 1

我们目前正在评估使用谷歌存储的近线备份。所讨论的服务器位于Hetzner数据中心内,平均为80-100 data /S上游和300-500 data/S下游。我们使用谷歌gsutil访问存储和它的rsync命令同步我们的备份目录。虽然下载速度足够快,但上传文件的时间太长了:最大上传速度约为8-11 11Mbit/S。这种情况只发生在gsutil上,并不能真正用于备份存储位置。我知道大文件应该使用并行复合上传方式上传,但是谷歌建议而非使它靠近线

现在,我的问题是,这些低上传速度预期吗?有没有优化它的方法?事实上,我们生成的数据比谷歌存储( Google )还多,而且还需要寻找其他解决方案。

EN

回答 1

Server Fault用户

发布于 2015-09-15 22:10:21

如果有大量对象要同步,则可能需要使用gsutil -m选项来执行并行(多线程/多处理)同步:gsutil -m rsync -d -r data gs://mybucket/data

“使用-d选项时要小心!”

票数 1
EN
页面原文内容由Server Fault提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://serverfault.com/questions/722435

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档