首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >Max_io_queue设置在boto3.s3.transfer.config中是做什么的?

Max_io_queue设置在boto3.s3.transfer.config中是做什么的?
EN

Stack Overflow用户
提问于 2015-12-02 22:26:48
回答 1查看 501关注 0票数 0

在TransferConfig中,增加或减少max_io_queue对boto3.transfer.download_file()有什么作用?

我试着研究源代码。它似乎与MultipartDownloader中的队列大小有关。如果max_concurrency是固定的,我看不出只要max_io_queue > max_currency这个max_io_queue会有什么效果。如果我错了,请纠正我。

代码语言:javascript
运行
复制
 class TransferConfig(object):
    def __init__(self,
                 multipart_threshold=8 * MB,
                 max_concurrency=10,
                 multipart_chunksize=8 * MB,
                 num_download_attempts=5,
                 max_io_queue=100):
EN

Stack Overflow用户

回答已采纳

发布于 2015-12-03 18:45:31

队列同步文件写入。给定的线程可以将任意数量的写入推送到队列上,而不会阻塞队列,直到队列达到最大大小为止。此时,对put的调用将阻塞线程,直到剩余空间。如果队列没有大小限制,那么连接速度快、速度慢的人会在未来的写作中耗尽他们所有的内存。

票数 1
EN
查看全部 1 条回答
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/34054318

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档