Boto3 Copy_Object在大小超过5 5GB时失败
Boto3 Copy_Object在大小超过5 5GB时失败
提问于 2018-10-19 01:18:46
我有以下函数
async def _s3_copy_object(self, s3_source, s3_destination):
source_bucket, source_key = get_s3_bucket_and_key(s3_source)
destination_bucket, destination_key = get_s3_bucket_and_key(s3_destination)
print("copying object: {} to {}".format(s3_source, s3_destination))
source = {'Bucket': source_bucket, 'Key': source_key}
await self._async_s3.copy_object(CopySource=source,
Bucket=destination_bucket, Key=destination_key,
ServerSideEncryption='AES256',
MetadataDirective='COPY',
TaggingDirective='COPY')如果文件小于5 5gb，则此方法效果很好，但如果对象超过5 5gb，则此方法将失败。
我得到以下错误：
An error occurred (InvalidRequest) when calling the CopyObject operation: The specified copy source is larger than the maximum allowable size for a copy source: 5368709120: 1313有没有解决这个问题的办法？
回答 2
Stack Overflow用户
回答已采纳
发布于 2018-10-19 06:23:37
您需要使用boto3 copy方法，而不是copy_object。复制大于5 5GB的对象时，需要进行分块上传。它还将为您处理线程。
Stack Overflow用户
发布于 2018-10-19 04:57:52
您应该考虑使用多部分uploads.In作为单个操作，允许的最大大小为5 5GB
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/52879356
复制相关文章
相似问题