腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(3670)
视频
沙龙
2
回答
使用NiFi实现
S3
分块
上传
、
我正在从一个关系数据库中摄取大量数据到AWS
S3
中。由于卷很大,我通过多个SQL拉取将其拆分,创建较小的流文件,然后合并,然后
上传
到AWS
S3
。有没有办法
将
这些文件块
上传
到
亚马逊
网络服务
S3
,然后在该特定表格的所有
上传
完成后进行最终合并?我使用的处理器有一个
分块
上传
选项,但在我看来,这种方法首先需要在本地创建大文件,然后才能
分块
加载
上传
文件。我的理解正确吗?我正在尝试避免在<e
浏览 3
提问于2019-06-14
得票数 1
2
回答
亚马逊
S3
上传
错误
:
将
分块
上
载到
分块
上传
时
出现异常
、
、
、
我正在尝试使用AWS PHP SDK
将
一个30 GB的文件
上传
到
亚马逊
S3
。 require('../vendor/autoload.php'); use Aws\Exception\MultipartUploadException; 'version' => 'latest'
浏览 82
提问于2015-09-30
得票数 0
1
回答
拆分并
上传
极大(10+ GB)的文件到
亚马逊
S3
、
、
、
、
我正在通过AJAX
上传
文件到
亚马逊
S3
(使用浏览器文件API,并将实际的
上传
脚本作为iframe存储在
亚马逊
S3
上
,以绕过
亚马逊
S3
跨站点问题,出于这个想法,请使用jquery- File -upload然而,我希望在
亚马逊
S3
上
存储非常大的文件。我想存储像配置好的虚拟机这样的东西,它可以是10+ GB大小。 根据我对HTML5文件应用编程接口的理解,可以在客户端
将</e
浏览 0
提问于2012-07-29
得票数 4
1
回答
Ruby
S3
多部分暂停和恢复(在调用close之后添加一个部分)
、
我正在使用aws-sdk gem,我正在尝试
上传
一个非常大的文件(需要2天)。分片
上传
关闭后是否可以添加分片?(比如第二天)基本
上
恢复
上传
?
浏览 2
提问于2012-05-04
得票数 0
回答已采纳
1
回答
在
亚马逊
网络服务的
S3
存储桶
上
组合7z块
、
、
、
我已经使用7zip
将
一个文件压缩成几个块: 将以下内容保存在
亚马逊
网络服务
S3
存储桶中: pic.7z.001pic.7z.003pic.7z.005WANT -以下内容也保存在
亚马逊
网络服务
S3
存储桶中: first step: pic.7z second step: a folder called 'pic' 如果可能的话,我想在
亚马逊
网络服务的
S3
上
做这一切。
浏览 15
提问于2020-04-24
得票数 1
回答已采纳
19
回答
对于大于5 5GB的文件,计算Amazon-S3 Etag的算法是什么?
、
上传
到
亚马逊
S3
的小于5 5GB的文件有一个ETag,它只是文件的MD5哈希,这使得检查您的本地文件是否与您放在
S3
上
的文件相同。 但如果你的文件大于5 5GB,
亚马逊
会以不同的方式计算ETag。例如,我完成了一个分成380个部分的5,970,150,664字节文件的多部分
上传
。现在
S3
显示它有一个6bcf86bed8807b8e78f0fc6e0a53079d-380的ETag。我认为破折号后面的数字是
分块
上传
中的
浏览 4
提问于2012-08-30
得票数 83
回答已采纳
1
回答
为什么AWS.S3 getObject().createReadStream()不返回数据,而getObject().promise()返回数据?
、
、
、
、
我创建了一个Lambda函数,每次
将
文件添加到存储桶中
时
都会调用该函数。函数从存储桶中读取作为steam添加的文件,并将其保存到另一个存储桶中,因此我使用aws-sdk和NodeJS编写了一段代码,它应该可以做到这一点: ... const file =
s3
: file, await s3.putObject(destParams).promise(); console.log(e); } 我通过
将
文件
上传
到存储桶来测试我的代
浏览 64
提问于2021-04-02
得票数 0
1
回答
上传
文件到服务器
亚马逊
S3
没有损坏的多部分文件
、
正在
将
文件
上传
到
亚马逊
S3
。使用PUT,没有
分块
,使用动态Url,创建url编码问题,文件被损坏的问题。
浏览 2
提问于2021-09-02
得票数 0
1
回答
亚马逊
S3
上
不断增长的文件
、
、
在
亚马逊
s3
上有可能有越来越多的文件吗? 也就是说,我是否可以
上传
一个我在
上传
开始
时
不知道其最终大小的文件。这样我就可以在指定的偏移量
上
开始向文件中写入更多的数据。
浏览 1
提问于2012-04-30
得票数 2
回答已采纳
1
回答
blueimp文件
上传
器直接
上传
到
亚马逊
S3
替换以前的部分
、
、
、
、
我正在使用以下插件直接在
亚马逊
网络服务
S3
上
上传
大文件,而不使用任何服务器。它对小文件工作得很好,但当我使用文档中描述的"maxChunkSize“参数对大文件使用它
时
,它可以工作,但它取代了以前的部分。假设有一个100MB的文件,我使用10MB的块来
上传
它,在成功
上传
之后,我的
S3
存储桶
上
只收到了10MB。 关于这个问题,请帮我一下。
浏览 12
提问于2018-02-03
得票数 2
回答已采纳
3
回答
如何在v2.1上将视频作为分片视频
上传
iOS
上传
到
亚马逊
s3
如何
将
视频
上传
到
亚马逊
s3
作为
分块
上传
方法。如果有人知道或甚至有一些想法如何解决这个问题,请给我一些建议。 非常感谢您的宝贵时间!
浏览 1
提问于2015-04-01
得票数 3
3
回答
AWS SDK预签名URL +
分块
上传
、
、
有没有办法通过浏览器使用生成的预签名URL进行
分块
上传
?
浏览 2
提问于2015-08-04
得票数 7
3
回答
上传
超过3 gb的文件到
亚马逊
S3
、
、
、
、
我尝试
将
大小超过3 gb的文件
上传
到amazon
时
,我
上传
的文件很小,它们被愉快地
上传
,但当我尝试
上传
大文件
时
,它是否显示
错误
http 400 有人能告诉我哪里出错了吗?或者我需要
分块
上传
文件吗?
浏览 1
提问于2015-04-15
得票数 1
1
回答
如何创建EC2实例,其中图像以块的形式存储在
亚马逊
S3
中
、
、
我是
亚马逊
EC2服务的新手,对
亚马逊
S3
存储服务有一些了解。我使用
分块
上传
的方式
将
数据
上传
到
s3
。现在,我的数据出现在一个
S3
存储桶中。如何从
S3
向AMI实例发送数据
浏览 1
提问于2017-12-07
得票数 0
1
回答
multipart upload node.js中的AWS
s3
进度条
、
、
、
、
我正在尝试找出一种方法来跟踪使用node.js aws-sdk
分块
上传
的一堆文件的
上传
进度。我能够
将
所有文件分成部分并逐个
上传
,但event httpUploadProgress在
上传
开始后提供整个partSize,而不是像putObject方法中那样提供
上传
到
亚马逊
s3
的实时字节。
浏览 0
提问于2017-11-13
得票数 3
1
回答
从网络浏览器到
亚马逊
S3
的多部分
上传
、
、
、
、
我们目前有一个小的网络应用,其中的一部分是文件
上传
。目前,我们在客户端使用Plupload,启用
分块
,允许
上传
大型文件。这些文件保存在应用服务器
上
,当它们出现时,这些块就会被追加。现在我们要搬到
亚马逊
S3
。在
s3
上
,我试着使用Presinged
上传
文件,但是只有5GB的限制。
浏览 5
提问于2022-01-31
得票数 1
2
回答
在
亚马逊
S3
中替换
上传
文件的字节数
、
我知道,为了使用Multipart
将
文件
上传
到
亚马逊
S3
,使用说明如下: 我如何替换一个
上传
文件的字节(比如,在4-1523之间)?是否需要使用
分块
上传
来实现这一点?
浏览 1
提问于2016-06-28
得票数 1
2
回答
带有plupload和Rails 3的
亚马逊
S3
多部分
上传
、
、
、
、
亚马逊
有多部分
上传
功能,您可以在其中发送一个文件块,并将其组装到
S3
上
。这允许一些不错的简历,比如
上传
到
S3
的功能。从另一个问题上我得到了一个很好的链接: 当插件启动
时
,我们能做一个事件吗?
将
ajax请求附加到用ID完成的块 在服务器
上
浏览 4
提问于2011-04-26
得票数 15
1
回答
libs3
分块
上传
我使用libs3在
S3
上
存储来自我的C++项目的文件。我偶然看到一篇文章,说
亚马逊
支持在
S3
上进行
分块
上传
。但是我在libs3中找不到这个特性。 任何人都能帮上忙。
浏览 1
提问于2013-01-07
得票数 3
1
回答
S3
签名URL和
分块
上传
、
、
我正在使用签名的URL和Jets3t库访问
S3
。我已经在inputstream
上
构建了一个cipherStream,这样在
上传
过程中也可以动态地进行加密。是否可以使用
分块
上传
功能,
将
文件分成多个
分块
并行
上传
到
S3
。 Jets3t是否提供了处理此类情况的支持?
浏览 2
提问于2012-04-24
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
创意云渲染客户端效果图版4.0.9使用参考教程
企业大文件分块传输可以减少带宽占用吗?
Hadoop 存储-HDFS介绍
HDFS概念笔记
二、FastDFS架构
热门
标签
更多标签
云服务器
ICP备案
实时音视频
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券