腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
从
指定
的
S3
目录
列表
中
检索
内容
amazon-web-services
、
go
、
amazon-s3
有没有办法只调用一次云
S3
bucket,就可以
从
指定
的
目录
列表
中
检索
到特定API下所有文件
的
列表
?例如,假设我
的
S3
云服务具有以下结构: A/ XXX/ BB/ /EMPTY DD/ XXX/ 并且我
浏览 19
提问于2019-06-12
得票数 0
回答已采纳
1
回答
文件上载自定义
node.js
、
file-upload
、
express
Expressjs有bodyParser中间件,它可以处理文件上传,甚至可以将它们存储在选项中
指定
的
目录
中
。但是在我
的
应用程序
中
,我想将文件存储在亚马逊
S3
中
,所以我基本上想直接将文件流到
S3
,而不必在本地存储它。 但问题是文件
的
验证。我怎么能确定这些文件都是图像。检查
内容
类型是不够好
的
选项,因为可以伪造。,我想知道,
从
安全性
的
角度来看,在将文件
浏览 4
提问于2013-07-12
得票数 0
1
回答
使用存储类Glacier访问
S3
对象
java
、
amazon-web-services
、
amazon-s3
、
amazon-glacier
我编写了一个(java)软件,它从
S3
桶下载对象(档案),在本地提取数据并对其进行操作。几天前,我设置了
S3
中
“文件夹”中所有对象
的
生命周期策略,以便在创建2天后自动移动到冰川,这样我就有时间在数据归档之前进行DL和提取数据。到目前为止,我使用了以下代码来访问我
的
S3
数据: public static void downloadObjectFromBucket(String bucketName, String pathToObjectAWS控制台中
的
某些设置?我不清楚
浏览 1
提问于2016-05-06
得票数 4
回答已采纳
1
回答
如何使用AWS使AWS
S3
冰川文件可用于递归
检索
amazon-s3
、
aws-cli
、
amazon-glacier
如何使存储在AWS
S3
冰川上
的
文件可以
从
CLI递归
检索
?我运行以下命令:并为每个文件获取以下行: warning: Skipping file
s3
://mybucket/remotepath/subdir/filename.xml.See
浏览 10
提问于2022-04-14
得票数 0
1
回答
键: s3.put_object()方法
的
‘
s3
’参数是什么?
python
、
amazon-web-services
、
angular
、
amazon-s3
、
boto
我正在使用将工件上传到
s3
存储桶,但不知道put_object()方法
的
Key参数是什么: Body=open(artefact, 'rb'),
浏览 0
提问于2016-10-26
得票数 1
20
回答
从
S3
桶
中
从
boto3
检索
子文件夹名称
python
、
amazon-web-services
、
amazon-s3
、
boto3
使用boto3,我可以访问我
的
AWS
S3
桶:bucket = s3.Bucket('my-bucket-name') 现在,存储桶包含文件夹first-level我需要知道我正在做
的
另一项工作
的
这些子文件夹
的
名称,我想知道我是否可以让boto3为我
检索
这些子文件夹。,而不是第二级时间戳
目录
,实际上我得到了一个
列表
,其中包含
浏览 26
提问于2016-03-04
得票数 160
回答已采纳
1
回答
如何使用python
中
的
数据范围
从
s3
桶
中
获取和迭代数据
python
、
amazon-web-services
、
date
、
amazon-s3
我有一个
s3
桶,它将在文件
中
包含以名称作为日期
的
数据。我能够在一天内获取数据,方法是将日期作为前缀值
的
输入,因为数据将在该文件
中
。投入: 2022/10/15
s3
= boto3.client('
s3
', access_key, secret_key)print(response) 但
浏览 4
提问于2022-10-17
得票数 0
2
回答
如何在使用ARC库(Elixir)更改存储
目录
后将存储
的
图像迁移到
S3
中
amazon-s3
、
elixir
、
phoenix-framework
我使用arc / arc_ecto库在
S3
上存储媒体。 最近,我不得不更改存储
目录
。所以我修改了函数“storage_dir”以适应我
的
S3
新路径,如下所示: def storage_dir(_version, {_file, %Media{} = scope}) doend 现在,所有新创建
的
媒体都存储在新
目录
中
,我可以正确地
浏览 25
提问于2020-01-10
得票数 1
1
回答
根据对象内
的
JSON数据删除特定
的
S3
对象
python
、
json
、
amazon-web-services
、
amazon-s3
、
pyspark
我有一个根据键值删除特定
S3
文件
的
用例。我想从这个ID为
S3
的
101路径
中
删除所有json文件。我怎样才能用火花放电来实现这个呢?
浏览 2
提问于2022-02-14
得票数 -1
1
回答
如何有选择地
从
AWS
S3
中
读取Parquet文件作为Dask数据帧?
python
、
dataframe
、
amazon-s3
、
dask
我想阅读
从
AWS
S3
中
选择
的
Parquet文件
列表
。我知道如何通过
指定
这个键来读取
目录
中
的
所有文件。但是,我只想根据一些先前
的
用户输入来读取特定
的
文件
列表
。import dask.dataframe as dd df = dd.read_parquet('
s3</
浏览 0
提问于2019-08-26
得票数 0
回答已采纳
1
回答
KeyMarker和前缀有什么区别?
amazon-web-services
、
amazon-s3
我试图获取所有对象,包括同一对象
的
不同版本。根据
的
说法,它有Prefix和KeyMarker。我看不出他们之间有什么特别的区别。上面写着像下面这样,
浏览 0
提问于2020-08-10
得票数 1
回答已采纳
1
回答
为亚马逊
S3
存储桶关键字创建索引
amazon-s3
索引
S3
键
的
一般策略是什么?这样可以查询键吗?知道一个事务
中
不能有多个
S3
操作,那么就不可能以这种方式创建索引:indexObject(...)由于这里
的
方法putIndex不能保证与前一个方法在同一个事务
中
,因此连接或其他连接错误将意味着第一个操作将不会有索引。
浏览 0
提问于2020-06-18
得票数 0
1
回答
无需下载即可读取
s3
存储桶上
的
文件
内容
python
、
r
、
amazon-s3
我是亚马逊网络服务和
s3
的
新手,所以请原谅,如果这看起来我还没有尝试过任何东西。我想遍历
目录
和文件,读取文件,并在不下载
的
情况下
从
可公开访问
的
s3
存储桶:
s3
://cgl-rnaseq-recompute-fixed/
中
检索
特定
的
行。我只希望能够在文件
内容
上执行基本任务,如grep/cat。 例如,我应该能够
从
s3<
浏览 2
提问于2016-08-06
得票数 1
1
回答
亚马逊
S3
暂存
目录
与什么相关?
amazon-web-services
、
amazon-s3
、
tableau-api
、
amazon-athena
我试图理解"
S3
暂存
目录
“
的
相关性。为了将Tableau与Amazon连接起来,它是一个强制字段,但是更改它不会影响
目录
和数据库
列表
(在成功签名之后),因为我尝试了针对同一组访问密钥ID和秘密访问密钥
的
多个
目录
。不仅如此,它还允许在其中放置任意
目录
路径(添加垃圾路径)。签名仅基于有效
的
凭据传递。
浏览 1
提问于2020-02-19
得票数 1
1
回答
获取
目录
列表
的
方法是subprocess.Popen还是os.listdir,哪一种更快
python
、
python-2.7
我想
检索
目录
中
的
文件
列表
。使用subprocess.Popen或os.listdir最快
的
方法是什么?该
目录
包含10000
的
文件。这必须递归地完成,以便
从
目录
及其子
目录
中
检索
列表
。我知道我们可以使用os.walk来
检索
目录
的
内容
,但是os.walk就是不能完成我应该做
浏览 0
提问于2012-09-28
得票数 0
1
回答
Boto3:可以并行化list_objects_v2 API
的
分页器吗?
amazon-web-services
、
amazon-s3
、
boto3
我有一个名为
s3
的
存储桶,名为my-bucket,并且有一些文件存储在以下结构
中
: |----- subfolder_1 ----- uniqueId_1我
的
目标是得到所有唯一
的
"uniqueIds“,我不在乎时间戳。然而,下面的代码花了我大约5分钟
的
时间才把所有的uniqueIds都放在一个"subfolder_1“下面。import time paginator = boto3.client(&quo
浏览 4
提问于2022-03-17
得票数 0
1
回答
如何在
S3
中
使用雾列出文件夹
中
的
所有文件
ruby
、
amazon-s3
、
fog
如何使用Fog列出特定
S3
“
目录
”
中
的
所有文件? 我知道
S3
不会将文件存储在文件夹
中
,但我需要一种方法来将返回
的
文件限制在特定
的
“文件夹”
中
,而不是
检索
存储桶
中
的
整个
列表
。
浏览 0
提问于2013-04-12
得票数 23
回答已采纳
2
回答
亚马逊
S3
/两个存储桶之间
的
合并
amazon-web-services
、
amazon-s3
存储桶b包含a
中
80%
的
对象。 我想将a
中
剩余
的
20%对象复制到b
中
,而不是将这些对象下载到本地存储。我看到了,但正如我所理解
的
,它将所有对象
从
a复制到b,但正如我所说
的
,我希望它只复制a
中
存在但b
中
不存在
的
文件。
浏览 0
提问于2015-08-11
得票数 2
2
回答
是否可以使用aws复制不同名称
的
aws
s3
文件夹?
amazon-web-services
、
api
、
amazon-s3
、
copy
、
aws-php-sdk
我想用php aws sdk复制一个不同名称
的
s3
文件夹。有没有办法做到这一点。我没有任何代码来复制文件夹,而我只有个人文件。
浏览 21
提问于2018-08-06
得票数 0
4
回答
将
目录
结构完整地复制到AWS
S3
桶
中
amazon-web-services
、
amazon-s3
我希望使用AWS
S3
cli将完整
的
目录
结构复制到
S3
桶
中
。我使用
的
命令是: aws
s3
cp --recursive ./logdata/
s3
://bucketn
浏览 0
提问于2015-04-14
得票数 75
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
OpenStack 基础介绍04——各组件综述之镜像、存储和认证
Python 文件与目录操作方法总结
手把手教你用1行Python代码实现FTP服务器-Pyftpdlib
轻松构建 PyTorch 生成对抗网络(GAN)
超级简单的一句python代码搭建FTP服务
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券