腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
无法
使用
boto3
列出
Scaleway
上
的
存储
桶
对象
python-3.x
、
amazon-web-services
、
amazon-s3
、
boto3
我有一个s3
存储
桶
(在
scaleway
上
),我正在尝试简单地
列出
该
存储
桶
中包含
的
所有
对象
,
使用
boto3
s3客户端,如下所示: s3 = boto3.client('s3',其次,我尝试
使用
boto3
Resource而不是Client来实现相同
的
功能,如下所示: session = boto3.Session( r
浏览 181
提问于2020-11-11
得票数 0
回答已采纳
1
回答
boto3
list_objects和list_objects_v2有什么区别?
python
、
amazon-s3
、
boto3
我正在尝试
使用
boto3
在python中
列出
亚马逊s3
存储
桶
中
的
对象
。
boto3
似乎有两个函数用于
列出
存储
桶
中
的
对象
:list_objects()和list_objects_v2()。两者
的
区别是什么?
使用
一个比
使用
另一个有什么好处?
浏览 40
提问于2016-05-31
得票数 28
回答已采纳
2
回答
如何正确
使用
谷歌云
存储
python库中
的
create_anonymous_client()函数来访问公共
存储
桶
?
python
、
google-cloud-platform
、
google-cloud-storage
我在google云
存储
上
创建了一个可公开
列出
的
存储
桶
。如果我尝试在浏览器中
列出
存储
桶
对象
,我可以看到所有的键。我尝试
使用
create_anonymous_client()函数,以便可以在python脚本中
列出
存储
桶
键。它给了我一个例外。我到处寻找,但仍然找不到正确
的
方法来
使用
这个函数。附加查询:是否可以
浏览 1
提问于2018-06-28
得票数 6
1
回答
S3到
使用
直接传输(web接口)
amazon-s3
、
google-cloud-storage
、
google-cloud-platform
文件传输服务似乎在拒绝AWS
的
有效凭据?我有一个s3
桶
::>>> s3://my name/icd_ to _ccs.csv尝试
使用
访问密钥和秘密设置传输服务。
使用
boto3
和aws命令行访问本地机器上相同文件
的
密钥和秘密工作很好,
无法
使用
云控制台传输工具提供正确
的
foo。我尝试过在原始
的
“
桶
”窗口中
使用
和不带文件名
的</em
浏览 2
提问于2016-04-27
得票数 2
回答已采纳
2
回答
使用
S3
Boto3
列出
AWS
桶
中
的
所有
对象
及其
存储
类
python-3.x
、
amazon-web-services
、
amazon-s3
、
boto3
我有一个需求,需要
列出
s3
桶
中
的
所有
对象
及其
存储
类。 如何
使用
Python和
Boto3
实现这一目标?我用Python 3.7。
浏览 8
提问于2021-02-05
得票数 0
1
回答
列出
AWS S3
桶
的
内容
amazon-web-services
、
amazon-s3
我有多个aws帐户,并且希望从多个帐户
列出
多个S3
存储
桶
的
存储
桶
内容,任何一个都有可能
的
脚本吗??
使用
boto3
或awswrangler 我试图
列出
S3
的
内容。
浏览 3
提问于2022-11-02
得票数 -2
1
回答
使用
boto3
在s3中
列出
启用了版本
的
存储
桶
python
、
amazon-web-services
、
amazon-s3
、
boto3
、
s3-bucket
如何
列出
所有打开版本控制标志
的
s3
存储
桶
名称?我在下面给出了我
的
python代码片段。import
boto3
s3client = boto3.client('s3'
浏览 16
提问于2017-12-21
得票数 1
1
回答
使用
文件夹结构遍历S3
存储
桶
中
的
文件
python-3.x
、
amazon-s3
、
amazon-ec2
我有一个S3
桶
。在
存储
桶
中,我们有一个2018年
的
文件夹,以及我们为每个月和每一天收集
的
一些文件。例如,2018\3\24、2018\3\25等等。 我们没有将日期放在每个days
存储
桶
中
的
文件中。基本
上
,我希望遍历
存储
桶
,并
使用
文件夹结构根据文件
的
“日期”对每个文件进行分类,因为我们需要将其加载到不同
的
数据库中,并且需要一种方法来识别。我已经阅
浏览 2
提问于2018-03-26
得票数 5
回答已采纳
1
回答
使用
s3导航到
Boto3
中
的
子文件夹,而不访问ObjectList
python
、
python-3.x
、
amazon-web-services
、
amazon-s3
、
boto3
基本
上
,我试图用s3从
boto3
桶
中检索文件。这一切过去都能工作,但是现在s3
存储
桶
的
管理员决定撤销父文件夹
的
权限,因为这个
存储
桶
是与许多公司共享
的
,这些公司
的
数据是我们
无法
访问
的
(原因很明显)。基本
上
,这就是我们过去获取文件
的
方式: objects = s3_bucket.objects.filter(Prefix=s3_fo
浏览 3
提问于2021-07-07
得票数 1
3
回答
根据搜索模式
列出
亚马逊S3文件夹下所有带有文件名
的
xml文件
java
、
c#
、
xml
、
amazon-s3
我需要在运行时接受搜索字段,然后搜索
存储
在特定亚马逊网络服务s3
存储
桶
下
的
xml文件,并在控制台上显示文件名。
浏览 35
提问于2019-01-23
得票数 1
2
回答
无法
从S3
桶
访问aws
的
jupyter笔记本
amazon-web-services
、
amazon-s3
、
deep-learning
、
jupyter-notebook
、
amazon-sagemaker
我要训练一个aws
的
模特。我
无法
从S3
桶
中访问木星笔记本中
的
sagemaker数据。我
的
桶
名是"riceleaf“--
桶
中有四个文件夹,名为s1、s2、s3、s4,每个文件夹包含330个图像,名为1.jpg等等。它是在美国东部地区创建
的
。水桶是私人
的
。我所做
的
一种方法是访问
对象
,当我显示密钥时,它会显示1.jpg等等。但当我试图打开那张照片
的
时候,它不起作用了。所以我想我
浏览 21
提问于2022-03-21
得票数 0
1
回答
从深层S3路径层次结构中
的
CSV读取Dask DataFrame
amazon-s3
、
boto3
、
boto
、
dask
、
dask-distributed
我正在尝试在Dask DataFrame中读取S3中
的
一组CSV。
存储
桶
具有很深
的
层次结构,并且还包含一些元数据文件。真正
的
问题是,s3fs.glob在尝试解析具有那么多星星
的
球状图案时挂起了。我尝试用boto3.list_objects计算
的
显式列表替换glob,但它最多只能返回1000条路径;我得到
的
路径要多出几个数量级。如何有效地将这组文件指定到dask.dataframe.read_csv 重新定义这个问题
的
一种方法可能是:如
浏览 22
提问于2019-06-12
得票数 2
回答已采纳
1
回答
我可以将提供程序更改为
使用
aws /吗?
php
、
api
、
sdk
、
aws-php-sdk
我正在搜索一个库PHP,以便只
使用
S3协议(而不是亚马逊
的
AWS S3 )。但是,我可以更改提供程序来
使用
它吗? 例如:我可以管理
Scaleway
的
S3服务器吗?卡夫?
浏览 2
提问于2021-01-05
得票数 0
1
回答
使用
boto3
从公共
存储
桶
下载
python
、
amazon-web-services
、
amazon-s3
、
boto3
我试图在AWS上
列出
公共
存储
桶
中
的
文件,但我得到
的
最好结果是
列出
了我自己
的
存储
桶
和我自己
的
文件。我假设
boto3
正在
使用
我在系统中配置
的
凭据来
列出
我
的
东西。我如何强制它从特定
的
存储
桶
中
列出
,而不是从我自己
的
存储
桶<
浏览 4
提问于2017-02-07
得票数 5
回答已采纳
3
回答
Amazon AWS Cognito和Python建立亚马逊网络服务连接并将文件上传到
Boto3
python
、
amazon-web-services
、
amazon-s3
、
boto
、
boto3
我正在尝试
使用
AWS cognito服务来验证和上传文件。我已经获得了我
的
regionType、identityPool、亚马逊网络服务账户ID和UnAuthRole。我还知道生产和开发
存储
桶
的
名称。我做错了什么?如何
使用
认知id建立S3连接? 下面是我
的<
浏览 2
提问于2015-03-11
得票数 8
回答已采纳
3
回答
如何在S3
桶
中迭代文件?
python
、
amazon-web-services
、
amazon-s3
、
boto3
我有大量
的
文件(>1,000个)
存储
在一个S3
桶
中,我想迭代它们(例如,在一个for循环中),以便
使用
boto3
从它们中提取数据。但是,我注意到,根据,Client类
的
list_objects()方法只
列出
最多1000个
对象
:Out[1
浏览 6
提问于2017-05-29
得票数 20
回答已采纳
1
回答
用pyspark/python在AWS S3上
列出
目录中
的
文件
python
、
amazon-s3
、
pyspark
以下是我
的
问题:aws s3 ls 's3://datastore/L2/parquet'
使用
python做类似的事情不起作用。我从哪里开始澄清我
的
困惑?任何回答,除了‘在cs单身汉’将是有帮助
的
。
浏览 1
提问于2017-03-29
得票数 1
回答已采纳
2
回答
以aws s3文件夹
对象
作为ec2实例中
的
输入参数,运行位于计算机上
的
python脚本
python-3.x
、
amazon-web-services
、
amazon-s3
、
amazon-ec2
$python3 script.py文件夹 我想知道如何
使用
位于aws s3
桶
中
的
文件夹作为输入来运行这个脚本,而不必下载该文件夹,因为它非常大。我相信您必须
使用
ec2实例,但不清楚整个过程,特别是如何将s3文件夹
对象
作为python
的
输入参数。
浏览 5
提问于2019-09-17
得票数 1
回答已采纳
2
回答
AWS
Boto3
仅
列出
特定文件类型以避免分页
amazon-web-services
、
boto3
我正在尝试
列出
s3
存储
桶
中
的
所有csv文件,以便为另一个进程做准备。但是,通过
使用
boto3
库
的
list_objects_V2函数,最多返回1.000个
对象
。我
的
存储
桶
有10.000张jpg图片和500csv文件。 我想我可以通过传递下一个令牌来
使用
分页。然而,我认为他们必须以某种方式将响应限制为仅csv文件,这样我就不会超过最大1.000个项目的限制。任何想法都是值得欣赏
浏览 0
提问于2021-06-14
得票数 0
3
回答
如何
使用
AWS SDK for Python递归
列出
AWS S3
存储
桶
中
的
文件?
python
、
amazon-web-services
、
amazon-s3
、
ls
、
boto3
我正在尝试复制AWS CLI ls命令,以递归方式
列出
AWS S3
存储
桶
中
的
文件。例如,我将
使用
以下命令递归
列出
"location2“
存储
桶
中
的
所有文件。aws s3 ls s3://location2 --recursive aws s3 ls s3://location2 --recursive
的
(即
boto3
)等效项是什么
浏览 3
提问于2016-05-02
得票数 3
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
“星”产品”XSKY发布 S3 Console,助力企业轻松玩转非结构化数据可视化管理
如何使用桶模式进行分页——第二讲
浅谈云上攻防——Web应用托管服务中的元数据安全隐患
史上最全的Ceph介绍、原理、架构
虽远隔天涯,却近若比邻!
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券