腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(2019)
视频
沙龙
4
回答
在
亚马逊
网络服务
中将pickle文件写入
s3
存储
桶
python
、
pandas
、
amazon-web-services
、
amazon-s3
我正在尝试
将
一个
熊猫
数据
帧
作为一个pickle文件写入
到
亚马逊
网络服务
的
s3
存储
桶
中
。我知道我可以
将
dataframe new_df作为csv写入
到
s3
存储
桶
中
,如下所示: bucket='mybucket' csv_buffer
浏览 39
提问于2018-03-06
得票数 24
回答已采纳
1
回答
在
亚马逊
网络服务
s3
中
,如何在
单个
存储
桶
中
实现文件夹级别的安全性?
amazon-s3
、
bucket
我对
亚马逊
网络服务
s3
非常天真。最近,我们需要
使用
亚马逊
网络服务
的
s3
存储
桶
来
存储
大文件。我想知道,在
s3
中
,如何在
单个
存储
桶
中
实现文件夹级别的安全性?
S3
会处理这件事吗?若有,以甚麽方法?他们对
数据
进行加密和解密,但这还不够。我们是一个服务提供商,其中
多个
浏览 37
提问于2020-06-19
得票数 0
回答已采纳
4
回答
如何在Python中
使用
Pandas从
s3
存储
桶
中
读取csv文件
python
、
amazon-web-services
、
pandas
、
amazon-s3
我正在尝试
使用
以下代码
将
位于
亚马逊
网络服务
S3
存储
桶
中
的CSV文件作为pandas
数据
帧
读取到内存
中
:import boto data = pd.read_csv('
s3
:/example_bucket.s3-website-ap-southeast-2.amazonaws.com/data_1.csv
浏览 1
提问于2015-06-13
得票数 18
1
回答
使用
Lambda
将
S3
数据
从一个
亚马逊
网络服务
账户推送到另一个
S3
存储
桶
amazon-web-services
、
amazon-s3
、
aws-lambda
我的用例是不断地
将
数据
从一个
亚马逊
网络服务
账户
S3
桶
推送到另一个
亚马逊
网络服务
账户
S3
桶
。跨账号推送。 我正在
使用
lambda来完成这项工作。假设在
亚马逊
网络服务
账户A
中
,
数据
经常从某些来源落地
到
S3
存储
桶
中
。我需要创建一个
S3</
浏览 1
提问于2019-06-11
得票数 0
2
回答
亚马逊
S3
计费类似于请求者付费,但用于
存储
amazon-web-services
、
amazon-s3
亚马逊
网络服务
是否有功能将
亚马逊
S3
存储
桶
的账单发送到另一个
亚马逊
网络服务
账户?我见过请求者付费,但我只对
存储
费感兴趣。我们正在构建一个归档应用程序,该应用程序
将
数据
从中央源复制
到
亚马逊
S3
存储
桶
中
。存档应用程序将在中心应用程序所在的同一aws帐户
中
运行。每个团队都有自己的A
浏览 2
提问于2021-10-21
得票数 0
1
回答
Flink Streaming AWS
S3
并行读取
多个
文件
amazon-s3
、
apache-flink
、
flink-streaming
、
flink-cep
我是Flink的新手,我的理解是遵循API调用
将
并行读取给定
S3
存储
桶
路径的文件。我们
将
日志文件
存储
在
S3
中
。要求是为
多个
客户端请求提供服务,以便
使用
时间戳从不同的文件夹读取
数据
。 对于我的用例,为了服务
多个
客户端请求,我正在评估
浏览 49
提问于2017-07-18
得票数 2
2
回答
亚马逊
S3
传输加速如何加速
S3
文件传输?
amazon-web-services
、
amazon-s3
我不清楚
亚马逊
S3
传输加速是如何加速
S3
文件传输的。假设us-east-1
中
有fileA,英国的用户A,并且有
到
该fileA
S3
端点的链接。下面是我对它的工作原理的理解:在启用
亚马逊
S3
传输加速后,用户A会点击指向fileA的链接,这可能需要7秒钟。我不清楚
亚马逊
是如何
浏览 10
提问于2020-07-13
得票数 0
1
回答
使用
数据
管道
将
一个
s3
存储
桶
中
的特定
数据
复制
到
另一个
存储
桶
中
amazon-web-services
、
amazon-s3
、
amazon-data-pipeline
我已经在
亚马逊
网络服务
的
s3
存储
桶
中上传了一个JSON文件,由于JSON文件是以键和值的形式存在的,所以我只想
使用
亚马逊
网络服务
的
数据
管道
将
特定的密钥
数据
复制
到
其他
s3
存储
桶
中
。要执行此操作,我应该在管道定义
中
添加什么。任何有线索的人都会非常感激。谢谢!
浏览 4
提问于2017-02-14
得票数 0
1
回答
在
亚马逊
网络服务
的
S3
存储
桶
上组合7z块
python
、
amazon-web-services
、
amazon-s3
、
7zip
我已经
使用
7zip
将
一个文件压缩成几个块: 将以下内容保存在
亚马逊
网络服务
S3
存储
桶
中
: pic.7z.001pic.7z.003pic.7z.005WANT -以下内容也保存在
亚马逊
网络服务
S3
存储
桶
中
: first step: pic.7z second step: a folder calle
浏览 15
提问于2020-04-24
得票数 1
回答已采纳
3
回答
亚马逊
S3
上的文件灾难恢复?
backup
、
amazon-s3
、
disaster-recovery
不久前,我们的服务器已经超出了磁盘空间,所以我决定将大部分用户生成的内容转移到
亚马逊
S3
上。在节省空间,降低带宽成本和
将
请求从我们的服务器上分散出去方面都有明显的好处,我们的服务器也处理Apache和MySQL。到目前为止,我们还没有遇到任何问题,但我意识
到
,如果
亚马逊
倒闭,我们就会完蛋(我唯一的备份是那些图像
中
的前50 is左右,其中许多将被删除/更改等)。我不想把图像下载到我的服务器上(即使我有足够的磁盘空间),也不能把整个
存储
桶
下载到我
浏览 1
提问于2010-03-11
得票数 5
回答已采纳
1
回答
S3
:
将
文件放入
多个
目标
存储
桶
的出站适配器
spring
、
spring-integration
、
spring-integration-sftp
、
spring-integration-aws
我有一个spring boot应用程序,我尝试
使用
单个
S3
出站适配器
将
一个文件放入
多个
S3
存储
桶
中
。我想知道是否有可能
使用
spring-integration-aws本身
使用
单个
出站适配器
将
文件放入
多个
存储
桶
中
(不
使用
亚马逊
网络服务
-sdk
浏览 2
提问于2018-10-24
得票数 0
2
回答
Google云平台迁移到
S3
/Redshift
amazon-s3
、
google-cloud-platform
、
google-bigquery
、
amazon-redshift
在Python语言中有没有通过编程的方式在
S3
中
从谷歌云平台获取
数据
?我的最终目标是
将
Google Big Query
中
的
数据
放到Redshift
中
。
浏览 9
提问于2019-03-11
得票数 1
回答已采纳
20
回答
亚马逊
网络服务
S3
在两个
存储
桶
之间复制文件和文件夹
amazon-s3
、
copy
、
amazon-web-services
我一直在寻找一种工具,可以帮助我
将
亚马逊
网络服务
S3
存储
桶
中
的内容复制
到
第二个
亚马逊
网络服务
S3
存储
桶
中
,而无需先将内容下载到本地文件系统。我曾尝试
使用
亚马逊
网络服务
S3
控制台复制选项,但这导致一些嵌套文件丢失。 我已经尝试
使用
传输应用程序(由于恐慌)。du
浏览 1
提问于2012-02-15
得票数 124
回答已采纳
2
回答
gsutil是否支持从Azure Storage复制文件?
google-cloud-storage
、
azure-storage
、
gsutil
gsutil支持
将
文件从
S3
复制
到
GCS,如本blog中所述。gsutil工具是否也支持从Azure复制文件?
浏览 16
提问于2019-04-17
得票数 0
回答已采纳
1
回答
不
使用
AWS版本控制
存储
重复文件
python-3.x
、
amazon-web-services
、
amazon-s3
、
aws-cli
、
versioning
我正在尝试
将
大量文件上传到
亚马逊
网络服务
s3
存储
桶
。我还需要启用文件版本控制来备份,以防某些文件被意外覆盖。然而,当我上传已经存在的完全相同的文件时,如果当前启用了
亚马逊
网络服务
s3
版本控制,
亚马逊
网络服务
将
存储
完全相同文件的两个版本。这是一个问题,因为我会多次上传相同的文件,在这种情况下,我希望版本控制不会被用来防止由于
存储
同一对象的
多
浏览 1
提问于2020-12-05
得票数 1
2
回答
将
JSON buffer转换为.gz
python
、
json
、
pandas
、
amazon-s3
、
gzip
我有以下代码,
将
熊猫
数据
帧
保存到内存
中
的json,然后将其加载到
亚马逊
网络服务
S3
: json_buffer = StringIO() df.to_json(json_buffer, orient='conn.put_object(Body=json_buffer.getvalue(), Bucket=s3_bucket, Key=f"{target_path}{json_file_name}") 我要做的就是在
将
浏览 21
提问于2021-01-26
得票数 1
回答已采纳
2
回答
将
亚马逊
网络服务
s3
存储
桶
移动到另一个
亚马逊
网络服务
账户
amazon-s3
、
awss3transfermanager
AWS是否提供
将
存储
桶
从一个帐户复制
到
另一个帐户的方法?出于开发目的,我正在
将
几个文件上传到我自己的
存储
桶
中
,但现在我想将
存储
桶
切换到客户端帐户。 有什么可能的解决方案来做到这一点呢?
浏览 18
提问于2017-03-02
得票数 2
4
回答
将
RDS
数据
导出到
S3
/Glacier
oracle
、
amazon-web-services
、
amazon-s3
、
rds
、
amazon-glacier
我想将
数据
从Oracle RDS导出到
S3
,然后将其移动到Glacier。我的最终目标是
将
存储
在RDS
中
的
数据
备份
到
S3
和Glacier,以满足合规性要求。谁能建议一下实现它的最好的方法。
浏览 1
提问于2015-12-28
得票数 2
3
回答
如何
将
文件从
S3
复制
到
Amazon EMR HDFS?
amazon-s3
、
hadoop
、
hive
、
hdfs
、
emr
我在EMR上运行hive,需要将一些文件复制
到
所有EMR实例。据我所知,一种方法是
将
文件复制
到
每个节点上的本地文件系统,另一种方法是
将
文件复制
到
HDFS,但是我还没有找到直接从
S3
复制
到
HDFS的简单方法。 做这件事最好的方法是什么?
浏览 1
提问于2011-09-20
得票数 27
回答已采纳
1
回答
使用
亚马逊
网络服务
S3
存储
桶
将
多个
对象连接
到
单个
熊猫
数据
帧
中
python
、
pandas
、
amazon-s3
、
boto3
我正在尝试
使用
我在上一个问题Reading multiple csv files from
S3
bucket with boto3
中
找到的函数,但是我总是得到ValueError: DataFrame代码如下:
s3
= boto3.resource('
s3
',aws_access_key_id=ACCESS_KEY, aws_secret_access_key=SECRET_KEY) bucket
浏览 3
提问于2020-01-04
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
AWS发布新服务Amazon S3 Storage Lens
AWS 瘫痪:DNS 被 DDoS 攻击了 15 个小时
Gutenberg:Netflix推出的一项数据集发布订阅服务
浅谈云上攻防——Web应用托管服务中的元数据安全隐患
亚马逊发布新的命令行工具AWS Copilot
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券