我需要将文件从一个文件夹复制到唯一的亚马逊S3存储桶中的另一个文件夹。然而，由于文件大小的限制，我不能简单地从AWS SDK S3类调用copyObject方法，因为它会使我的Lambda函数超时。这就是为什么我试图创建一个S3 Batch Operations作业来移动这个文件，但是当我尝试这样做的时候，我得到了一个Invalid job operation错误。Location: {
ETag: 'dbe4a392
浏览 14提问于2021-08-27得票数 0
这些拼图文件存储在亚马逊网络服务的S3上。在不传输文件到GCP的情况下，可以编写可以在亚马逊网络服务S3存储的拼花面板文件数据集上运行的BigQuery。
浏览 0提问于2020-03-03得票数 0
1回答
我们目前正在使用AWS服务数据湖向云移动，并尝试使用sqoop作业将数据从外部源关系数据库管理系统(Bucket)加载到亚马逊s3登陆层(Bucket)，然后使用Informatica将数据加载到亚马逊S3中的不同层(桶)。我不知道如何在S3中实现Delta /SCD类型。在亚马逊的S3桶中创建对象之后，是否有可能更改它，或者我们是否必须继续在s3桶中作为对象创建
浏览 1提问于2018-10-21得票数 1
回答已采纳
我使用亚马逊网络服务S3预签的网址从客户端(移动应用程序)上传图片。我想阻止用户上传大文件。有没有办法限制上传文件的大小？
谢谢
浏览 3提问于2013-06-26得票数 27
回答已采纳
我正在寻找一个服务上传视频和图像从我的移动应用程序(前端)。我听说过亚马逊的S3和CloudFront。我正在寻找一个存储它们的服务，并且还可以检查它们是否符合某些条件(例如，每张图片的最大文件大小为3MB )，如果文件不符合标准，则返回一个错误给客户端。亚马逊S3或CloudFront提供这种服务吗？
浏览 2提问于2016-04-18得票数 0
回答已采纳
如何在流模式下将数据从AWS加载到Google BigQuery？描述:我有RDS ( Server)中的数据，并希望将这些数据实时加载到Google BigQuery中。
浏览 9提问于2020-02-18得票数 1
回答已采纳
3回答
我试图对部署到AWS的流数据/分析应用程序进行定价，并考虑使用Kinesis将数据转储到S3中。
我的问题是，当计算出S3的成本时，我需要弄清楚我需要多少投资者。因此，我知道Firehose缓冲数据，然后刷新到S3，但是我不清楚它是否会写一个单一的“文件”，所有的记录都会累积到那个时候，或者它是否会单独地写每条记录。因此，假设我根据记录的大小将缓冲区大小/间隔设置为最佳数量，那么S3 PUT的数量是否仍然等于记录的数量或防火墙执行的刷新次数？
浏览 6提问于2015-11-03得票数 6
回答已采纳
1回答
我在Ubuntu 20.04上安装了SQL Server 2017 Standard，我想使用SQL Server代理作业自动执行备份过程。此作业将创建备份文件，然后将其上载到亚马逊网络服务S3。要将.bak文件复制到亚马逊网络服务S3，我想使用亚马逊网络服务工具PowerShell (我已经安装在EC2实例上)，但是我在SQL Server作业中看不到"PowerShell“任务类型。我可以做些什么来将P
浏览 21提问于2020-12-13得票数 0
回答已采纳
我有两个大文件，已经将它们上传到一个名为"ccssdd“的亚马逊数据桶中，并创建了一个名为S3的文件夹: data/friendships.xml s.xml data/users.xml
用户的结构是我需要编写一个作业jar来在Amazon Elastic Map Reduce上运行它来计算:查找每个用户的朋友数量。1_我知道我可以在eclipse中运行我的应用程序来生成.jar作业文件，但是我不知道我应该下载什么库并将
浏览 0提问于2013-11-17得票数 1
我正在使用亚马逊网络服务创建一条数据传输线，我的数据存储在亚马逊S3存储桶中，我计划使用胶水爬虫在前缀下抓取数据以提取元数据，并在胶水作业之后执行ETL并将数据保存到另一个存储桶中。有没有可能通过公共互联网将数据从亚马逊S3移动到胶水？ 是否有任何指向aws文档的链接，用于解释AWS服务在它们之间传输数据时使用哪些网络？
浏览 18提问于2021-06-29得票数 1
我对亚马逊网络服务s3非常天真。最近，我们需要使用亚马逊网络服务的s3存储桶来存储大文件。我想知道，在s3中，如何在单个存储桶中实现文件夹级别的安全性？S3会处理这件事吗？若有，以甚麽方法？如何对AWS存储桶中的文件夹进行安全隔离？对于一个存储桶，将有单个访问密钥，但是存储桶中的文件夹又如何呢？
浏览 37提问于2020-06-19得票数 0
回答已采纳
1回答
我想从Kinesis上传一个多部分到我的亚马逊S3存储桶。由于亚马逊S3是一个文件系统，因此对于每个条目，它将在给定的存储桶名称下创建一个文件。我的亚马逊S3会在亚马逊S3中的那个特定文件夹中有新文件时立即触发Lambda函数，从而为亚马逊胶水作业提供数据。对于流数据，每秒将有多个文件。我如何在Kinesis端控制文件的大小，以便Kinesis仅在达到特定阈值后才在亚马逊<
浏览 6提问于2021-06-02得票数 0
1回答
这是一个以图像为输入的TensorFlow估计器，使用InceptionV3计算高级特性(即瓶颈)，然后使用密集层来预测新的类。
它有点工作:我可以训练它，服务它，并预测新的形象一个接一个。
浏览 3提问于2018-02-06得票数 2
1回答
我是亚马逊IoT的新手，目前正在探索通过亚马逊IoT控制台自定义作业来创建更新/安装固件的作业，而不是亚马逊FreeRTOS服务。我的问题是：
AWS IoT控制台中的作业文档(.json)中的内容是什么？例如，在AWS S3 bucket中指定为软件安装固件更新在哪里可以找到自定义作业的文档？这是通过此软件开发工具包为我的固件设备创建作业的正确方法吗？也是，这是使用设
浏览 28提问于2018-09-09得票数 1
2回答
如果我可以使用普通的 S3 Bucket，并且只需手动将对象的存储类更改为Glacier，或者使用生命周期规则，我为什么需要使用 S3 ？
提前谢谢你，
浏览 6提问于2021-01-27得票数 8
回答已采纳
1回答
我知道如何从我的java应用程序中标记单个s3对象。但是，如果我传递多个键，如何一次标记多个对象呢？
我们正在谈论的是一大块钥匙。
浏览 1提问于2019-01-04得票数 0
1回答
我已经按照亚马逊网络服务文档中的建议，通过curl post方法命令将海龟文件从s3复制到海王星。curl命令已执行，作业已成功完成。作业执行后，我检查了作业id状态以了解加载状态的详细信息；我的作业显示总体状态已完成，但记录数为零。我在S3中的海龟文件有很多记录。为什么我的curl post方法不能将一条记录从S3传输到海王星？如果您已经成功地将海龟文件从S3移动到海王星，请帮助。
浏览 0提问于2018-08-16得票数 0
1回答
我正在通过AJAX上传文件到亚马逊S3 (使用浏览器文件API，并将实际的上传脚本作为iframe存储在亚马逊S3上，以绕过亚马逊S3跨站点问题，出于这个想法，请使用jquery- File -upload然而，我希望在亚马逊S3上存储非常大的文件。我想存储像配置好的虚拟机这样的东西，它可以是10+ GB大小。
根据我对HTML5文件应用编程接口的理解，可以在客户端将大文件分成小块并上传。然后，服务器代码负责将这些文件连接在一起，并将
浏览 0提问于2012-07-29得票数 4
我正在尝试创建一个bash文件，以便通过cron作业运行，该作业会将早于某个日期的文件/目录本地复制，然后通过其命令行界面删除到亚马逊S3。我已经安装并运行了S3命令行界面，但不知道如何编写复制和删除文件的脚本。
浏览 5提问于2016-04-06得票数 2
云服务器
ICP备案
云直播
对象存储
实时音视频
腾讯云开发者
