使用s3cmd检查文件是否在S3存储桶中
使用s3cmd检查文件是否在S3存储桶中
提问于 2013-07-04 02:41:57
我有一个程序，它成功地上传了我需要的所有文件。我每天都有新的文件需要上传。在我上传文件后，我不再需要它们，因此不再寻求同步它们。
我很好奇是否有一种方法可以使用s3cmd检查给定的路径和文件名是否存在于S3中。
回答 4
Stack Overflow用户
回答已采纳
发布于 2013-07-04 03:05:34
您可以在s3cmd中使用ls命令来了解S3中是否存在某个文件。
Bash代码
path=$1
count=`s3cmd ls $path | wc -l`
if [[ $count -gt 0 ]]; then
echo "exist"
else
echo "do not exist"
fi用法：./s3_exist.sh s3://foo/bar.txt
编辑：
正如cocoatomo在评论中指出的那样，s3cmd ls $path列出了以 $path开头的所有文件。更安全的方法是使用s3cmd info $path并检查退出代码。
新的Bash代码
path=$1
s3cmd info $path >/dev/null 2>&1
if [[ $? -eq 0 ]]; then
echo "exist"
else
echo "do not exist"
fiStack Overflow用户
发布于 2013-11-25 18:01:30
假设存储桶s3://foo中存在bar.txt和bar.txt.bak，"s3cmd ls s3://foo/bar.txt“将显示以下输出。
$ s3cmd ls s3://foo/bar.txt
2013-11-11 11:11 5 s3://foo/bar.txt
2013-11-11 11:11 5 s3://foo/bar.txt.bak因为我们应该从命令结果中删除第二行，所以我们使用"awk“命令来过滤不必要的行。
$ filename=s3://foo/bar.txt
$ s3cmd ls ${filename} | awk "\$4 == \"${filename}\" { print \$4 }"
2013-11-11 11:11 5 s3://foo/bar.txt最后，我们构建所有的命令。
filename=s3://foo/bar.txt
count=$(s3cmd ls ${filename} | awk "\$4 == \"${filename}\" { print \$4 }" | wc -l)
if [ $count -eq 0 ]; then
echo "file does not exist"
else
echo "file exists"
fiStack Overflow用户
发布于 2016-05-28 06:46:32
在较新版本的AWS CLI中，您可以使用以下代码来检测文件或目录的存在
count=$(aws s3 ls $path | wc -l)
if [ $count -gt 0 ]
then
(>&2 echo "$path already exists!")
return
fi页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/17455782
复制相关文章
相似问题
腾讯云开发者
