使用s3fs将sklearn模型上传到S3存储桶时出现问题
s3fs是一个基于FUSE的文件系统，它允许将Amazon S3存储桶挂载到本地文件系统上。使用s3fs将sklearn模型上传到S3存储桶时出现问题可能有以下原因：
- 访问凭证问题：在使用s3fs时，需要提供正确的AWS访问凭证，包括Access Key和Secret Key。确保你提供的凭证是正确的，并且具有适当的权限来访问和上传到目标存储桶。
- 存储桶权限问题：确保目标S3存储桶具有正确的权限设置。如果存储桶是私有的，你需要确保提供的访问凭证具有足够的权限来上传文件。
- S3桶区域匹配问题：S3桶必须与s3fs挂载的EC2实例或服务器位于同一区域。确保s3fs所在的实例和S3存储桶在同一个AWS区域。
- 网络连接问题：检查网络连接是否正常。如果网络连接不稳定或存在防火墙设置，可能导致上传过程中出现问题。
解决这些问题的方法包括：
- 检查访问凭证：确保提供的AWS访问凭证是正确的，并具有适当的权限。
- 检查存储桶权限：确认目标S3存储桶的权限设置，确保提供的访问凭证具有足够的权限。
- 确认区域匹配：确保s3fs所在的实例和S3存储桶在同一AWS区域。
- 测试网络连接：检查网络连接是否正常，并确保没有阻止与S3的通信。
针对这个问题，腾讯云提供了一系列与对象存储相关的产品，例如云对象存储COS，您可以通过以下链接了解腾讯云COS的相关信息： https://cloud.tencent.com/product/cos
请注意，以上答案仅提供了一般性的解决思路和腾讯云的相关产品链接。具体的问题需要根据实际情况进一步分析和调试。
相关·内容
我正在尝试使用s3fs将一个SVR模型(用sklearn创建)上传到S3存储桶中，但我收到一个错误消息"TypeError:需要一个类似字节的对象，而不是'SVR'“。有人能建议如何将SVR转换为正确的格式吗？ 我的代码是 model = SVR_model
fs = s3fs.S3FileSystem()
with fs.open('s3://bucket/SVR_model', 'wb') as f:
f.write(model)
浏览 26提问于2020-04-28得票数 0
我希望使用s3fs将新文件上传到S3中。在文档中，我看到当有多个客户端将/同步上载/同步到同一个桶时，它不能很好地工作。
我真的不关心同步文件从到桶到我的本地驱动器，我只想执行相反的:只上传到s3的新文件，因为他们是创建的。
有办法用s3fs实现这一点吗？在文档中还不清楚它们是否通过使用标志来提供该功能。
浏览 5提问于2022-02-28得票数 0
回答已采纳
我在两个不同的ec2实例上安装了Wowza4.4.0& ffmpeg。ffmpeg对.dav视频进行转码，转换成.mp4扩展名，然后上传到s3存储桶中。在wowza服务器上的/usr/ s3 /WowzaStremingEngine/Content中挂载了相同的内容存储桶，我使用s3fs从挂载的s3存储桶文件夹中流式传输视频。有时点播播放流畅，但大部分点播播放2-3秒就卡住了。
我也试过直接从s3存储桶播放点播，但太慢了
浏览 0提问于2016-03-02得票数 3
1回答
我创建了S3存储桶并使用ec2挂载。当我上传一个文件到S3存储桶时，该文件会自动复制到ec2挂载文件夹中。我只想将文件上传到S3存储桶中。当它复制到EC2文件夹时，它变得多余，并且不能满足我们的要求。我安装了S3fs并执行了以下命令： sudo s3fs my-s3-bucket /var/www/html/vqmod/xml/ -o passwd_file=/home/ubuntu/.passwd-s3fs,nonempty,retries=5,gid=33,uid=33,allow_other,url=https://s3.amazonaws.com,umask=0000 我是不是犯了什
浏览 9提问于2019-03-25得票数 2
3回答
我的acc上有一个S3桶。
我正在使用s3cmd接口将文件上传到桶中。
我使用s3将ec2桶挂载到一个ubuntu ec2实例中，并成功地完成了它，并能够在ec2实例上列出它。
s3fs命令 - s3fs XXXXXX-ouse_cache=/tmp/s3 cache -oallow_other -opasswd_file=/etc/passwd-s3fs -ourl= /mnt/XXXXXXXX
在apache2上安装了ec2。将文档目录更改为挂载的路径s3 path - /mnt/XXXXXXXX。我已经成功地配置了相同的内容并重新启动了apache2服务。
但是
浏览 1提问于2013-07-29得票数 1
2回答
使用s3fs，我将一个文件上传到已经创建的s3存储桶中(而不是删除该存储桶)。执行时，会抛出以下错误： [Operation Aborted]: A conflicting conditional operation is currently in progress against this resource. 但是，我只想将这个pickle文件转储到已经存在的存储桶中，而不是为每个转储文件创建一个存储桶。 在这方面找不到一个有用的答案。
浏览 99提问于2021-07-15得票数 0
回答已采纳
Redhat，带保险丝2.4.8
S3FS版本1.59
在AWS在线管理控制台上，我可以浏览S3存储桶上的文件。
当我登录(ssh)到我的/s3文件夹时，我无法访问它。
还有命令："/usr/bin/s3fs -o allow_other bucket /s3“
返回: s3fs:无法访问MOUNTPOINT /s3:传输终结点未连接
可能的原因是什么？我怎么才能修复它？是否需要卸载此文件夹，然后重新挂载？
谢谢！
浏览 1提问于2012-12-23得票数 26
回答已采纳
我在一个使用S3FS的EC2实例中将S3存储桶挂载为卷。我已经用PHP创建了一个超过20‘ve的目录结构。
在S3FS耗尽实例内存的时刻，上传速度非常慢，所以我想将所有文件移动到附加到同一实例的EBS。
我尝试过S3CMD，但由于S3FS在存储桶中创建了与目录同名的零大小对象，因此存在一些不兼容问题。
我还尝试编写一个脚本来递归复制结构，跳过那些大小为零的对象。
都不起作用。
有没有人尝试过这样做？提前感谢您的帮助。
浏览 0提问于2012-09-15得票数 0
我有一个简单的LAMP网站上的AWS。我需要至少两个实例，这将连接到RDS，我将有一个负载均衡器。网络上没有回答的一个简单问题是:你把共享的用户上传的文件像图片放在哪里？
NFS应该是一个答案。我的意思是，创建另一个实例，通过NFS共享一个文件夹，其他实例挂载它们。但这是一个失败点。
实例之间的Rsync文件夹？！！
我找到的最好的答案是使用s3fs，并在我的所有实例上安装一个s3桶。但我不喜欢使用亚马逊不支持的东西。
什么是正确的解决办法？
谢谢!
溶液
我尝试过s3fs，但我经历了许多问题(最终一致)。
最后，我实现了AWS，并使用S3库直接上传到S3。然后将域直接指向s3桶。
感谢所有
浏览 0提问于2012-01-18得票数 0
我在Drupal 7中包含了S3FS模块，我可以使用S3FS作为节点的字段来存储文件。
现在，在执行cron作业时，我需要在S3桶上存储一个文件。如何以编程方式使用该模块？
浏览 0提问于2016-02-12得票数 0
我成功地在我的Fedora14机器上编译并安装了s3fs ()。我在/etc/中包含了本指南中指定的密码凭据。当我运行时：
sudo /usr/bin/s3fs bucket_name /mnt/bucket_name/
它运行成功。(注:存储桶名称与/mnt/中的文件夹名称相同)。当我在/mnt/中运行ls时，我得到错误"ls: cannot access bucket_name: Permission denied“。当我跑的时候
sudo chmod 640 /mnt/bucket_name
我得到"chmod:更改``bucket_name‘的权限:输入/输出错误“。当
浏览 1提问于2011-04-04得票数 3
回答已采纳
我有一个sklearn模型，我想使用joblib.dump在我的s3存储桶上保存这个泡菜文件
我使用joblib.dump(model, 'model.pkl')在本地保存模型，但我不知道如何将其保存到s3存储桶中。
s3_resource = boto3.resource('s3')
s3_resource.Bucket('my-bucket').Object("model.pkl").put(Body=joblib.dump(model, 'model.pkl'))
我希望腌过的文件在我的s3存储桶中。
浏览 1提问于2019-06-13得票数 10
我使用s3fs将wrt安装到s3桶上
我的S3桶是AES256加密的
mount命令是
s3fs -o dbglevel=info -o allow_other -o use_sse=1 -o use_cache=/tmp bucketname /s3mnt
这样做我不会收到任何错误消息，但是挂载不会发生。
/var/log/messages
有这些错误吗？
s3fs.cpp:s3fs_check_service(3765): invalid credentials - result of checking service
s3fs74691: curl.cpp:CheckBucket(
浏览 8提问于2017-04-14得票数 4
2回答
将熊猫数据写入S3桶(AWS)
、、、、
我有一个AWS函数，它查询API并创建一个数据文件，我想将这个文件写到一个S3桶中，我使用：
import pandas as pd
import s3fs
df.to_csv('s3.console.aws.amazon.com/s3/buckets/info/test.csv', index=False)
我收到了一个错误：
没有这样的文件或目录：'s3.console.aws.amazon.com/s3/buckets/info/test.csv‘
但是这个目录是存在的，因为我正在从那里读取文件。这里有什么问题？
我读过以前的文件如下：
s3_client =
浏览 6提问于2020-04-16得票数 9
回答已采纳
目前，我已经通过使用它来构建系统，该系统已经从Godaddy迁移到Amazon。我们还使用S3桶存储图像或其他文件。我们的服务器位置是孟买。我们的系统在亚马逊上运行得很好，但是我在文件上传到S3桶时遇到了问题。
我遵循以下代码将文件上传到S3桶服务器。。
但是通过使用表单中的代码，我们只能将图像或文件直接上传到S3桶中。
但是我想通过我的php代码将文件上传到S3桶，而不是直接将html表单上传到S3桶。因为对于文件或图像，我们也希望将表单数据插入到mysql服务器。
如果有人知道如何通过提交表单数据通过php代码将文件上传到s3桶中。
浏览 11提问于2016-12-21得票数 1
回答已采纳
1回答
只将新对象从S3复制到前提服务器
、、、、
我有一个S3桶，每天从salesforce生成对象。我想将这些对象从S3桶复制到本地的Linux服务器上。应用程序将在该Linux服务器上运行，该服务器将引用这些对象来生成新文件。
我不能使用S3 -同步，因为S3桶中将有数十万个对象。由于这些对象将在每天的基础上生成，同步将增加大量成本。我只希望新创建的对象被复制到本地服务器。
我正在考虑使用S3FS或JuiceFS在本地安装S3桶。但是我听说将S3安装到本地服务器并不是一个可靠的解决方案。
是否有任何可靠和安全的方式，我们只能复制新的对象到本地服务器？另外，如果我使用S3或JuiceFS将S3FS挂载到本地服务器上，是否可靠？
先谢谢你。
浏览 15提问于2022-08-19得票数 0
我想为我的Drupal 8站点使用备份和迁移。有没有一种方法可以使用Flysystem进行备份？我应该安装S3FS吗？
我配置了Flysystem来处理所有要从S3桶中保存和服务的文件和图像。我没有看到任何添加S3桶来备份和迁移的功能。
我确实安装并启用了S3FS，但并不只看到备份文件的配置。
浏览 0提问于2019-10-27得票数 -1
我将在不久的将来推出一个应用程序，这将在一定程度上要求用户上传文件(图像)，供其他成员查看。我喜欢S3的想法，因为它相对便宜，并且可以自动扩展。
我的问题是如何让用户将他们的图片上传到S3。似乎有几个选择。
1-使用php REST API。唯一的问题是，我不能让它同时上传同一张图片的不同比例的版本(即缩略图)，并将它们直接上传到s3 (它一次只能上传一张图片)。总体而言，它似乎就是不太灵活。
2-另一种选择是使用s3fs挂载S3存储桶。然后，只需通过编程将我的图像移动到存储桶中，就像使用NFS一样。根据我所读到的，似乎有些人对安装S3的可靠性持怀疑态度。这是真的吗？
为了获得最大的可靠性
浏览 0提问于2011-04-28得票数 3
1回答
我正在构建一个php应用程序，试图将文件ec2上传到s3。文件没有上传到s3，我也没有收到任何错误消息。我已经在存储桶策略中添加了一个具有ec2访问权限s3完全访问权限的角色
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": "Allow",
"Principal": {
"AWS": [
浏览 0提问于2017-05-18得票数 0
2回答
我已经设法使用S3FS将一个亚马逊S3文件夹挂载到我的Wordpress站点中。基本上，我的NextGEN图库文件夹是指向存储桶的挂载S3FS文件夹的符号链接，所以当我上传图像时，文件会自动添加到S3存储桶中。
我正忙于编写Apache重写规则来替换链接，从S3获取图库图像，而不需要用NextGEN修改或更改任何东西，但我发现的一个问题是，图像在S3上默认是不公开的。
有没有一种方法可以改变父文件夹，使其子文件夹始终是公共的，包括生成新文件？
是否可以或建议使用cron任务通过S3命令行API手动公开文件夹？
浏览 2提问于2013-04-25得票数 1
回答已采纳
1回答
AWS S3FS如何
、、、、
以下是目前的情况-
我有多个S3存储桶，其中的SQS事件配置为来自FTP的对象的放置，我已经使用S3FS进行了配置。
另外，我在一个上有多个目录，用户可以在这个目录上放置一个对象，该对象与不同的S3桶(使用S3FS)同步，生成S3事件(使用S3的SQS事件)。
，这是我需要实现的，
而不是多个S3存储桶，我需要在文件夹级别上合并逻辑，
即。现在，我已经为以前创建的每个桶创建了不同的文件夹，我已经为放入各个文件夹创建了单独的SQS事件。
现在是S3FS的桶级逻辑，我想在一个S3桶中对文件夹级别进行调整。
即。我想在EC2上创建三个不同的目录，例如A、B、C。
如果我将一个对象放在EC2的目录A中
浏览 4提问于2016-07-26得票数 1
回答已采纳
我已经尝试了类似问题中提供的所有答案，但都没有帮助。 我安装了S3 Fuse，这样我就可以挂载S3存储桶了。安装完成后，我执行了以下步骤： 步骤1为存储桶mkdir -p/var/ s3fs - S3 -fs创建挂载点。然后，通过运行以下命令，我可以使用IAM角色在新目录中挂载S3存储桶:s3fs myresearchdatasets /var/s3fs-drive-fs -o iam_ -o =ec2- to -S3-S3- role -o allow_other，它工作正常。 但是，我发现每次重启系统时，存储桶都会消失，这意味着每次重启系统后，我都必须运行上面的命令来重新挂载S3存储桶。
浏览 45提问于2019-01-16得票数 1
回答已采纳
1回答
我使用s3fs在我的Ubuntu服务器上挂载一个s3桶：
sudo apt-get install s3fs
sudo vim /etc/passwd-s3fs // <--put user access key and secret key in this file
sudo chmod 640 /etc/passwd-s3fs // <-- change permission to password file
sudo vim /etc/fuse.conf // uncomment user_allow_other
现在挂载s3桶：
sudo s3fs -o allow_
浏览 0提问于2019-10-14得票数 2
回答已采纳
我正在尝试在亚马逊网络服务上运行定制的python/sklearn sagemaker脚本，基本上是从以下示例中学习：https://github.com/aws/amazon-sagemaker-examples/blob/master/sagemaker-python-sdk/scikit_learn_randomforest/Sklearn_on_SageMaker_end2end.ipynb 一切正常，如果定义参数，训练模型并输出文件： parser.add_argument('--model-dir', type=str, default=os.environ.ge
浏览 19提问于2021-01-13得票数 2
回答已采纳
我分期付款s3fs，在这里描述
然后在我创建用户bucket_user
然后在/etc/passwd-s3fs中放置他的accessKeyId: in
它们是S3我创建了一个桶super_bucket
并制定其政策：
{
"Version": "2008-10-17",
"Statement": [
{
"Sid": "AddCanned",
"Effect": "Allow",
浏览 5提问于2012-01-30得票数 4
回答已采纳
2回答
我已经安装了熊猫，numpy，s3fs，并创建了压缩文件添加为层。添加了压缩文件s3桶。但无法找到它所需要的实际版本。使用Python 3.7.9。尝试与多个车轮文件，但得到错误，不支持系统。我想和熊猫一起工作，从大型(>2GB)的s3桶中读取多个csv文件。请让我知道我需要使用哪个版本。这些概念和代码与本地一起工作。
我在修窗户。不使用码头工人。只需安装软件包，创建压缩文件，上传到S3桶。将该链接添加到lambda层。然后测试代码，但面临版本问题。如果这些流量是错的请告诉我。
浏览 1提问于2021-08-20得票数 0
回答已采纳
1回答
我在aws实例上使用s3fs来挂载s3桶。下面是我用来挂载桶的命令。
sudo fusermount -u /s3/project1
sudo s3fs -o allow_other project1 /s3/project1
这些机器再也不能重新启动了。但这座山经常分离。当访问挂载时，我会得到以下错误。
无法访问‘/s3/project1 1’：传输端点未连接
如何使它永久附着在一起？
浏览 0提问于2019-09-17得票数 2
我跟随在Ubuntu服务器上挂载了一个S3桶。
现在我要做的是在同一个Ubuntu服务器上挂载第二个桶..。我有两个不同的用户，每个桶，我不知道如何配置他们的密码。
以前我不得不将access-key:secrect-key放在/etc/passwd-s3fs文件中，但是现在我有了两个不同的令牌集，我不知道该怎么办？
更新
一些背景：我正在研究一种电子商务解决方案.我正在与不同客户的集成系统工作，他们通过FTP将他们的产品信息发送到我们的电子商务。
例如，client-1是一个汽车经销商，通过FTP将数百张照片上传到我们的FTP服务器.我们已经为client-1创建了一个S3桶，使用S3FS挂
浏览 2提问于2020-06-15得票数 0
回答已采纳
1回答
我在AWS函数中运行Python脚本。它是由SQS消息触发的，这些消息告诉脚本某些对象要从S3桶中加载以供进一步处理。
权限的设置似乎是正确的，使用了一个桶策略，允许Lambda的执行角色对桶中的任何对象执行任何操作。而Lambda大部分时间都可以访问所有的东西。这些对象通过pandas和s3fs：pandas.read_csv(f's3://{s3_bucket}/{object_key}')加载。
但是，当一个新对象被上传到S3桶时，Lambda一开始无法访问它。botocore SDK在尝试访问对象时抛出An error occurred (403) when calli
浏览 0提问于2020-07-04得票数 0
回答已采纳
1回答
我正在使用s3fs实用程序在EC2实例上挂载一个S3桶。
跨过这么多障碍之后，我就能登上S3水桶了。
我没有什么疑问：
如果我在S3实例上挂载了一个EC2桶，那么是否需要向fstab输入任何条目。
如果我在S3实例上挂载了一个EC2桶，那么我可以看到安装设备中的文件和文件夹，比如/s3mnt，但是我无法看到S3桶上的内容。内容会从桶里消失吗？？
谢谢
浏览 4提问于2014-07-14得票数 3
回答已采纳
有人有用s3fs使用Openstack对象存储并同时使用多个写入挂载访问同一个文件(S)的经验吗？
例如，s3的手册页：https://linux.die.net/man/1/s3fs有以下段落：
“虽然多用户功能可以在多个用户之间共享s3存储桶，但目前亚马逊S3服务的数据一致性模型阻止了来自多个用户的多个挂载的安全使用。虽然s3fs目前将允许多个挂载，但这种活动可能会导致数据损坏。未来的发行版将包含一种锁定机制，以安全地防范多个读-写挂载。单读-写入挂载后的多个只读挂载是安全的，但不会反映对任何文件或文件系统元数据的可写装入所做的更改，从而限制了它的有用性。”
上面提到的锁定机制实现了吗？
浏览 0提问于2020-12-15得票数 0
4回答
我使用和在Mac上挂载一个S3目录：
s3fs my-bucket-name $PWD/s3
当卸下它的时候，我会这样做：
% s3fs umount $PWD/s3
s3fs: MOUNTPOINT directory /Users/kwilliams/blah/s3 is not empty.
if you are sure this is safe, can use the 'nonempty' mount option.
我是不确定这是安全的-我没有故意在s3目录中创建任何新的文件，如果创建了任何新的文件，我需要知道它，这样我就可以清理它们或者知道发生了什么。
我也不希
浏览 0提问于2019-05-10得票数 12
回答已采纳
s3fs-FUSE是一个可以执行此操作的命令行界面工具，但s3fs库实际上并不将其装载到文件系统，而是为我们提供了将S3存储桶作为文件系统进行访问的apis 我正在寻找一些python库，我可以在python脚本中使用它来将s3存储桶挂载到文件系统中。
浏览 54提问于2020-03-23得票数 0
我下面的链接是“使用亚马逊S3存储单个亚马逊Elasticsearch服务索引”
我成功地将索引从AWS Elasticseach上传到S3存储桶，但也注意到S3存储桶上的文件夹名称已更改。
ElasticSearch上的文件夹名称：
S3存储桶上的文件夹名称：
浏览 2提问于2018-08-21得票数 0
2回答
Redhat，带保险丝2.4.8
S3FS版本1.59
除了：
我想做一个脚本来解决这个问题。该脚本将卸载并挂载目录。我需要使用的命令是：
fusermount -u /s3
/usr/bin/s3fs -o allow_other存储桶名称/s3
对于熟悉这种情况的人，我应该关注其他事情吗？或者这就足够了？
浏览 0提问于2012-12-30得票数 1
7回答
由于现在没有一个S3“文件系统”是兼容的，所以您推荐什么s3网关工具来安装用于备份的远程S3桶？我一直在使用S3FS，但是我听到很多人抱怨代码的质量很差；我还没有经历过我自己的正式代码评审。你对其他什么工具满意？
编辑:为了澄清，我在这里运行Linux。Windows兼容性很好，但并不是必需的。
浏览 0提问于2009-05-03得票数 10
我正尝试在Amazon中部署一个现有的Scikit-Learn模型。所以一个模型不是在SageMaker上训练的，而是在我的机器上本地训练的。
在我的本地(windows)机器上，我将模型保存为model.joblib，并将模型注册为model.tar.gz。
接下来，我在下面的路径S3中将这个模型上传到我的S3桶('my_bucket')中:// my _ bucket /Model.tar.gz。我可以在S3中看到tar文件。
但是，当我试图部署模型时，它总是给出“未能提取模型数据存档”的错误消息。
.tar.gz是通过在powershell命令窗口中运行'tar
浏览 3提问于2021-01-25得票数 4
回答已采纳
我已经使用s3fs在ubuntu上挂载了s3 bucket。我所需要做的就是使用apache访问这个存储桶(它有我的媒体文件)。我确实将/etc/apache2/sites-available上的DocumentRoot设置为S3路径，但当我访问http://ubuntu_domain_name:80/BUCKET时，它显示为403。我在S3里做了一个桶，上面写着403。(其中ubuntu是一个EC2实例)。
然后，我将文档根目录指向其他目录，并创建指向bucket的符号链接，但我仍然看到403错误。
我想要的就是，通过ubuntu ec2上的apache访问带有媒体文件的S3存储桶。
谁能指
浏览 8提问于2012-04-12得票数 1
2回答
我想备份一个AWS s3桶。如果我使用Glacier，它会将存储桶中的文件存档并移到冰川中，但它也会从s3中删除文件。我不想从s3中删除这些文件。一种选择是尝试使用EBS卷。您可以使用s3挂载AWS s3fs存储桶，并将其复制到EBS卷中。另一种方法是将现有存储桶与新存储桶进行rsync，这将充当克隆。还有别的办法吗？
浏览 0提问于2015-12-10得票数 0
回答已采纳
我想将我的moodledata文件夹存储在S3存储桶中，并与多个EC2实例共享以进行自动缩放。
因此，在不使用S3fs的情况下，我想使用AWS SDK for PHP在S3存储桶上管理此moodledata。
此外，我搜索了许多论坛，但我没有得到任何关于AWS SDK for PHP的解决方案。致以敬意，
浏览 2提问于2020-08-07得票数 0
1回答
我们希望使用s3fs将s3存储桶(或存储桶中的文件夹)挂载到码头容器。我们的s3fs是v1.84，我们的docker容器操作系统是高山Linux。
我们使用以下命令在停靠容器中挂载s3 bucket:/文件夹
s3fs $DEBUG_OPTS ${S3FS_ARGS} -o passwd_file=${AWS_S3_AUTHFILE} -o url=${AWS_S3_URL} -o uid=$OWNER -o use_cache="" dataops-datastore:/Testuser ${AWS_S3_MOUNT}
我们看到的错误是s3fs:没有足够的磁盘空间供s3fs用
浏览 0提问于2019-03-30得票数 0
2回答
最初张贴在stackexchange上。没有得到任何答复。然后我最近发现有一个特定的，所以我在这里重新发布。蒂娅！
我有一个drupal站点，我计划直接从s3 (重写)提供静态站点文件。我需要为内容管理器提供一种方式，使其能够从drupal直接将其图像上传到s3，这样他就不必通过s3cmd或aws控制台将其发送给我。有人能为这个推荐一个模块或方法吗？
然而，我已经尝试过s3fs，但是安装一个fuse s3文件系统并从它提供服务是非常缓慢的。如果成功的话，drupal会认为这些文件都是本地的，我会被设置好。
我发现了这个，但不确定它是否能帮我完成任务：https://drupal.org/pro
浏览 0提问于2014-06-09得票数 2
回答已采纳
3回答
如何修改用户: s3fs挂载桶的组所有权？
我有一个git安装，本质上我想把它存储在一个桶中的亚马逊S3帐户上，然后使用Sparkleshare，通过我的网络主机，跨多台机器同步这些数据。
-我已经设置了火花，以成功同步三台机器。工作起来很有魅力。
--这是同步到/home/git/dropbox上的一个文件夹--没有问题。--我希望同步文件夹给我一个挂载的S3桶，尽管我可以在dropbox文件夹旁边挂载存储桶，但是没有人喜欢将所有权更改为git:git。
问题:当您使用root:root用户创建挂载时，只有该用户可以访问桶。
我试图创建挂载，S3FS作为GIT用户登录，但没有成功，它仍然挂载
浏览 2提问于2012-03-19得票数 8
回答已采纳
2回答
我正在从事一个在上托管的项目。服务器设置包括两个EC2实例，一个弹性负载均衡器和一个额外的弹性块存储，web应用程序驻留在其中。这个项目应该使用S3来存储用户上传的文件。为了解决这个问题，我将调用S3 bucket static.example.com
我试过使用s3fs ()、RioFS ()和s3ql ()。s3fs将挂载文件系统，但不允许我写到桶中(我问了这个问题:如何使用FUSE安装具有适当权限的S3卷)。RioFS将挂载文件系统，并允许我从shell写入存储桶，但是使用PHP保存的文件不会出现在存储桶中(我在GitHub上打开了一个项目问题)。s3ql将挂载存储桶，但存储桶中的任何文
浏览 1提问于2013-05-07得票数 54
回答已采纳
2回答
我知道可以使用Fuse (s3fs或s3fsr S3 gem?)挂载亚马逊ruby存储桶。
我的案例是针对Heroku的。
Heroku的文件系统是只读的，但有没有办法在Heroku的文件系统中挂载亚马逊s3呢？
在我的例子中，我在Heroku上使用Redmine，并希望使用Redmine内置的git存储库管理来将代码审查与我的问题联系起来。Redmine需要将存储库克隆到本地目录，这在Heroku上是可能的，但不是持久的。
我希望Redmine在一个挂载的S3存储桶上维护一个git存储库。这个是可能的吗？如果这是可能的，那会有多慢？有没有其他方法可以实现这一点？
浏览 3提问于2012-12-10得票数 5
1回答
对于用户配置文件，我在模型上有一个默认图像。
image = models.ImageField(default='default.jpg', upload_to='profile_pics')
现在，我在s3桶中有了这个图像。如何从s3桶而不是本地引用此映像？
如果我尝试在模型https://uploadfiles.s3.amazonaws.com/profile_pics/default.jpg或桶路径'uploadfiles/profile_pics/default.jpg上使用直接图像路径，就会得到错误This backend doesn'
浏览 14提问于2022-01-18得票数 0
2回答
我在亚马逊网络服务的s3存储桶中有一个XGBoost模型，我想要加载它。目前，我正在尝试使用s3fs加载数据，但我一直收到类型错误： from s3fs.core import S3FileSystem
import xgboost as xgb
fs = S3FileSystem()
bst = xgb.XGBClassifier()
with fs.open(f'{bucket}/{modelPath}', mode='rb') as f:
bst.load_model(f.read()) 我会包括输出，这一点我很确定这种方法是完全错误的。我该
浏览 49提问于2021-01-26得票数 0
回答已采纳
2回答
我的亚马逊S3存储桶有数百万个文件，我正在使用s3fs挂载它。任何时候发出ls命令(不是故意的)，终端都会挂起。
当在s3fs挂载路径中发出ls命令时，有没有办法将返回的结果数量限制为100？
浏览 2提问于2015-09-19得票数 1
1回答
也许我应该将这个问题移到serverfault，但可能不是=)
我有一个基础架构，其中有多台机器(例如FTP服务器、get/put和Samba/NFS服务器)需要共享相同的(HA)存储。所以我决定使用s3fs和fuse。我完成了所有这些设置，并且工作得很好，我有两个服务器，每个服务器都通过FTP/SMB/NFS公开相同的存储桶。
现在，当我有越来越多的服务器需要访问同一存储桶时，最好的替代方案是什么？只是让这些其他机器挂载相同的存储桶(向外扩展)，或者将正在工作的两台机器放在S3前面，并从那里使用NFS/SMB共享(从而在前端机器上向上扩展)？
你知道最好的方法是什么吗？通常我倾向于向外扩展，
浏览 0提问于2015-12-01得票数 0
2回答
我很抱歉问了这么愚蠢的问题，但是我如何使用s3fs在我的文件系统上挂载一个s3存储桶呢？
我使用了中给出的简单说明：
我已经全部安装好了，并将我的凭证放在/etc/passwd-s3fs文件中，然后像这样挂载它：
s3fs缓存/mnt/... -o使用缓存=/tmp
但是当我试图查看这些文件时(使用'ls‘命令)，当我试图在我编写的一个小java程序中访问它们时，目录就是空的。
我做错了什么？
只需注意:我在linux服务器上运行它。我还在运行于windows7的vmware上的一个本地Ubuntu虚拟机上试用了它。
谢谢!
浏览 6提问于2011-09-23得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
云直播
即时通信 IM活动推荐
腾讯云开发者
