在默认情况下 Discourse 将会保留 5 个 备份文件到 S3 服务器上。 你可以修改这个配置,保存更多的备份文件到 S3 存储上面。...根据当前你 Discourse 的大小,如果你已经将图片分开存储的话,你可以备份更多的内容。 例如我们可以保留 30 天的备份。 将上面的备份修改 30 就可以在 S3 上保留 30 天。
为了避免向我们的 API 客户端传播证书或其他的认证机制,我们将会使用 S3 的预签名 URL(presigned URL)特性。默认情况下,所有的桶和文件都是私有的。...安全方面的考虑因素 虽然在默认情况下,S3 中所有的文件和桶都是私有的,但是创建预签名 URL 会允许在限定的时间范围内访问这些文件。获取了预签名 URL 的所有人都能读取状态文件。...因此,与 API 的通信应该只允许通过 HTTPS 来实现,状态文件中不要存储任何的敏感数据,并且这些文件的时间限制要设置地越短越好,当然,不能短于实际操作所要占用的时间。...另外一个额外的安全防护可以在 S3 侧执行,也就是只允许特定 IP 范围进行访问。这可以通过在桶上添加策略来实现,在 AWS 文档页面我们可以看到相关的例子。...我们需要为每个操作生成一个 S3 预签名的 URL,并将其返回给客户端,以便于客户端调用它,这样的话,计算资源就能处理应用程序的主业务逻辑,而不必通过 API 调用检查操作的状态。
MinIO 使用和部署非常简单,没有其他对象存储可以让您在最快的时间内实现下载到生产环境的部署。 MinIO 提供高性能、与 AWS S3 兼容的对象存储系统,让你自己能够构建自己的云储存服务。...后台调用 MinIO 的 API 创建分片上传任务(得到一个上传 ID ),并为该任务生成分片上传的预签名链接(上传地址列表)后返回给客户端,客户端将对应分片按照到对应的连接传递到 MinIO 中。...分片上传则是客户端拿到分片上传预签名链接后,由客户端通过预签名链接与 MinIO 交互,将分片上传至 MinIO。 具体的上传交互方式如下图所示: 这里说一下上传 ID 与预签名链接的作用。...但是,我们可以使用预签名 URL 选择性地共享对象,或者允许用户通过预签名 URL 将对象上传到桶,而无需安全凭证或权限。...go get github.com/minio/minio-go/v7 MinIO 客户端需要指定以下 4 个参数才能接入 Amazon S3 兼容的对象存储。 // MinIO 地址。
1.5 Ozone 安全令牌如何工作 Ozone的安全使用基于证书的方法来验证安全令牌,这使得令牌更加安全,因为共享密钥永远不会通过网络传输。...2 Ozone授权 授权是指定对Ozone资源的访问权限的过程,用户通过身份验证后,授权能够指定用户可以在 Ozone 集群中执行哪些操作。 例如,允许用户读取卷、存储桶和key,同时限制他们创建卷。...3.rights,在ACL中,right可以是以下内容: • Create - 允许用户在卷中创建存储桶并在存储桶中创建key,只有管理员才能创建卷。...• List - 允许用户列出存储桶和密钥,此 ACL 附加到允许列出子对象的卷和存储桶,用户和管理员可以列出用户拥有的卷。 • Delete - 允许用户删除卷、存储桶或key。...• Read - 允许用户写入卷和存储桶的元数据,并允许用户覆盖现有的ozone key。
前言最近学习使用对象存储,自然要学习一下 Amazon S3,同时最近学了一下Golang,简单记录一下学习使用 AWS SDK for Go V2 生成文件预签名URL,预签名:有些时候需要给别人访问对象存储中的对象...,又不想给对方桶的权限来访问,就可以通过生成预签名URL给别人临时访问对象。...实操首先创建 S3 Client 对象,在写代码的过程中,我发现Golang的SDK V2版本和其他语言包括Go的V1版本在创建client对象的时候都有不小的区别,我写的仅作参考 针对自建的对象存储服务器...= nil { return ("get url err: " + err.Error()) } return resp.URL}参考【ceph相关】s3预签名url(presign...)C# 通过S3上传文件到私有云存储https://github.com/aws/aws-sdk-go-v2/issues/1295
腾讯云对象存储 COS(下文简称 COS)提供了兼容 S3 的实现方案,因此您可以在大部分兼容 S3 应用中直接使用 COS 服务。本文将重点介绍如何将此类应用配置为使用 COS 服务。...服务端点/服务地址/服务 URL/Endpoint/Custom Endpoint/Server URL 等 这里用于填写 S3 兼容服务的服务地址,在使用 COS 服务时,这里填写 COS 的服务地址...例如您的存储桶在广州地域,那么服务地址应当配置为cos.ap-guangzhou.myqcloud.com,如果您配置成其他地域,那么在应用中您无法找到广州地域下的存储桶。...如上文所描述,这里的存储桶将限定在服务地址所指定的地域中,其他地域的存储桶将不会被列出或无法正常使用。...AWS V2 签名与 AWS V4 签名 COS 同时支持两种签名格式。
前言 最近学习使用对象存储,自然要学习一下 Amazon S3,同时最近学了一下Golang,简单记录一下学习使用 AWS SDK for Go V2 生成文件预签名URL, 预签名:有些时候需要给别人访问对象存储中的对象...,又不想给对方桶的权限来访问,就可以通过生成预签名URL给别人临时访问对象。...实操 首先创建 S3 Client 对象,在写代码的过程中,我发现Golang的SDK V2版本和其他语言包括Go的V1版本在创建client对象的时候都有不小的区别,我写的仅作参考 针对自建的对象存储服务器...= nil { return ("get url err: " + err.Error()) } return resp.URL } 参考 【ceph相关】s3预签名url...(presign) C# 通过S3上传文件到私有云存储 https://github.com/aws/aws-sdk-go-v2/issues/1295 本文作者:ZGGSONG 本文链接:https
「ZPan」是一款追求简约轻量的基于云存储的网盘程序,并且它致力于打造成“不限速的网盘系统”它最大的特色是实现了用户「直连云存储」(比如腾讯云 COS等),不受服务器本身的带宽和流量限制,实现“不限速”...目前ZPan支持所有兼容S3协议的云存储平台,您可以选用您熟悉的平台来驱动ZPan。 在线体验(体验账号:demo,密码:demo) 他是如何工作的?...ZPan本质上是一个URL签名服务器+可视化的文件浏览器。 因为我们采用直链的方式进行上传下载,所以为了保证上传下载的安全性,客户端用来上传下载的URL均需要服务端进行签名。...saltbo/zpan saltbo/zpan-front 特色 完全不受服务器带宽限制 支持所有兼容S3协议的云存储 支持文件及文件夹管理 支持文件及文件夹分享(未登录可访问) 支持文档预览及音视频播放...确认信息无误后,单击【确定】,即可创建存储桶。在存储桶列表界面中,可以看到刚才已创建的存储桶。
目前ZPan支持所有兼容S3协议的云存储平台,您可以选用您熟悉的平台来驱动ZPan。 在线体验(体验账号:demo,密码:demo) 01 ZPan他是如何工作的?...ZPan本质上是一个URL签名服务器+可视化的文件浏览器。 因为我们采用直链的方式进行上传下载,所以为了保证上传下载的安全性,客户端用来上传下载的URL均需要服务端进行签名。...saltbo/zpan saltbo/zpan-front 02 ZPan的特色 完全不受服务器带宽限制 支持所有兼容S3协议的云存储 支持文件及文件夹管理 支持文件及文件夹分享(未登录可访问) 支持文档预览及音视频播放...02 安装教程 Linux安装 Docker安装 通过上面任意一种方法都可以安装服务。 防火墙管理 记得在访问的时候,要通过轻量的控制面板,和宝塔的面板的安全,放通两个防火墙。步骤截图。...确认配置 对存储桶的配置信息进行确认。如需修改,单击【上一步】即可。 确认信息无误后,单击【确定】,即可创建存储桶。在存储桶列表界面中,可以看到刚才已创建的存储桶。
目前ZPan支持所有兼容S3协议的云存储平台,您可以选用您熟悉的平台来驱动ZPan。在线体验(体验账号:demo,密码:demo)01 ZPan他是如何工作的?...ZPan本质上是一个URL签名服务器+可视化的文件浏览器。因为我们采用直链的方式进行上传下载,所以为了保证上传下载的安全性,客户端用来上传下载的URL均需要服务端进行签名。...saltbo/zpansaltbo/zpan-front02 ZPan的特色完全不受服务器带宽限制支持所有兼容S3协议的云存储支持文件及文件夹管理支持文件及文件夹分享(未登录可访问)支持文档预览及音视频播放支持多用户存储空间控制支持多语言...02 安装教程Linux安装Docker安装通过上面任意一种方法都可以安装服务。防火墙管理记得在访问的时候,要通过轻量的控制面板,和宝塔的面板的安全,放通两个防火墙。步骤截图。...确认信息无误后,单击【确定】,即可创建存储桶。在存储桶列表界面中,可以看到刚才已创建的存储桶。注意:网盘关联的云存储设置为私有读,外链盘关联的云存储设置为公共读。
通过 COS 控制台为存储桶设置访问权限。对象存储 COS 支持设置两种权限类型: 公共权限设置:为了安全起见,推荐存储桶权限类别为私有读写,关于公共权限的说明,请参见存储桶概述中的权限类别。...由于需要对存储桶进行读写操作,为示例子账号授予数据读取、数据写入权限,如下图所示: 2、下图所示.png 2、获取存储桶访问凭证 Velero 使用与 AWS S3 兼容的 API 访问 COS ,需要使用一对访问密钥...ID 和密钥创建的签名进行身份验证,在 S3 API 参数中,access_key_id 字段为访问密钥 ID , secret_access_key 字段为密钥。...--region:兼容 S3 API 的 COS 存储桶地区,例如创建地区是广州的话,region 参数值为“ap-guangzhou”。...--s3Url:COS 兼容的 S3 API 访问地址,请注意不是创建的 COS 存储桶的公网访问域名,而是要使用格式为 https://cos.
背景公司最近的业务大量涉及安可项目,要求避免使用第三方组件,原有开发框架支持本地文件存储/Minio/各类云存储,现在要求文件独立存储且文件服务需要自研,经调研评估后决定基于SpringBoot开发文件存储服务...,使用s3协议标准,这样可以直接使用aws-sdk接入无需再开发客户端,且安全安全性方面可以得到足够的保证(签名验证部分参考我的博文《Java实现AWS S3 V4 Authorization自定义验证...pwd=nnio 提取码:nnio配置连接Account type:选择S3 Compatible StorageEndPoint填写部署服务后的地址:http://ip:port/s3Access Key...ID:填写配置文件中的usernameSecret Access Key:填写配置文件中的password去除SSL选项图片配置签名在编辑连接页面点击左下角Advanced S3 Compatible...Storage Setting选择签名版本为V4图片支持功能支持创建桶/删除桶/上传文件/删除文件/下载文件/创建文件夹功能图片
背景 公司最近的业务大量涉及安可项目,要求避免使用第三方组件,原有开发框架支持本地文件存储/Minio/各类云存储,现在要求文件独立存储且文件服务需要自研,经调研评估后决定基于SpringBoot开发文件存储服务...,使用s3协议标准,这样可以直接使用aws-sdk接入无需再开发客户端,且安全安全性方面可以得到足够的保证(签名验证部分参考我的博文《Java实现AWS S3 V4 Authorization自定义验证...pwd=nnio 提取码:nnio 配置连接 Account type:选择S3 Compatible Storage EndPoint填写部署服务后的地址:http://ip:port/s3 Access...Key ID:填写配置文件中的username Secret Access Key:填写配置文件中的password 去除SSL选项 配置签名 在编辑连接页面点击左下角Advanced S3 Compatible...Storage Setting 选择签名版本为V4 支持功能 支持创建桶/删除桶/上传文件/删除文件/下载文件/创建文件夹功能
由于需要对存储桶进行读写操作,为示例子账号授予数据读取、数据写入权限,如下图所示: 获取存储桶访问凭证 Velero 使用与 AWS S3 兼容的 API 访问 COS ,需要使用一对访问密钥 ID 和密钥创建的签名进行身份验证...–plugins 使用 AWS S3 兼容 API 插件 “velero-plugin-for-aws”。 –bucket 在对象存储 COS 创建的存储桶名。...region 兼容 S3 API 的对象存储 COS 存储桶地域,例如创建地域为广州,region 参数值为 “ap-guangzhou” s3ForcePathStyle 使用 S3 文件路径格式。...s3Url 对象存储 COS 兼容的 S3 API 访问地址。...请注意该访问地址中的域名不是上述创建 COS 存储桶的公网访问域名,例如地域为广州,则参数值为 https://cos.ap-guangzhou.myqcloud.com。
2.2 复制对象数据 2.3 副本组合创建对象 2.4 本地数据流上传到对象 2.5 将文件中的数据上传到存储桶中的对象 3.对象删除 3.1 移除一个对象 3.2 移除多个对象 二、对象标签配置...4.设置对象的合法保留信息 四、对象预签名 URL 1.获取对象的预签名 URL 以下载其具有到期时间和自定义请求参数的数据 2.获取对象的预签名 URL 以上传具有到期时间和自定义请求参数的数据 五...URL 1.获取对象的预签名 URL 以下载其具有到期时间和自定义请求参数的数据 #获取预先签名的URL字符串以在中下载“我的对象” #“我的桶”默认到期(即7天)。...URL 以上传具有到期时间和自定义请求参数的数据 #获取预先签名的URL字符串以在中下载“我的对象” #“我的桶”默认到期(即7天)。...URL #获取预先签名的URL字符串以删除中的“我的对象” #“我的桶”过期一天。
MinIO是一个开源的对象存储服务器,旨在为云原生应用提供高性能、可扩展的存储解决方案。它兼容Amazon S3的API,可以轻松地将其集成到现有的应用程序中。...您可以使用免费的Let's Encrypt证书,或者使用自签名证书。在这里,我们使用自签名证书作为示例。...步骤 11:创建存储桶在MinIO控制台中,您可以创建存储桶来存储和管理对象。点击"Create Bucket"按钮,输入桶的名称,并选择桶的区域。...结论在本文中,我们详细介绍了在Ubuntu 22.04上安装和配置MinIO的步骤。通过按照这些步骤操作,您可以在自己的服务器上轻松地搭建MinIO对象存储服务,并开始使用它来存储和管理对象。...希望本文能帮助您了解MinIO的安装和配置过程,以及如何使用MinIO存储和管理对象。
PicList是一款云存储/图床平台管理和文件上传工具,基于PicGo的进行了深度二次开发,保留了PicGo的所有功能的同时,为相册添加了同步云端删除功能,同时增加了完整的云存储管理功能,包括云端目录查看...可以通过CLI命令行调用,还有一些其他的功能改动。...,包括图片、视频、纯文本文件和markdown文件等,具体支持的格式请参考支持的文件格式列表 支持正则表达式的批量云端文件重命名 管理界面使用内置数据库缓存目录,加速目录加载速度 对于私有存储桶等支持复制预签名链接进行分享...优化了PicGo的界面,解锁了窗口大小限制,同时美化了部分界面布局 mac平台安装包已签名,从源头解决了PicGo上的安装包已损坏的日经问题 如何在Typora中使用 Windows: 进入Typora...如果您已经通过Mac App Store购买了PicList,请添加我的微信 pku_sq_ma,我会为您退费。
有趣的是,攻击者并没有直接访问公司的 S3 存储桶。相反,他们使用了一种称为横向移动的方法。...一位 Reddit 用户完美地 总结 了这一事件: “攻击者没有直接访问 S3 存储桶;相反,她访问了一台 EC2 服务器,该服务器具有允许访问存储桶的 AWS 角色。...运行时安全限制:如何处理它们 2023 年,Sophos 发布了一份安全公告,解释了 BlackCat 勒索软件是如何渗透其客户的 Azure 存储帐户的。...这就是零信任发挥作用的地方。 零信任和最小权限仍然是关键 让我们回到 Capital One 数据泄露事件。攻击者没有直接访问 S3 存储桶来窃取数据。...即使攻击者获得了对该实例的访问权限,她也无法访问 S3 存储桶。
说到对象存储就不得不提 Amazon,Amazon S3 (Simple Storage Service) 简单存储服务,是 Amazon 的公开云存储服务,与之对应的协议被称为 S3 协议,目前 S3...在 Amazon S3 标准下中,对象存储中可以有多个桶(Bucket),然后把对象(Object)放在桶里,对象又包含了三个部分:Key、Data 和 Metadata Key 是指存储桶中的唯一标识符...,例如一个 URL 为:https://teamssix.s3.ap-northeast-2.amazonaws.com/flag,这里的 teamssix 是存储桶 Bucket 的名称,/flag...、提取和删除存储桶和对象。...AccessDenied 而加上对应的 User-Agent 时,就可以正常访问了 在实战中,可以去尝试读取对方的策略,如果对方策略没做读取的限制,也许就能读到。
02 实现 JuiceFS Gateway 的核心服务是将 POSIX 文件系统通过 S3 接口对外提供访问。...服务账户 允许为某个用户添加服务账户,每个服务账户都与用户身份相关联,并继承附加到其父用户或父用户所属组的策略。每个访问密钥还支持可选的内联策略,可进一步限制对父用户可用的操作和资源子集的访问。...存储桶事件通知可以用来监视存储桶中对象上发生的事件。...BucketCreated s3:BucketRemoved 可以使用 mc 客户端工具通过 event 子命令设置和监听事件通知。...目前存储桶事件可以支持发布到以下目标: Redis MySQL PostgreSQL WebHooks 具体用法请参考使用文档。
领取专属 10元无门槛券
手把手带您无忧上云