腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
Ceph对象存储方案
专栏作者
举报
64
文章
143634
阅读量
86
订阅数
订阅专栏
申请加入专栏
全部文章（64）
分布式（12）
网络安全（10）
https（10）
其他（9）
存储（6）
node.js（5）
http（5）
编程算法（5）
github（4）
api（4）
linux（4）
nginx（4）
数据迁移（4）
对象存储（3）
python（3）
windows（3）
php（2）
html（2）
git（2）
网站（2）
开源（2）
自动化（2）
缓存（2）
yum（2）
max（2）
object（2）
java（1）
c++（1）
c#（1）
go（1）
数据库（1）
sql（1）
access（1）
ruby on rails（1）
打包（1）
文件存储（1）
容器（1）
kubernetes（1）
面向对象编程（1）
rpc（1）
jenkins（1）
安全（1）
数据结构（1）
架构设计（1）
kafka（1）
虚拟化（1）
admin（1）
auto（1）
fastcgi（1）
hash（1）
host（1）
instance（1）
metadata（1）
pool（1）
response（1）
sh（1）
size（1）
thread（1）
部署（1）
磁盘（1）
服务（1）
集群（1）
权限（1）
数据同步（1）
搜索文章
搜索
搜索
关闭
隔山打牛之-借助nginx解析rgw日志
nginx
http
html
知识tips:一般情况下每一个客户端发往RGW的HTTP请求都会在其header里面包含authorization这个字段，该字段中包含了用户的Access_key信息，但是AWS2和ASW4两种签名格式各不相同。 背景:业务在访问RGW服务的时候会记录对应的log，对比nginx一类的专业产品，原生的RGW日志格式和内容都太过粗糙，如果去改动RGW代码虽然可以满足需求，但是后续格式变化又要批量更新RGW，对运维造成不便，而且从管理的角度来看这类改动收益较低。因此从充分解耦的思想出发，想借助nginx来实现日志格式的标准化管理，因此在RGW前端架设了一层nginx作为反向代理。但是原生的nginx日志是无法解析出每个HTTP请求的authorization字段的，因此有了这篇文章。
用户1260683
2020-02-25
1.1K
0
index pool的 large omap 处理
html
向单个bucket压测2000W个object，默认设置shard数为16，压测到1800W出现large omap,介绍一下错误定位和如何处理。
用户1260683
2019-03-08
4.1K
0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天，分 10000 元奖品池！
立即发文
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档