场景:广州地域 COS 桶。对账按商户把日终明细写到前缀 reconcile/,上传时是标准存储,约 200 个商户、每天一个对象。生命周期按最后修改时间,90 天后把该前缀沉降为归档存储。每月 1 号 02:00 重跑近 120 天,窗口只有 2 小时,开跑前必须能直接 GET。
现象:
- 最后修改超过 90 天、已被扫描沉降的对象大约 6000 个,文件列表里是归档。GET 返回 HTTP 403,
Message 为 InvalidObjectState。90 天以内的对象仍能直接读。 - 抽样走标准取回要数小时,赶不上 02:00 到 04:00。快速取回的抽样几分钟就能读,但这批要补的是那 6000 个 key。
- 取回后读到的是临时标准存储副本,原对象仍是归档。副本到期后,同一个 key 再次 GET 又是
InvalidObjectState。
已尝试:
- 规则改成只沉降到低频。已归档对象不会被转回去,这些 key 的 GET 仍然返回 403。低频上的新对象可以直接读,历史数据长期留在低频,容量费用下不来。
- 对照过深度归档的取回时间:快速取回不支持深度归档,标准取回要 12-24 小时,比现在更赶不上窗口。
- 重跑前一天手工对失败的 key 发标准取回,这个量级会漏。漏掉的 key 任务直接失败,分不清还在取回,还是对象不存在。
问题:
- 窗口内必须可读的前缀,生命周期应停在低频,还是继续归档、由任务提前取回?副本有效期要盖住重跑和一次失败重试,还是在有效期内把存储类型改回标准?改回之后,副本到期还会不会再次不可读?
- 6000 个对象走快速取回时,任务怎样确认都已可读再开跑?仍返回
InvalidObjectState 的 key,应整批失败还是跳过并告警?不希望重试把取回请求再打出一倍。