首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >Actor-Critic 不是两个模型互相打分:基线方差辟谣

Actor-Critic 不是两个模型互相打分:基线方差辟谣

作者头像
用户12661151
发布于 2026-08-04 14:46:03
发布于 2026-08-04 14:46:03
1110
举报
概述
Actor-Critic 常被简化成“演员行动、评论家打分”,容易误以为评论家决定动作好坏。本文用两臂老虎机拆解策略梯度:Critic 提供与动作无关的回报基线,优势值负责降方差。Python 实验同时比较梯度方差并训练策略,用数据验证基线的作用与偏差边界。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档