Offline: (A2PR)Adaptive Advantage-Guided Policy Regularization for Offline Reinforcement Learning

ICML 2024
paper
code

Intro

离线强化学习中基于policy constraint的方法(TD3+BC)存在的问题是:无法选择性的对样本进行合适的约束。当数据集质量较低时,这种问题尤为明显。因此,本文基于TD3+BC,提出通过优势函数值自适应的选择合适的动作实现BC正则。

Method

policy improvemen

采用最大化Q值结合BC正则的形式对策略优化
在这里插入图片描述
其中,如何选择 a ˉ \bar{a} a

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值