Skip to content
Jambity's Blog

Lecture 5: Monte Carlo Learning

强化学习中的数学原理 | 第五课

RL,强化学习中的数学原理1min read...

记得高中的时候了解过用蒙特卡洛法估算圆周率,核心思想是用大量随机采样,将问题转化成概率统计问题,之后用样本值来估计理论值,我在此之前还不知道强化学习中的蒙特卡洛法是不是也是这个意思,我将带着这个问题往下看

上节课介绍的是model-based的方法,这节课将的是model-free的方法

  • model-based: 知道环境是什么,可以模拟推演出下一步的状态
  • model-free: 没有环境模型,只能靠真实和环境交互得到的样本来学习价值函数和policy

Comments

© Jambity. All rights reserved.......