一、马尔可夫环境的状态必须是全部能够获取的（fully observable），即环境的 observation 就是 state。
1. 马尔可夫性（Markov Property）环境的下一个状态只由当前的的状态决定，与过去无关。
\m
2020-11-21