자신에 대한 고찰

dynamic를 모르는 상태에서의 optimal control을 이해하고, 강화학습을 전개하는 입장에서 관점을 제공해주는 엄청 심플한 baseline이 있을까? 일단 매우 일반화가 된 예에서 시작해보자. 일반적으로 알려진 optimal한 제어 문제는 다음 형태를 띈다:$\text{maximize}_{u_{t}} \;\; \mathbb E_{e_{t}}[\sum_{t=0}^{N}R_{t}[x_{t}, u_{t}]]$ $\text{subject to} \;\; x_{t+1} = f(x_{t}, u_{t}, e_{t})$ $(x_{0} \; \text{given})$ 여기서 $x_{t}$는 system의 state이고, $u_{t}$는 제어 action이고, $e_{t}$는 랜..