**Bellman Expectation Equation**


### recursive equation that relates the value of a state to the values of its neighboring states
$$V(s)=∑a​π(a∣s)∑s′,r​p(s′,r∣s,a)[r+γV(s′)]$$
Reinforcement learning targets to solve this equation
목표는 value func.의 참 값을 찾는 것이 아닌 **최대의 reward를 얻는 policy를 찾는 것**
현**재 상태의 가치함수와 다음 상태의 가치함수 사이의 관계**
**상태가 많아질수록 상당히 비효율적인 방법**




> [(3) 가치함수와 벨만방정식](https://jang-inspiration.com/bellman-equation)

> [Untitled](https://sumniya.tistory.com/5)





