[❓질문] 벨만기대방정식 질문 있습니다.

[익명(106.101)]

마지막 두 줄의 동치 관계에서 잘 이해가 안 가는 부분이 있어 질문 드립니다.

여태까지 배운 내용으로는 V(S_t+1)=E[G(t+1)] 이 맞는 것 같은데, 마지막 두 줄에서는 마치 V(S_t+1)=G(t+1)인 것처럼 계산을 해서요.

기댓값이 생략되어도 두 식이 동치 관계인 이유가 무엇인가요?

[익명(118.235)]

밖에 이미 기댓값이 있기때문에 생략된겁니다.

[익명(106.101)]

기댓값을 두 번 씌우면 하나를 소거해도 상관 없다는 뜻인가요?

[익명(110.35)]

ㅇㅇ

[익명(58.126)]

E_π가 policy π를 따라갔을때의 expectation 구한다는 의미라서 E_π가 두번 중첩되어도 똑같은 의미임