Ax = b 에서
A 는 hessian
x 는 모델 파라메터
b 는 gradient
쓰는거 맞나?
https://en.wikipedia.org/wiki/Nonlinear_conjugate_gradient_methodx는파라미터로 둬도 상관 없지만 굳이 따지면 A는 전파가 이루어지는 시스템, b는 타깃값으로 두는게 일반적일거 같은데
TRPO 자료보니까 hessian, gradient 맞는거 같네요.
아 정확하게는 뉴턴 메소드에서 없데이트값 x =H^-1g 를 Hx = -g 형태로 바꾸고 conjugate gradient로 x를 구하는건가보네요.
https://en.wikipedia.org/wiki/Nonlinear_conjugate_gradient_method
x는
파라미터로 둬도 상관 없지만 굳이 따지면 A는 전파가 이루어지는 시스템, b는 타깃값으로 두는게 일반적일거 같은데
TRPO 자료보니까 hessian, gradient 맞는거 같네요.
아 정확하게는 뉴턴 메소드에서 없데이트값 x =H^-1g 를 Hx = -g 형태로 바꾸고 conjugate gradient로 x를 구하는건가보네요.