[📪정보] o1 개발자 인터뷰에서 가장 인상깊었던 장면

[익명(121.178)]

"추론을 위한 모델을 훈련하는 것에 대해 생각할 때,

제게 가장 먼저 떠오르는건 사람들이 자신의 생각 과정을 적어서

그걸 바탕으로 모델을 훈련할 수 있다는 것이었습니다.

제게 가장 놀라웠던 순간은,

강화학습을 사용해서 생각의 사슬을 스스로 생성하고 다듬는 모델을 훈련시키면

사람이 생각의 사슬을 제대로 만드는 것보다 더 나은 성과를 낼 수 있다는걸 본 순간이었습니다.

이것이 가장 놀라운 순간이었고, 이걸 확장해서 모델 추론을 탐구할 수 있겠다고 생각했습니다."

이건 즉 강화학습을 사용해서 생각의 사슬을 생성하는 모델이 만들어내는 데이터가

인간이 만들어내는 고품질 추론 데이터보다 더 뛰어날 수 있다는 뜻이고

대 합성 데이터의 시대가 열렸다는 뜻으로 해석됨

재귀개선의 대서막

[도로시냥(slzpdnjsxnf)]

[천사다천사(jjtheman999)]

[익명(110.10)]