[일반] 사실 학습 데이터 고갈은 말이 안됨

[익명(220.121)]

인간이 생성한 데이터라면 말이 될 수 있지만

왜? 를 무한으로 반복해서 찾아내는 합성데이터는 끝이 없기 때문에

미래에도 결국 컴퓨팅 싸움이 되지 않을까

- dc official App

[ㅇㅇ 1(121.170)]

난 합성데이터로 무한 피드백 준다는게 자꾸 우로보로스 급으로 말이 안된다고봄. 차라리 유저수 폭증해서 RLHF 하겠다는 말이 좀 더 현실성있는거같은데 그거도 로그스케일로 커질려면 한계같고