해당 댓글은 삭제되었습니다.
다시보니 내 의견이 지금연구자체가 미로의 잘못된길로 빠졋다는 분탕선형갤러랑비슷한거같기도
Agi는 모르겠는데 asi는 이제 기존에 생각하던것처럼 무지성 재귀개선으로 안될수도 있긴 함. 합성데이터가 모델 규모 이상으로 중요해졌다고 볼 수 있음
아직 재귀개선 못하지 않나?
지금 못하는데 한다고 해도 데이터셋에 의해 정해지는 한계를 넘을수가 없다는거
실제 데이터와의 유사함 99.999....퍼센트에 수렴할뿐 뭔가 더 넘어서서 생성하질 못한다는걸 말하는것?
난 데이터셋에 의해 생성물의 퀄리티 상한이 정해진다는 의미로 이해했음 이 상한이 충분히 크길 바라거나 아니면 그 글이 틀렸거나 둘 중 하나를 바래야 하는 상황인데 지난 1년간 나온 모델들이 gpt4를 제대로 못넘는거 보면 그럴듯 하다고 느껴짐
해당 댓글은 삭제되었습니다.
다시보니 내 의견이 지금연구자체가 미로의 잘못된길로 빠졋다는 분탕선형갤러랑비슷한거같기도
Agi는 모르겠는데 asi는 이제 기존에 생각하던것처럼 무지성 재귀개선으로 안될수도 있긴 함. 합성데이터가 모델 규모 이상으로 중요해졌다고 볼 수 있음
아직 재귀개선 못하지 않나?
지금 못하는데 한다고 해도 데이터셋에 의해 정해지는 한계를 넘을수가 없다는거
실제 데이터와의 유사함 99.999....퍼센트에 수렴할뿐 뭔가 더 넘어서서 생성하질 못한다는걸 말하는것?
난 데이터셋에 의해 생성물의 퀄리티 상한이 정해진다는 의미로 이해했음 이 상한이 충분히 크길 바라거나 아니면 그 글이 틀렸거나 둘 중 하나를 바래야 하는 상황인데 지난 1년간 나온 모델들이 gpt4를 제대로 못넘는거 보면 그럴듯 하다고 느껴짐