몇번 돌리니까 여섯 개가 있는 것 같다고 생각하긴 함
근데 말도 안된다면서 다섯 개로 답변을 실시간으로 수정해서 결국 답은 5개로 나옴
뭔가 정렬 문제같기도
확률은 강하다...
여름이다!!
인식은 했는데 그럴리가 없다고 판단했구나
올바른 답이 나오는 걸 우선순위로 강화학습 시키다보니까 그 외의 답은 상정하지 않는 것 같음
@ㅇㅇ 근데 실사용에선 그게 맞는거같음. 내가 예전에 강의듣고 필기를 잘못했었눈데 제미나이가 알아서 필기 수정해주더라
6개로 보는데 추론학습방향이 손이면 5개로 출력하라고 하는거군.
일종의 인지부조화군
final answer에 점수가 많이 들어가는 GRPO의 문제점 때문일수도 중간 추론 내용에 대해선 채점을 잘 안하긴 함
확률은 강하다...
여름이다!!
인식은 했는데 그럴리가 없다고 판단했구나
올바른 답이 나오는 걸 우선순위로 강화학습 시키다보니까 그 외의 답은 상정하지 않는 것 같음
@ㅇㅇ 근데 실사용에선 그게 맞는거같음. 내가 예전에 강의듣고 필기를 잘못했었눈데 제미나이가 알아서 필기 수정해주더라
6개로 보는데 추론학습방향이 손이면 5개로 출력하라고 하는거군.
일종의 인지부조화군
final answer에 점수가 많이 들어가는 GRPO의 문제점 때문일수도 중간 추론 내용에 대해선 채점을 잘 안하긴 함