r1(정답률 80%), o3-mini(정답률 100%)는 가볍게 푸는 문제에서 완벽한 오답을 기록함.
추론모델일 수는 있지만, 수학에는 약한 것으로 보임.
저렇게 물어보는건 환각이 많아서 불확실하고, 커뮤 말투나 데이터셋 관련으로 질문하면 제미나이는 확 티남
밑에 있는 글 중에서, chocolate가 gemini계열이라는 추측이 올라왔더라구요. 그래서 일단 자체 벤치 돌려봤습니다.
저렇게 물어보는건 환각이 많아서 불확실하고, 커뮤 말투나 데이터셋 관련으로 질문하면 제미나이는 확 티남
밑에 있는 글 중에서, chocolate가 gemini계열이라는 추측이 올라왔더라구요. 그래서 일단 자체 벤치 돌려봤습니다.