[📪정보] 알리바바 o1 QwQ 32B 올해 수능 미적 30번 테스트

[익명(121.178)]

맞힘

+ 동일 프롬프트 다른 모델들 결과

3.5 sonnet : 3(틀림)

4o : 1077885594637493(...)

gemini 1121 : 5(틀림)

o1-preview : 41(틀림, 89초 생각), 7(틀림, 98초 생각)

o1-mini : 11(틀림, 31초 생각), 61(틀림, 42초 생각), 15(틀림, 53초 생각)

deepseek-r1-lite-preview : 3(틀림, 115초 생각)

한두번씩만 테스트한거라 랜덤성 있을 수 있음

+ 재검증

2트째에서 틀림

3트째에서는 거의 무한루프로 잘못 빠지다가 틀림

그 뒤로도 계속 검증해봤으나 재현이 어려움

6트째에 다시 맞히기 성공, 처음 단추를 잘꿰면 확실히 잘 맞히는듯

6트에는 인상적이었던게 '이거 정답 확실한 것 같다'하고 오답내길래 또 틀리나했는데

'아닌가?'하고 다시 한번 검증하더니 정답으로 가는 무빙을 보여줌

알리바바가 밝힌대로 한번 삼천포로 빠지면 루프에서 빠져나오는데 어려움을 겪는걸로 보임

[ㄴㄱ(tiger0003)]

4o o1 1121은 틀린문제임?

[익명(121.178)]

테스트 결과 본문 추가함

[익명(59.12)]

Qwen이 수학 존나기깔나게잘하긴하더라

[DNA(hexase1)]

[디시콘발사대(fcbjsjmu1t9f)]

[익명(221.147)]

미적 29번도 부탁해요!!!

[익명(landofooo)]

QwQ 이거 귀엽내

[고개를전라전라(needle4620)]

4o mini랑 gpt 3.5 도 테스트 해줘.

[다들응원한다(chamber2035)]

작문도 32B 치고는 굉장히 좋더라

[익명(220.78)]

따거 ㄷㄷ