2월에 나왔다는데 생각보다 좋네
그록4는 좀 압도적 소타 기대해도 되나 저당시 그록3가 압도적 소타엿겟지?
| 테스트명 | Grok 3 (기본 / 추론 모드) | OpenAI o3 |
|---|---|---|
| MMLU (상식+학문) | 79.9% | 85.6% ✅ |
| AIME 2024 (수학) | 52% / 93% | 96.7% ✅ |
| GPQA Diamond (과학) | 75% / 85% | 87.7% ✅ |
| SWE-bench (코딩) | 공개 안됨 | 71.7% ✅ |
2월에 나왔다는데 생각보다 좋네
그록4는 좀 압도적 소타 기대해도 되나 저당시 그록3가 압도적 소타엿겟지?
| 테스트명 | Grok 3 (기본 / 추론 모드) | OpenAI o3 |
|---|---|---|
| MMLU (상식+학문) | 79.9% | 85.6% ✅ |
| AIME 2024 (수학) | 52% / 93% | 96.7% ✅ |
| GPQA Diamond (과학) | 75% / 85% | 87.7% ✅ |
| SWE-bench (코딩) | 공개 안됨 | 71.7% ✅ |
그록이 2.5 나오기 전까지만 해도 전방위적으로 쓸모있었음. 한도도 존나 널널했고. 근데 2.5 나오면서 전방위적으로 퇴물됨