내가 쓰는 나만의 벤치마크 있는데 파이썬 코드와 문제 상황을 주고 원인을 찾게 시키는거임
나는 원인을 알고 있음 이 원인을 찾으려면 사람 기준으로 두 단계를 거쳐서 추론해야 하는데
gpt5.1high만 완벽하게 추론해서 이유를 맞췄고
잼3 opus 4.5 sonnet 4.5는 사람기준 1단계 추론까지만 성공하고 2단계까지는 추론하지 못해서 진짜 원인에 도달하지 못함
내가 쓰는 나만의 벤치마크 있는데 파이썬 코드와 문제 상황을 주고 원인을 찾게 시키는거임
나는 원인을 알고 있음 이 원인을 찾으려면 사람 기준으로 두 단계를 거쳐서 추론해야 하는데
gpt5.1high만 완벽하게 추론해서 이유를 맞췄고
잼3 opus 4.5 sonnet 4.5는 사람기준 1단계 추론까지만 성공하고 2단계까지는 추론하지 못해서 진짜 원인에 도달하지 못함
그냥 3개 다 쓰면 되는거 아님?
코맥도 안씀?
뭐야 잼3 opus 4.5 아직 멀었노