[📪정보] 해외 유명 개발자가 벤치마크 만듦

[초존도초(htr3c654r6ft)]

정확히 어떤 질문인지는 모르겠는데 총 210개의 질문... 문제를 냈다고 함

벤치 링크

세부 정보는 곧 공유하겠대

[노암브라운(contend3854)]

[해당 댓글은 삭제되었습니다.]

해당 댓글은 삭제되었습니다.

[초존도초(htr3c654r6ft)]

기술 용어? 라는 단어가 힌트 같은데 그록4가 비용 둘째치고 성능 좋게 뽑히는 거 보니까 뭔가 STEM 관련 질문이 아닐까

[ㅇㅇ 1(211.105)]

HLE 나가리 돼서 이런 벤치라도 인용해야겠노

[초존도초(htr3c654r6ft)]

HLE도 보고, 실사용 벤치도 보고 하면 좋을 듯

[VBKO(abko121115)]

뭐야 o3가 gem 2.5보다 싸네?

[배급견이될래요(aware9711)]

[익명(compact5711)]

문제에 대한 해답은 o3랑 2.5 프로가 더 잘내놨었으니 그렇게 나왔고, 그 와중에 2.5 프로는 해답을 고봉밥으로 얹어놔서 토큰 비용이 더 든게 아닌가 싶네

[ㅇㅇ 2(210.222)]

애초에 2.5pro보다 o3가 절반정도 저렴함

[익명(compact5711)]

@ㅇㅇ2(210.222) 아 가격 팍 내렸었지

[익명(grass8185)]

슬 GPT5 나오는데 아직도 o3가 1황이노

[ㅇㅇ 3(175.199)]

o3 또 1황 ㅋㅋㅋㅋㅋ

[ㄷㅋㄷㅋ(hydoki)]

다필요없고 imarena 가 일상용으로 제일 정확함

[초존도초(htr3c654r6ft)]

lmarena 주작 너무 쉬워서... 요즘 리뉴얼해서 좀 나아진 거지만 그래도 아직 주작 가능

[ㅇㅇ 4(125.143)]

imarena 이러고 있노 ㅋㅋㅋㅋㅋㅋ

[멘토스(gblzvhbddpj2)]

[야하이잇(dignity123)]

벤치 세부내용 뭐 공개한게 없네..

[익명(hyeongim264)]

뭘로 테스트한건지 공개했으면 좋겠네

[가나밀크티(ganamilktea)]

공개 안하면 걍 어그로임

[ㅇㅇ 5(121.135)]

어디 듣보가 만든거까지 갖고오노..옆집 개가 만든 벤치마크도 갖고와봐