[일반] 근데 또 필연적으로 신규 벤치 소개하고 자랑할 듯

[트라야누스(14.32)]

https://youtu.be/vF5Hg59TEDs

자... 이번 GPT-4.5 개발을 맡은 인물들 중 한 명인 어쩌고 저쩌고 씨를 소개하겠습니다

'안녕하세요' '예, 안녕하세요 저는 이번에 어쩌고 저쩌고 파트를 맡은 어쩌고 저쩌고입니다'

저희는 이번에 새로운 벤치마크 어쩌고 저쩌고를 만들었고 성능을 체크해보니 너무 놀라웠습니다

(그래프 사진 띄우면서) 이전 단계였던 o3 mini high에 비해 월등한 성능과 비용절약이 가능합니다

[ㅇㅇ 1(121.131)]

근데 그건 해야될거같음 지금 벤치마크가 너무 stem쪽에 몰려있어서

[트라야누스(14.32)]

아니 차라리 뭐 동일 질문들을 주기적으로 똑같이 올려서 이전 버전이랑 답변 비교해보면 안 되나

[할랄라루와이(overlap4546)]

근데 벤치딸 안하면 성능을 정량적으로 보여줄 만한게 없긴 함 푸키먼 1시간 컷 이런거면 몰라도

[트라야누스(14.32)]

근데 느낌이 뭐냐면 초사이언 되기 전에 계왕권 20배 어쩌고 타령하는 듯 함

[할랄라루와이(overlap4546)]

글킨함 기존 sota모델을 3점 차이로 추월했다, x점 차이로 추월했다 실제로 느껴지지는 않으니까

[트라야누스(14.32)]

필드에서의 성과를 보여주는 게 더 뚜렷할 거 같음

[ㅇㅇ 2(121.133)]

일반인들 체감도르에서는 포키몬 1시간 컷이 맞긴함

[트라야누스(14.32)]

솔직히 말해서 현직 개발자들 제외하고는 신규 벤치마크의 의의를 알기도 힘들 듯