[📪정보] 실제 연구 수준의 추론 능력 측정 벤치

[익명(121.190)]

https://arxiv.org/pdf/2507.13337 

[익명(175.118)]

그록은 ㅅㅂ 뭐임? ㅋㅋㅋ

[ㅇㅇ 2(175.215)]

나머지는 @10이긴 한데 지금 보는 상으로는 o3 pro가 그나마 낫네

[GoJoengNik(winner1918)]

[익명(lucky3767)]

단 0퍼센트

[Weisser_Adler(adler1)]

[Weisser_Adler(adler1)]

이런건 정복해야 진짜로 뭔가 격변이 일어나거나 할 듯

[ㅇㅇ 1(119.197)]

항상 내가 느끼는 거랑 비슷하네. 논문에 수록된 그래프조차 제대로 해석하지 못하는데 연구에 어떻게 도움을 줌? 트위터에선 컴맹들이 이미 ASI 달성인 것처럼 떠드는데 위화감만 느낌

[ㅇㅇ 3(121.158)]

이미지는 좀 별개임. 그리고 그걸 해결 못 했을 가능성보다, 비용 문제로 서비스하는 모델들에만 안 풀었을 가능성이 높을 걸

[익명(211.60)]

저게 되면 진짜로 혁명적인 변화가 있을 것이야...

[익명(patient3723)]

버러지새끼들 밖에 없네

[익명(cleep00001)]

실제 연구라면 이럴줄 알았음ㅋㅋ 그냥 개병신임

[해당 댓글은 삭제되었습니다.]

해당 댓글은 삭제되었습니다.

[익명(121.165)]

특화는 별개임

[디시콘발사대(fcbjsjmu1t9f)]

[익명(121.133)]

특이점 오려면 이런 벤치에서 고득점을 내야지 지금까지는 사실상 자동화 툴에 불과하긴 했음

[ㅇㅇ 5(175.124)]

ㄹㅇㅋㅋ

[츠루히메.(tkdwjd96337d)]

ㅆㅂ 뭐 인류 최후의시홈 거의 다정복햇다며 이건 또뭔데 시즌1738939284848호 최후냐 - dc App

[익명(119.70)]

시험과 연구는 별개라는 것ww

[ㅇㅇ 4(14.52)]

박사급 지능어디감... 알트만 게이야!!

[qtwk(outrage3078)]

실제 연구에 써보면 도움되는 답변 한방에 나오는 경우는 거의 0프로에 수렴함. 몇번 프롬프트 쳐서 AI가 잘할 수 있는 종류의 일을 찾아서 던져줘야 함.

[ㅇㅇ 5(175.124)]

이게 맞다

[ㅇㅇ 6(222.233)]

겨울을 넘어 빙하기네 걍

[물고기대가리(contest8201)]

겨울이고 나발이고 무슨 이제 박테리아들 태어나고잇누 - dc App