[일반] 터보 이 벤지마크는 좋아졌다는데 코딩

[익명(123.100)]

점수 개많이 오르긴했는데

벤치마크 오염가능성도 있기는 함

- dc official App

[익명(1.244)]

데빈 어디감?ㅋㅋㅋㅋㅋㅋㅋ

[익명(123.100)]

데빈이 gpt4 터보임 - dc App

[익명(1.244)]

????

[익명(123.100)]

oai에서 오늘 올렸음 데빈 gpt4 터보 api 쓴거라고 - dc App

[익명(221.157)]

벤치마다 결과가 제각각이네 장난하냐

[익명(211.212)]

대체 뭐가 진실인거야 ㅋㅋ

[익명(59.11)]

밑에 한국어 벤치는 로그 보니까 한국어 질문에 카테고리별 질문 몇개씩 던지고 평가도 다른 LLM이 1-10으로 하던데 별로 믿을게 못될듯

[익명(222.117)]

한국어 벤치에서도 코딩 올랐는데 추론이 떨어졌다고 함

[익명(175.206)]

솔직히 벤치에서 믿을 만한 건 사용자 점수 밖에 없긴 했어. 모르겠다 기다려봐야지.

[익명(211.208)]

이거 대로라면, 작년 GPT4가 현재 클로드보다도 좋은데? 말이 안되지

[익명(222.117)]

ㄹㅇ 그랬으면 클로드로 갈아탈 이유가 없음