리포트 읽는데 live bench류 제대로 테스트한 곳을 찾아볼 수가 없네
exaone이 그나마 나은데 이것도 live code bench 라이브 테스트 기록에서나 있고 아레나 같은데에선 볼 수가 없음
프랑스 모델, 일본 모델은 상위에는 못있어도 여러 라이브 벤치에 있는데 왜 당당한 세계 3위 한국 모델은 눈빼기도 안보이는지 모르겠음. api 돈 아까워서 안하나?
리포트 읽는데 live bench류 제대로 테스트한 곳을 찾아볼 수가 없네
exaone이 그나마 나은데 이것도 live code bench 라이브 테스트 기록에서나 있고 아레나 같은데에선 볼 수가 없음
프랑스 모델, 일본 모델은 상위에는 못있어도 여러 라이브 벤치에 있는데 왜 당당한 세계 3위 한국 모델은 눈빼기도 안보이는지 모르겠음. api 돈 아까워서 안하나?
LLM 벤치마크가 대략적인 성능은 알려줘도 절대적인 지표는 못된다는걸 오래전도 아니고 최근에 어느회사에서 증명해줬고만 꼬우면 업스테이지처럼 공개검증 요청하던가