[일반] 여기 머하는데고?

[익명(115.138)]

리더보드에서 Self Report가 아니라 직접 공식랩에 의뢰해서 나온 점수임 (지난번 짝퉁처럼 조작한게 아님)

그래서 Arx를 어디서 만들었는지 찾아봄

이거밖에 못찾았다. AGI 회사에서 만들었데

갑자기 뜬금없이 이런게 나오네?? 심지어 조작도 아냐 공식 기관에 의뢰해서 나온 점수

[익명(39.117)]

회사명 Applied General Intelligence, 텍사스 오스틴, 직원 2~20명
https://www.linkedin.com/company/applied-general-intelligence/about/
cto인 토마스베이커는 산호세주립대 전기전자공학학사 18년 졸업

[12eueu(49.169)]

이런모델이 저런 듣보에서 갑자기 툭 나올수는 없고 내 생각엔 3.5 소넷기반 프롬프트 먹인 API로 장난질 한게 아닐까 싶네

[익명(115.138)]

장난질했다기에는 소넷하고 점수 차이가 꽤 나던데?

[12eueu(49.169)]

근데 점수가 하나같이 소넷에비해 약간씩 높잖슴 점수가 듣보 회사이기도하고 일단 의심되긴해 다른 llm이랑 비교하면 어떤 분야에서는 약간 낮다던지 그러면 모르겠는데