제미니 공개 불과 일주일전에 나온 expert agi를 위한 멀티모달 벤치마크인데나온지 얼마안됐고 제로샷이라 다른 벤치마크에서 의혹나오는 것같은 정확도 장난질이 불가능함저자 본인들도 트위터 등판해서 미리 펀딩받았거나 얼리억세스 준거 아니라고 밝힘멀티모달 능력에서만큼은 확실히 제미니가 gpt4 앞선다고 볼수있음
수치 차이가 크지는 않네
프론티어 기업들한테는 내년부터 의미없어질 벤치마크이기는 한데 올해 기준이면 맞말
아 mmlu로 잘못봤네 이 벤치보다 가이아 벤치가 찐이라고 생각함 그건 그냥 자율에이전트 테스트나 다름 없던만