https://m.dcinside.com/mini/linear/10116

GAIA: 일반 AI 보조자에 대한 벤치마크 - 선형주의 미니 갤러리

https://huggingface.co/gaia-benchmark gaia-benchmark (GAIA)gaia-benchmark (GAIA)huggingface.coGAIA: a benchmark

m.dcinside.com


특갤에는 아무도 안올리길래 내가 선갤에서 퍼옴
특갤의 기존 벤치마크인 mmlu에서 gpt4가 7샷으로 94% 찍어서 gpt5는 최소 97%이상으로 예측되는지라 튜링테스트에 이어서 mmlu도 쓸모없어졌는데 아마 gpt5부터는 GAIA가이아가 새로운 지표가 될듯?
가이아로 측정했더니 인간이 92프로, gpt4가 15프로 나왔다고 함 아마 이 벤치마크 마저도 92프로 찍어버리면 그냥 agi로 인정하지 않을려나