[📪정보] gpt4o 한국 문화, 한국어 지능 평가

[특갤용(118wshxhtx5h)]

한국 문화, 한국어 언어지능 벤치마크 CLicK (https://arxiv.org/pdf/2403.06412) 결과

(CLicK 데이터셋 예시 : https://huggingface.co/datasets/EunsuKim/CLIcK/viewer/default/train?p=3&row=302)

https://github.com/corca-ai/evaluating-gpt-4o-on-CLIcK?tab=readme-ov-file

GitHub - corca-ai/evaluating-gpt-4o-on-CLIcK: Evaluate gpt-4o on CLIcK (Korean NLP Dataset)

[MoonChild(aowlr2001)]

[e/linear(extract4282)]

Opus 없는 게 아쉽긴 하네

[익명(zero7528)]

law, history 빼고는 한국어로 해도 무관하네 사회 경제 쪽은 거의 다 땄네

[익명(59.3)]

뭐하는 ㅂㅅ이길래 클로드2, 3.5 랑 비교하는거?

[특갤용(118wshxhtx5h)]

저 논문 나올 당시에 sota였습니다.

[익명(121.128)]

분명히 데이터가 더 나아졌다고 해주는데 왜 also때보다 체감상 별로 같을까

[익명(175.124)]

[익명(villager0555)]

한국어 데이터 많은게 느껴지긴 하더라 별의 별걸 다 알던데

[갤럭시빠(zkgxjfsgkxjrzkhc648)]

지랄 ㅋㅋㅋㅋ 클로드 2 뭐냐 - dc App

[익명(115.138)]

아니 할거면 클로드 3로 해야지 2는 좀...