ebs 중학교 1학년 대상 문해력 테스트를 시켜봤는데
전에 gpt4의 취약점으로 지적된 부분이랑 같은 약점이 나와서 올려봄
https://literacy.ebs.co.kr/yourliteracy/literacyTest/step5/literacy
문해력 테스트미래 핵심역량인 문해력을 키울 수 있는 EBS의 다양한 문해력 콘텐츠를 한 곳에서!...literacy.ebs.co.kr이걸로 테스트 해봄
gpt4 결과
추론 능력이나 정보파악 능력 같은 그냥 글을 이해하는 능력은 해당 테스트에서는 만점이 나왔는데
의외로 어휘부분이 약함 저번엔도 gpt4한테 언어 시험 테스트 할때 다른 문제는 프롬프트 좀 만지면 정답률 낮은 문제도 맞추게 할 수 있었는데 어휘문제가 까다로웠다는 글을 본적이 있음
openAi가 그런건 금방 해결할껄 영어로 해보면 또 성능 좋게 나올 수도 있음 한국어가 유독 힘든 언어긴 함 GPT 5 나오면 점수가 역전되어 있을 듯
128k로 해봤는데 어휘 2점 ㅋㅋㅋㅋ