일단 현재까지 내가 결과설문을 확인한 학교들을 중심으로 시험직후 설문조사 결과 -> 결과예측(예상)에 대한 부분을 한번 이야기해봄
사실 논술에선 설문조사를 가지고 정확한 컷 예측을 한다는 것은 불가능한 것은 당연히 알 것
수능처럼 대규모 데이터를 모을 수 있는 것도 아니고 근본적인 가장 큰 문제점은 객관식/단답형이 아니라 답변과 실제와의 괴리가 있다는 것이지
즉 애초에 정확한 점수를 아무도 모르기 때문에 정확도에 한계가 있지
그러나 그렇다고 설문조사 하는게 의미가 없느냐? 그건 아님(설문조사 의미 관련 -> https://gall.dcinside.com/mathlogic/51314)
여기 적었듯이 어느정도의 윤곽을 잡기에는 충분히 유의미하지
그런데 예상범위를 좀더 좁히는 과정에는 여러 변수들이 작용하게 됨
개인적으로 가장 중요한 변수는 답변자들의 수준과 실질경쟁률이라 생각
만약 A학교 설문을 했는데 답변자들의 수준이 실제 시험치러온 애들 중 상위권들만 지나치게 답변했다면 결과를 과대평가하기 쉽고 반대의 경우(성적이 낮은 사람들이 지나치게 답변) 과소평가하기 쉽겠지
다행히 수논갤의 경우 이러한 측면에선 어느정도 밸런스가 적절하다고 봄(대부분의 학교에서)
또 같은 결과에 대해서도 경쟁률이 높다면 예상되는 지점을 높게 설정하는 것이 합당하고 반대의 경우 낮게 설정하는 것이 합당하겠지
# 홍익대
최종 118명 응답 그래프, 답변인원은 매우 충분해서 충분히 각 문제별 경향성을 얻는 것에는 문제가 없음
이 그래프를 보면 경쟁률이 웬만큼 낮거나 너무 상위권들만 답변했던 것이 아니라면 일단 1-1, 1-2, 1-3, 2-1, 2-2, 2-3, 3-1 정도는 합격을 위해서 풀어야겠다 라는 생각이 직관적으로 들지 (물론 여기에서 못푼게 있다고 안되는건 아니지만 대신 남들이 못 풀은 문제에서 벌충을 했어야 하겠지)
반대로 3-3과 같은 것은 경쟁률이 웬만큼 높거나 너무 하위권들이 답변했던 것이 아니라면 합격에는 거의 영향을 주지 않겠다 라는 생각이 들지
* 내가 위와 같이 문제별 난이도 분류하는걸 그래프의 모양만 가지고 판단하는데 이는 너무 직관적이지 않느냐? 당연히 직관적인 것
굳이 좀더 객관화해 본다면 평균응답률(A=1, B=2/3, C=1/3, D=0의 가중치를 두고)과 같은 index를 계산하여 0.7 이상이면 쉬운 문제, 0.3~0.7이면 중간 문제, 0.3 미만이면 어려운 문제 이런 식으로 분류해볼수 있겠지
근데 이것도 cut-off line을 어떻게 두는지가 결국 문제이므로(가령 쉬운 문제와 중간 문제의 구분기준을 0.7 정도로 보는게 맞냐, 아니면 0.8 정도로는 봐야 하냐와 같은) 근본적으로 큰 차이는 없음
한편 1-4, 2-4, 3-2와 같은 중간 난이도 문제는 그래프를 고려하면 여기에서 얼마나 풀어야 하는지를 결정하는 것은 앞서 말한 변수들을 고려해야 한다고 봄
만약 경쟁률이 많이 낮다면 못 풀어도 되는 경우가 발생할 수도 있고 경쟁률이 높다면 대부분 풀어야 할 가능성이 높겠지
그리고 결과적으론 최초합 기준으로는 이들 3개 중 2개 정도는 해결해야 하는 정도로 나온 상황(단 홍대는 추합이 상대적으로 꽤 도는 편인 학교이므로 좀더 달라질 가능성이 있긴 하지)
홍대는 최저충족률을 모르니 실경쟁률이 얼마가 될진 모르겠지만 이번에 전반적으로 명목경쟁률이 20:1 정도 되었고 응시율이 약 90%(수능전 시험이므로 거의 다 올것), 최저충족률은 약 30~40% 정도(다른 비슷한 학교의 알려진 최저충족률을 고려할시)로 본다면 실경쟁률이 6~7:1 정도는 되는 셈인데
이정도의 실경쟁률이 나와도 중간 난이도 문제로 분류된 것을 상당수 풀어야 하는 것인가? 인지는 지금도 좀 애매하긴 하네
# 경희대
경희대의 경우는 https://gall.dcinside.com/mathlogic/59216 에서 내가 앞에서 말한 평균응답률을 한번 계산해 보았는데 그 이유는 모든 문제가 그래프상으로는 쉬운 문제(2-2가 좀 애매하긴 하지만)로 보였기 때문
결과적으로 2-2도 0.76으로 상당히 높았고 나는 지금까지 진행한 설문을 통해 본 바로는 보통 0.7 이상이면 풀어야 하는 문제로 분류해볼수 있다고 생각이 되기에 결국 모든 문제가 풀어야 하는 문제가 된 셈이지
또한 경희대는 실질경쟁률도 결코 낮은 편은 아니기에 이를 낙관적으로 보기에도 힘든 상황이지
그러나 이걸 아예 백지를 냈거나 중간에 풀다가 말면 힘들 가능성이 높다 수준의 이야기이지 풀이가 거의 다 맞고 막판 답 계산만 틀린 것 하나라도 있으면 안되는 수준이라 라고 보기에는 어려움
보통 자기 생각에 풀이가 얼추 맞고 답이 맞으면 A라고 답변을 할텐데 이들이 감점이 없다는 보장은 전혀 없으니까
또 모든 학과에서 이럴 것이라고 말하는 것도 불가능하지(전체 학과 통틀어서 평균적으로는 이렇다고 말할수 있을 뿐 일부 성적이 낮은 학과는 당연히 있을 수 있지, 2024에도 그랬듯이)
# 과기대
위 두 학교는 그래도 갤 분위기 및 설문결과, 그리고 실제 결과들이 서로 어느정도 합치되는 면이 있긴 한데 올해 과기대의 경우 서로 대치되는 면들이 있어서 판단이 어려운 케이스라고 생각됨
우선 갤 분위기는 적어도 작년보다는 확실히 어렵다가 대세였고 또 1-4가 결과적으론 역대급 킬러 문제가 되어 이거까지 고려하면 컷이 작년보단 내려갈 것이다가 대세였지
일단 내가 문제를 풀어보니(https://gall.dcinside.com/mathlogic/54900) 작년 3-3, 3-4와 같은 문제가 없었기 때문에 1번이 어렵긴 하였으나 작년보다는 점수가 어느정돈 오를것 같다는 생각을 했고 따라서 솔직히 갤 분위기가 약간 이해가 안가긴 했으나, 내가 풀어본 것보다는 아무래도 시험 당사자들의 느낌이 당연히 좀더 정확할 수밖에 없기에 나도 확신을 할순 없어서 분위기에 맞춰서 적은 감이 있긴 함(=점수가 약간은 떨어질 것 같다)
그런데 정작 설문(https://gall.dcinside.com/mathlogic/55981)에서는 보이는 결과가 갤 분위기랑은 좀 달랐고 그래서 내가 처음에 문제를 풀어보고 든 생각이 좀더 설득력이 있다고 판단되어 이전에 작성한 의견을 바꾸게 됨(=약간 점수가 오를 가능성이 높아 보인다)
물론 설문을 통한 난이도 비교에서는 어렵다는 평이 대세이긴 했는데 갤 분위기에 비해선 좀 미온적인 정도였고 보통 미응시 시험 난이도를 과소평가하고 응시 시험 난이도를 과대평가하는 것을 고려하면 작년과 비슷~약간 어려움 정도로 보는 것이 맞아 보임
특히 가장 핵심인 문항반응 그래프가 1-4를 제외하면(이건 초반에 36이 맞다고 생각하는 데이터들이 들어와서 오히려 과대평가 되었음) 전반적으로 쉬웠다는 식으로 나옴
평균응답률을 당시엔 계산하진 않았는데 지금 한번 계산해보면 아래와 같음
앞서 말한 0.7을 기준으로 본다면 3-2, 3-3은 쉬운 문제였다고 보긴 어렵지만 거의 그에 근접하긴 정도이긴 하지
그래서 1-4만 36으로 했거나(이건 확신할순 없지만 아마 2~3점 정도의 부분점수는 있을 가능성이 있다고 봄; https://gall.dcinside.com/mathlogic/55320) 못 푼 것 외에 이 문제들을 어느정도 풀어야 하는가? 에 대해서 생각해볼수 있는데
과기대는 작년과 명목경쟁률이 거의 비슷했고 작년 실경쟁률이 38.2:1로 앞 학교들에 비해서 확실히 높은 편
즉 높은 경쟁률을 고려하면 3-2, 3-3 정도의 응답률이라면 사실상 둘다 풀어야 하는, 결과적으로는 1-4 제외하고는 얼추 풀었다는 느낌이 나야 합격할 수 있겠다 라는 생각도 해볼수는 있지
현재까지 설문조사상 모인 데이터도 최초합 기준으론 거의 그렇긴 함(물론 한두 문제는 B라고 응답한 애들이 상당수이긴 함)
개인적으로 과기대의 경우는 갤 분위기보다 설문조사의 정확도가 높았고 따라서 설문조사가 파편화된 증언을 객관적으로 모아서 보여주는 효과가 있음을 파악할 수 있는 예라고 생각됨
즉 설문조사를 통해서 본 결과를 좀더 신뢰해볼수 있다는거지(물론 대부분의 경우는 비슷하긴 하지만 이번처럼 다를 경우에는)
결과적으로는 기본적으로 설문조사에서 높은 응답률을 보인 문제 중 일정 이상 못푼 것(특히 답만 틀렸다 수준이 아니라 중간에 풀다 말았거나 백지이거나 하면)이 있으면 낙관적으로 보기 힘들다는 것, 그리고 확실히 어려운 문제는 못 풀어도 괜찮다 정도는 확실하고
적당한 수준의 문제들도 경쟁률이 높다면 대부분 풀어야 하는 방향이다 정도로 이해하면 될것 같음
댓글 0