3. Gemini팀의 주요과제는 가장 큰 모델이 GPT-4와 동일하거나 더 나은지 확인하는 것. 보고서에서는 구글이 그 기준을 충족했는지 여부가 확실하지 않다고 지적
3번항이 핵심내용인데 뭔가 확실한 표현은 안하는데 GPT4보다 성능이 떨어지거나 엇비슷하거나 혹은 뛰어넘어도 근소우위인듯한 분위기를 풍기지 않냐?
뭔가 자심감이 없잖아..
내 예상으론 적어도 유니콘까지 안가고 바이슨 버전에서는 gpr4를 커트 해야줘야 구글이 오픈ai랑 대등한 경쟁이 될거라고 내심 예상하고 있었는데 최고버전인 유니콘 버전으로 GPT4를 넘어서니 못넘어서니 ㅇ아직 여부가 불확실하니 이런얘기하고 있으니까 뭔가 오픈ai랑 LLM 기술격차가 당초 예상했던것보다 좀 많이 큰가.. 하는 생각이 든다.
오픈ai는 벌써 1년 다돼가는 gpt4인데 그리고 gpt5 대기중인데 1년전에 출시된 버전을 이기니 마니 별로 자신감결여된 사람마냥 여부가 불확실하다고 하니 이거 별로 안좋은 소식인데.. 경쟁이 맞는가..
그래도 트랜스포머 발명한 회사인데 기대심 잃지 말아야겠다만 암튼 기사내용 좀 충격적이네
원문 It was not clear if Google had met that standard, the report noted. 인데 구글이 그렇게 자신없게 말했다는게 아니고 그냥 정보출처가 자기들 모르겠다고 말한거임
원문 읽어보면 당연하지만 구글은 자기들 모델 성능에 기대가되고 어쩌구저쩌구 그런식으로 자신있게 말함
그럼 다행이네. gpt4 나온지 1년이 다돼가는데 이모델을 이기니 마니 씨름하면 안되지. 제미니 유니콘 버전은 기대해도 되겠네. 아마 mmlu 93점 이상 나오길.. 93점이 전문가 최상위권 점수라