그런데, 언어모델들한테 이미지 관련 test를 하는 건 좀 어긋났다고 생각함.
쟤네들은 아직 멀티모달이 아니라, 이미지를 텍스트로 변환하고 응답할 가능성이 높아서. 이미지 인식에 문제가 있을 가능성이 높은거지, 모델의 언어나 지능에 문제가 있다고 보긴 힘드니까.
3.9랑 3.11 문제는 토크나이저 문제니까 '언어'모델의 문제라고 할 수 있겠는데, 갤에 올라오는 이미지 test들은.....좀 가혹한 것 같은데
ㅇㅇ 2(222.113)2025-04-19 16:42
답글
이미지를 텍스트로 변환하는게 아니라 이미지도 같이 인코딩 되어서 토큰화 되는거임.
시각 언어 모델이기 때문에 시각적 정보 처리 능력도 중요함
굿!
쩌 엉
그런데, 언어모델들한테 이미지 관련 test를 하는 건 좀 어긋났다고 생각함. 쟤네들은 아직 멀티모달이 아니라, 이미지를 텍스트로 변환하고 응답할 가능성이 높아서. 이미지 인식에 문제가 있을 가능성이 높은거지, 모델의 언어나 지능에 문제가 있다고 보긴 힘드니까. 3.9랑 3.11 문제는 토크나이저 문제니까 '언어'모델의 문제라고 할 수 있겠는데, 갤에 올라오는 이미지 test들은.....좀 가혹한 것 같은데
이미지를 텍스트로 변환하는게 아니라 이미지도 같이 인코딩 되어서 토큰화 되는거임. 시각 언어 모델이기 때문에 시각적 정보 처리 능력도 중요함