Apple, 멀티모달 LLM 'MM1'에 대한 연구 결과 발표 (모델 공개X)PyTorchKR??? ?? 이번 주에만 두번째로 Apple의 소식을 전하게 되었습니다. ? Apple에서 이번에 VLM 및 시각 연역 추론에 대한 연구를 공개한데 이어, 효율적인 대규모 멀티모달 모델을 구축하는데 있어서의 연구 내용을 공개했습니다. 이 논문은 MM1이라 불리는 Apple의 M-LLM (Multimodal LLM)들을 연구하면서 나온 성과이며, 모델 코드나 가중치 등은 공개하지 않았지만 앞으로 Apple?의 행보가 기대되는 논문입니다. 아래 내용을 비롯하여 Multimodal LLM을 학습하시거나 튜닝하실 때 도움이 될만한 내용들이 많으니, 함께 살펴보시죠! Image Encoder Lesson: 이미지 해상도가 가장 큰 영향을 미치며, 모델 크기와 학습 데이터 구성이 그 뒤를 따릅니다. (Image resolution has the highest impact, ...discuss.pytorch.kr

아래는 질의응답 예시. 보면 꽤 똘똘해보이긴 함