네이버가 선두로 비전 인코더는 가져다 써서 기준 테스트 해준거고,
결국 살아남은 lg, sk, 업스는 멀티모달할때 모달리티 인코더들 바닥부터 짜야하는게 명확해진건데
최소한 비전 인코더 스크래치부터 제대로 굽는건 메타 급 레벨에서나 가능함.
llm은 학습 레시피들 많이 풀리기도 해서 리소스 엔지니어링으로 풀 수 있는 정제 많이된 오픈 텍스트 + align 데이터가지고 어느정도 따라할 수 있는 llm과는 달리
비전 인코더는 연구 레벨에서조차 스크래치보다 다른 인코더들 섞어서 많이 써왔고, 진짜 스크래치 제대로 보여준데는 오픈소스 메타 외에는 없음 (예시로 qwen 비전 인코더도 연구 계보들 쭉 따라감) 비전 인코더는 학습 리소스 엔지니어링 외에 연구 레벨에서 쥐어짜야하는게 엄청 많고, dino train code 대충 가져다 쓴다고 재현되는게 아님
이거 제대로 할 수 있는데는 lg?에서 정도로나 보이고 (연구자들 이력봤을 때) 업스나 sk에서는 가랑이 찢어질 확률이 오히려 높음
멀티모달 전체를 프롬스크래치로 하라는거가 의도는 알겠는데 멀티모달 연구/프로덕션 트렌드 관점에서 이렇게까지 해야하나 싶음
독파모 목적이 원래 없는 국가 리소스 잘하는 놈 뽑아서 몰아주고 어떻게든지 따라가자는건데, 흑백요리사 보고 만들어낸거 같은 패자부활전이나 5팀->2팀 선정하는 리소스 분산시키는 선발과정을 보고 있으면 뭐하는건지 싶다 ㅋㅋ
맞말임 뭐 패자부활전은 그래도 기회를 주겠다는 의도였는데 뭐... 복잡하게 얽힌 이해관계가 있겠지 설마 자존심 때문에 안하겠다고 한 거 같진 않음
멀티모달 인코더들을 바닥부터 만드는게 조건인 순간 빨리 탈출하는게 맞음. 이건 몇개월 걸려서 재대로 성능 낼 영역이 아님 ㅇㅇ
마즘 네이번데 뭐 정부사업에 목숨걸 필요가 있나
네이버도 안하는거보면 데이터없는거같은데 lg라고있을까? 엔지니어링이나 리서치영역 가기도전에 그냥 데이터없어서 파인튜닝한거라생각했는데
네이버는 회사입장에선 사업유지만되면 gpu공급으로 돈벌면 개이득이고 클로바팀은 숫자 줄이면 되서 또 이득아님? - dc App