보통 오픈소스는 대기업에서 굴리는 모델보다 연산량 압도적으로 작잖음
이 훨씬 적은 연산량으로 같은 성능을 달성했다는 말임?
모델 크기랑 오픈소스랑은 관련성이 없음. 근데 이번에 gpt 3.5보다 가벼운 모델이 벤치마크상 gpt4를 따라잡은건 맞음
말이댐? 씨발 오픈AI보다 실력 좋은 애들이 있는거임 그럼?
말이 오픈소스지 다 gpt4 파인튜닝으로 만든거라 사실상 다 gpt4짭임
원래 스케일 키우는거 계속 키우기만 하는게 아니라 키우고 줄이고의 반복임. 가벼운 모델이 툭하고 나오는게 아니라 Gpt4가 어느정도 키우는걸 해줬기에 줄여서 나온 오픈소스라고 생각하면됨. Openai보다 더 쩌는 기술을 가졌다! 이런거는 아님.
모델 크기랑 오픈소스랑은 관련성이 없음. 근데 이번에 gpt 3.5보다 가벼운 모델이 벤치마크상 gpt4를 따라잡은건 맞음
말이댐? 씨발 오픈AI보다 실력 좋은 애들이 있는거임 그럼?
말이 오픈소스지 다 gpt4 파인튜닝으로 만든거라 사실상 다 gpt4짭임
원래 스케일 키우는거 계속 키우기만 하는게 아니라 키우고 줄이고의 반복임. 가벼운 모델이 툭하고 나오는게 아니라 Gpt4가 어느정도 키우는걸 해줬기에 줄여서 나온 오픈소스라고 생각하면됨. Openai보다 더 쩌는 기술을 가졌다! 이런거는 아님.