[일반] 3.8b 모델하면 엄청 작아보이는데 이것도 학습하는데 오래걸림

[익명(110.145)]

phi-3 3.8b모델도 h100 512대로 7일 걸려서 만든건데

요즘 하도 큰 모델들 많아서 이게 작아보이는 착시가

[익명(106.101)]

애초에 llm시초인 BERT 파라미터가 0.34b니... - dc App

[익명(119.207)]

굉장하네