다른 기업들도 따라 붙고 있는건 어느정도까지는 눈치깐거 아님? 최전방 테크닉까지는 몰라도?
익명(221.148)2023-12-20 14:34
open ai에만 옵티머스 프라임이 있어서
익명(zj3vkt7x21xn)2023-12-20 14:31
모르징. 다만, 스케일의 법칙이 있어서 모델이 커지기만 해도 성능 향상이 있었고 돈을 쏟아부음.
그렇다고 단지 크기만 키우면 되는 건 아닌 듯. 바드보면 알 수 있음.
하지만, 구글은 쉬었고, openAI는 크기 키운 상태로 온갖 노력을 다 한 거 같음. 거기에 뭔가 돌파구가 있지 않았을까.
GPT3부턴 논문 공개도 안 해서 이유도 모름.
정리하면, 수백,수천억을 쓴 LLM을 제일 먼저 만들고 연구해서 그런 거 아닐까. GPT4가 작년말에 훈련 완료했다는데, 다른 LLM들은 이제 쫓기+상대적으로 작은 모델을 최적화,경량화 시키는 쪽으로 전략 수정.
익명(175.206)2023-12-20 14:45
오픈ai는 마소 지원빨이니까 딴 스타트업은 고려할 필요가 없고 비교할거면 왜 구글은 오픈ai처럼 못했냐인데 - dc App
익명(rechido)2023-12-20 14:46
답글
구글은 대기업이고 오픈ai는 중소인게 오히려 오픈ai가 빠르게 치고나갈 수 있던 원동력이란 얘기를 들늠 - dc App
그걸 알면 다른기업도 만들었지
다른 기업들도 따라 붙고 있는건 어느정도까지는 눈치깐거 아님? 최전방 테크닉까지는 몰라도?
open ai에만 옵티머스 프라임이 있어서
모르징. 다만, 스케일의 법칙이 있어서 모델이 커지기만 해도 성능 향상이 있었고 돈을 쏟아부음. 그렇다고 단지 크기만 키우면 되는 건 아닌 듯. 바드보면 알 수 있음. 하지만, 구글은 쉬었고, openAI는 크기 키운 상태로 온갖 노력을 다 한 거 같음. 거기에 뭔가 돌파구가 있지 않았을까. GPT3부턴 논문 공개도 안 해서 이유도 모름. 정리하면, 수백,수천억을 쓴 LLM을 제일 먼저 만들고 연구해서 그런 거 아닐까. GPT4가 작년말에 훈련 완료했다는데, 다른 LLM들은 이제 쫓기+상대적으로 작은 모델을 최적화,경량화 시키는 쪽으로 전략 수정.
오픈ai는 마소 지원빨이니까 딴 스타트업은 고려할 필요가 없고 비교할거면 왜 구글은 오픈ai처럼 못했냐인데 - dc App
구글은 대기업이고 오픈ai는 중소인게 오히려 오픈ai가 빠르게 치고나갈 수 있던 원동력이란 얘기를 들늠 - dc App
해당 댓글은 삭제되었습니다.
rlhf 말하는거지?