모델을 Parallel하게 만들구 loss까지 동일하게 학습한다는게 동시성만 빼고는 앙상블과 유사하게 느껴지는데 어떤 점이 다를까요?
[일반] Multi GPU 관련해서 질문드려용
익명(59.9)
2023-02-07 17:30
추천 0
댓글 1
다른 게시글
-
혹시 딥스피드 사용해보신분 계신가요? [2][❓질문] 익명(121.183) | 23.02.07추천 0
-
GPU가 CPU보다 계산속도가 빠른 이유가 [4][일반] 익명(118.36) | 23.02.07추천 0
-
딥러닝 pc견적좀... [5][일반] 딥린이(61.35) | 23.02.07추천 0
-
형들 분야는 어찌어찌 정했어?? [2][일반] 익명(125.140) | 23.02.07추천 0
-
대학원은 붙었는데 연구실을 못들감.. [19][❓질문] 익명(114.205) | 23.02.06추천 0
-
딥러닝판에서 살아남으려면 논문을 써야하는것인가 [2][일반] ㅇ(222.100) | 23.02.06추천 0
-
rx7900xtx[일반] 익명(39.7) | 23.02.06추천 0
-
글카 2050으론 택도없삼? [4][일반] 익명(110.70) | 23.02.06추천 0
-
k fold 교차검증에 대해서 이해가 잘 안가는게 [42][일반] tpptpp(tpptpp) | 23.02.06추천 0
-
견적 비교 부탁드려요! [29][일반] WTF(122.36) | 23.02.04추천 0
Backward시에 각각의 프로세스 모델에 쌓인 gradient를 프로세스간 통신으로 한번에 합해서 optimizer로 업데이트 아님?