본문 바로가기
숨터 가볍게 읽는 공간
이미지 차단
전체 베스트 최근
← thesingularity 게시판

[일반] H100 GPU의 LLM 학습 시간 벤치마킹 공개

한성과고/Yo..(mlj85syva4dy) 2023-07-02 14:03 추천 4
7be98427e7d66df36fe886e74583706b1825b63d36f07ec06c93798e201807f08730ab670f3469267f66ec5e9262905e40ab11cca10ee5c3f60a37a19fb5ad5ccc78fa6e0220ea90d20a3652



https://www.mosaicml.com/blog/coreweave-nvidia-h100-part-1

Benchmarking Large Language Models on NVIDIA H100 GPUs with CoreWeave (Part 1)The research and engineering teams here at MosaicML collaborated with CoreWeave, one of the leading cloud providers for NVIDIA GPU-accelerated server platforms, to provide a preview of the performance that can be achieved when training large language models (LLMs) with NVIDIA H100 GPUs on the MosaicML platform.www.mosaicml.com


대충 H100 사용시 A100보다 최소 2.2배 ~ 최대 3.3배 빠른 학습 시간으로 돌릴 수 있다는 뜻



현재 클라우드 GPU 시간당 가격
H100 SXM GPU 시간당 $4.76(/hrGPU)
A100 80GB GPU 가격$2.21(/hrGPU)

댓글 1

  • 오 유찬좌 돌아왔누

    ㅇㅋ(ijh2005) 2023-07-02 15:56

다른 게시글

  • 왜 빙만 멀티모달 나오냐??
    [일반] 익명(1.249) | 23.07.02
    추천 0
  • 오 빙 이미지분석 좋네
    [일반] 콜라조무사(tkatjdrhdghkrnr123) | 23.07.02
    추천 0
  • 존버575일차
    [일반] alphaca(qqq0101kr) | 23.07.02
    추천 0
  • 딥러닝 궁금한점 [6]
    [토의] 익명(121.183) | 23.07.02
    추천 0
  • AI 만능주의자들인 특갤러들은 우주의 기원이 뭐라고 생각함??? [20]
    [일반] 익명(good110) | 23.07.02
    추천 1
  • 배양생선이 참 기대됨 [3]
    [일반] 유람(eba1eba) | 23.07.02
    추천 2
  • 사이버펑크처럼 임플란트하는날도 올까.. [1]
    [일반] 익명(104.28) | 23.07.02
    추천 0
  • 빙 이미지인식 나만안됨? [1]
    [일반] 익명(218.156) | 23.07.02
    추천 0
  • 빙 멀티모달 미쳤다 [18]
    [일반] 연맛(ejrtksfl2) | 23.07.02
    추천 20
  • 오랜만에 챗 GPT 하는데 얘 왤캐 빨라짐? [2]
    [일반] 익명(tjvmfkwm159) | 23.07.02
    추천 0
목록으로
읽기 전용 미러