본문 바로가기
숨터 가볍게 읽는 공간
이미지 차단
전체 베스트 최근
← thesingularity 게시판

[일반] 로컬모델중 gpt-3.5보다 파라메타 큰 모델 있음

익명(b93041025) 2023-12-06 19:12 추천 3


https://huggingface.co/tiiuae/falcon-180B

tiiuae/falcon-180B · Hugging Facetiiuae/falcon-180B · Hugging Facehuggingface.co


이걸 로컬로 불러야 할지 모르겠지만 팰콘180b 모델이 3.5보다 파라메타는 큼


3.5조 토큰으로 학습시킴 (라마2 70b가 2조 토큰)


문제는 저거 돌리려면 a100 80g짜리 8개 필요함

댓글 0

  • 아직 댓글이 없습니다.

다른 게시글

  • 지금 돌아가시는 분들 보면 참 안타까움 [1]
    [일반] 익명(61.75) | 23.12.06
    추천 3
  • 아이폰 처음나왔을때 획기적이었지만 저거 비싼데 언제삼? [2]
    [일반] 무인초중전..(sovetskysoyuz) | 23.12.06
    추천 0
  • 뭐냐 얀르쿤이 이름이었음? ㄷㄷㄷ [5]
    [일반] 익명(zmfhtmzhem) | 23.12.06
    추천 1
  • 소크라테스 선서처럼
    [일반] 익명(122.45) | 23.12.06
    추천 0
  • 지금 대학 저학년, 고딩들은 패닉에 빠질 때가 오긴 할듯 [9]
    [일반] 익명(daesanghyeok) | 23.12.06
    추천 10
  • 어떻게 사람 이름이 얀르'쿤'ㅋㅋㅋㅋㅋ [2]
    [일반] oo(1.231) | 23.12.06
    추천 0
  • 10년전에 혼자 gpt-4 쓸수 있었으면 [4]
    [일반] 익명(b93041025) | 23.12.06
    추천 0
  • gpt4 초대 코드가 뭐임? [1]
    [일반] 익명(112.163) | 23.12.06
    추천 0
  • 아니 여전히 차등이 있다고 쳐도 전유물이 될거같음? [8]
    [일반] 무인초중전..(sovetskysoyuz) | 23.12.06
    추천 0
  • GPTs에 knowledge 넣어둔거 자꾸 사라지는데 원래 이럼? [1]
    [일반] 익명(atasi) | 23.12.06
    추천 0
목록으로
읽기 전용 미러