← thesingularity 게시판

[📪정보] 하루 만에 오픈소스 최고 성능 넘어...삼바노바, MoE 방식 모델 출시

니지카엘(eltldd001) 2024-03-31 19:37 추천 17

https://www.aitimes.com/news/articleView.html?idxno=158410

"하루 만에 오픈 소스 최고 성능 넘어"...삼바노바, MoE 방식 모델 출시삼바노바가 1초 만에 330개의 토큰을 처리하는 획기적인 인공지능(AI) 모델을 출시했다고 주장했다. 데이터브릭스가 '오픈 소스' 최강 성능이라는 ‘DBRX’를 출시한 지 하루 만에, 이를 뛰어넘었다는 설명이다.DBRX는 단일 모델을 사용하는 대신 '전문가 혼합(MoE)' 방식으로 여러 모델 중 일부만을 사용해 효율을 높이는 방식인데, 삼바노바 역시 소형모델 여러개 중 쿼리에 맞춰 필요한 모델만 '라우팅'하는 방식을 사용했다는 것이 특징이다.벤처비트는 28일(현지시간) AI 칩 제조 전문 삼바노바가 지난달 공개한 LLM '삼바-1'www.aitimes.com

댓글 0

아직 댓글이 없습니다.