여러가지로써보면 영어가 훨똑똑하더라
학습데이터차이는 걍넘사벽인듯
오픈소스만넘사가아니라 폐쇄형모델로 영어가훨씬좋음
영어아닌언어로 양자화하면 성능심각하게떨어진다고하고
https://m.dcinside.com/board/thesingularity/506168비영어권 언어의 경우 LLM 양자화시 성능저하가 심각https://arca.live/b/alpaca/112278154 양자화가 다국어 LLM에 어떤 영향을 미치는가? - Ai 언어모델 로컬 채널https://arxiv.org/pdf/2407.032111m.dcinside.com
학습데이터차이는 걍넘사벽인듯
오픈소스만넘사가아니라 폐쇄형모델로 영어가훨씬좋음
영어아닌언어로 양자화하면 성능심각하게떨어진다고하고
https://m.dcinside.com/board/thesingularity/506168비영어권 언어의 경우 LLM 양자화시 성능저하가 심각https://arca.live/b/alpaca/112278154 양자화가 다국어 LLM에 어떤 영향을 미치는가? - Ai 언어모델 로컬 채널https://arxiv.org/pdf/2407.032111m.dcinside.com
llama도 3.1로 업글했건만 차이 극명함
구글번역같은 걸로 대충 번역해서 영어로 써도 쓸만하다.
근데 소넷이 네이티브 언어처럼 한글인식하는건 대단함.