1. ์ง๊ธ ๋งฅ๋ฏธ๋ ๋๋ ์ ์ผ์ด๋จ?
์์ฆ ํซํ๋ค๋ openclaw(๊ตฌ moltbot) ์ฐ๊ธฐ์ ์ข๋ค๋ ์ด์ผ๊ธฐ๊ฐ ํผ์ก์.
๋ชฐํธ๋ด ๊ฐ๋ฐ์๊ฐ ์ ์ด์ ๋งฅ์ผ๋ก ์ฐ๊ณ ์๋๊ฑฐ๊ฐ๊ธฐ๋ ํ๊ณ ๋งฅ๋ฏธ๋ ์์ฒด๊ฐ ๊ฐ์ฑ๋น์ข๊ธฐ๋ ํ๊ณ
2. ๊ทผ๋ฐ ์ ์ฌ์ง๋ง๋ผํจ?
"๋ชฐํธ๋ด์ ๋๋ฆฌ๊ธฐ ์ํด์ ๋งฅ๋ฏธ๋๋ฅผ ์ฌ๊ฒ ๋ค" ๋ผ๋ ์ฌ๋ก๊ฐ ๋ง์ด ๋ณด์ด๊ธฐ ๋๋ฌธ
๋ชฐํธ๋ด๊ฐ์ ์์ ์ฑ์ ๋งฅ๋ฏธ๋์์ค์ ์-ํผ ํ์๊ฐ ์ ํ ํ์๊ฐ ์์. ์ด์คํผ๋ ๋์์ ๋ ๋๋ง ๊ธฐ๋ฅ์ ์๋ค๊ฐ ์ธ์ผ์ด ์๊ฒ ์?
๋งฅ๋ฏธ๋๊ฐ ํ์ํ ์ฌ๋๋ค์ ์ ์ด์ ๊ฐ์ฑ๋น์ ํ์ด์๊ธฐ ๋๋ฌธ์ ์ง์ฆ ๊ฐ์ง๊ณ ์์์ ํ
๊ณ ๋งฅ๋ฏธ๋๊ฐ ํ์๊ฐ ์๋๋ฐ ์์ ๋ชจ๋ฅด๊ฒ ์ง๋ง ์ข์๋ณด์ฌ์ ์ฐ๋ค? ๋ํ ์
ํํ๋ ์ฌ๋์์ด ๋งฅ๋ถ์ฐ๋ค๊ทธ๋ฌ๋ฉด ๊ทธ๋จ์ด๋ ์ฅ์ด์ฃผ๋๊ฒ ๋น์ฐํ๊ฑฐ์
3. ๋ก์ปฌ LLM ๋๋ฆด ์ ์๋๊ฑฐ ์๋?
๋งฅ = ๋ก์ปฌ LLM ๋๋ฆฌ๊ธฐ ์ข๋ค๋ ์๋ฆฌ๊ฐ ์ ๋์๋์ง๋ถํฐ ๋ด์ผ๋จ
๋ก์ปฌ LLM์ ๋๋ฆด๊ฒฝ์ฐ ํ๋ผ๋ฏธํฐ ์๋งํผ์ ๋ฉ๋ชจ๋ฆฌ(VRAM)์ด ํ์ํจ. ๋ถ์กฑํด๋ ์ต์ง๋ก ์ค์ ํด์ ๋๋ฆด์์ผ ์์ง๋ง ๋ณ๋ชฉ์ผ๋ก ์๋๊ฐ ์ฌ๊ฐํ๊ฒ ๋๋ ค์ง
์ ์ผ ์ฑ๋ฅ์ข๊ณ ๋ง์ด์ฐ๋ ์๋น๋์ GPU๋ฅผ ์ธ๊ฒฝ์ฐ ์๋น์ ์ ํ์์ VRAM์ ํ๋ณดํ๊ธฐ๊ฐ ๋งค์ฐ ์ด๋ ค์. ์ ์๋น์ด VRAM ์์ฒด๋ฅผ ์ง๊ฒ ์ฃผ๊ธฐ๋ ํ๊ณ ์ฌ๋ฌ๋ ์ฐ๊ฒฐํ๋๊ฑด ํ๊ณ๋ ์๊ณ ๊ฐ๊ฒฉ๋ ๋ง์ด๋๊ฐ๊ณ ...
๊ทผ๋ฐ ๋งฅ์ ํตํฉ ๋ฉ๋ชจ๋ฆฌ๋ผ๋ ๊ธฐ์ ์ ์ฌ์ฉํจ. CPU์ GPU๊ฐ ๋ฉ๋ชจ๋ฆฌ๋ฅผ ๊ณต์ ํ๊ธฐ ๋๋ฌธ์ CPU์ฉ ๋จ์ ๋๋ฆฌ๋ฉด ๊ทธ๊ฑธ ์์ฐ์ค๋ฝ๊ฒ VRAM์ผ๋ก๋ ์ฌ์ฉํ ์ ์๊ณ , ์๋น์๋ 128GB์ง๋ฆฌ ๋ฉ๋ชจ๋ฆฌ ์ ํ์ ์ด ์ ์๊ธฐ๋๋ฌธ์ ํ์ฌ ์์ฅ์์ ๊ตฌํ ์ ์๋ ์ ํ ์ค ๊ฐ์ฅ VRAM์ด ํฐ ์ ํ ์ค ํ๋์ธ๊ฑฐ์
๊ทธ๋ฌ๋๊น ๋งฅ์ ๋ฉ๋ชจ๋ฆฌ ์ด์ ์ ์ฐ๋ ค๋ฉด ์ฌ์ค์ 128GB ๋ชจ๋ธ์ ์ฌ์ผํจ. 500๋ง์ ํ์ธ ์์ ์์ผ๋ฉด ์ฌ์
๊ทธ๋ ๊ฒ ์ฌ๋ฉด ๋ ๋๊ฐ์ ํ๋๋? ์๋. ์ผ๋จ ์ ์๋ฆฌ๊ฐ ๋์จ๊ฒ ์์ฅ์ ์๋น๋์ ์งํฌ์ค, ๋งฅ ๋๊ฐ๋ฐ์ ์์ ๋์ธ๋ฐ ๊ธฐ์
๋ค๋ ๋ฐ๋ณด๊ฐ ์๋๋ผ์ 128GB์ง๋ฆฌ ์ ํ์ ๊ฝค ๋ง๋ค์์. ์๋น๋์ DGX Spark๋ AMD AI MAX+ 395๊ฐ์๊ฒ๋ค
๊ตฌ์ฒด์ ์ธ ์ฑ๋ฅ์ ๋น๊ตํด๋ด์ผ๊ฒ ์ง๋ง ๋งฅ๋ฏธ๋ M4์๋ ๋ด๋ด ๊ฐ์๊ธฐ๊ฐ ์์. ๋ฉ๋ชจ๋ฆฌ ๋ณ๋ชฉ์ ํด๊ฒฐํ๊ธฐ๋ ์ข์ง๋ง ์ ๋์ ์ธ ์ฑ๋ฅ์ผ๋ก๋ ๋ฑํ ์ด์ ์ด ์๋ค๋๊ฒ์.
๊ทธ๋๋ ์ฌ๋๋ฉด ๋๋ฆด์๋ ์์ง์๋๋? ์์ฆ ์คํ์์ค SOTA ๋ชจ๋ธ๋ค์ 300B ~ 600B์ ๋ ํฌ๊ธฐ๊ฐ ๋๊ณ , ์ด์ ๋ ๋ชจ๋ธ์ ์์ค ์์ด ๋๋ฆฌ๋ ค๋ฉด 128GB๋ก๋ ๋ถ์กฑํจ. 256GB ~ 512GB๋ฅผ ๋ง๋ค๊ธฐ ์ํด ์ฌ๋ฌ ๋๋ฅผ ์ฌ์ ํด๋ฌ์คํฐ๋ฅผ ๋ง๋ค๋๊ฐ ํด์ผํจ
์ ๊ทธ๋ฌ๋ฉด ์์ ๋ชจ๋ธ์ ์ฐ๋ฉด ๋์ง ์๋๋? ๋ง์ด ๋์ค๋๋ง์ด 32GB์ง๋ฆฌ๋ฅผ ์ฌ์ GPT-OSS 20B๋ฅผ ๋๋ฆฌ๊ฒ ๋ค์ธ๋ฐ... ํฌ๊ธฐ๊ฐ ์ด์ ๋๋ก ์ค์ด๋ค๋ฉด ์ฑ๋ฅ์ด ์์ ์ด์์ผ๋ก ๋ฌธ์ ๊ฐ ๋ง์. 20B์ ๋๋ ๊ธฐ์
์
์ฅ์์ ๊ผฌ๋ง์์ค์ด๋ผ ๋ฌด๋ฃ๋ก ์จ๋ณผ์์๊ฒ ํด๋๊ณ ์์ผ๋ ๊ฑ ํ๋ฒ ์จ๋ณด์
์จ๋ณด๊ธฐ: https://gpt-oss.com/
์ค๋ น GPT-OSS 20B๋ฅผ ๋๋ ค๋ณด๊ณ ์ถ๋ค๊ณ ํด๋ ์ด๊ฑด ์๋ ์ธ๊ธฐ๋๋ฌธ์ API๋ก๋ ๊ฑฐ์ ๋ฌด๋ฃ, ๋ชฐํธ๋ด์ ๋๋ ค๋ ํผ๋์ผ๋ก ๋๋ผ ์ ์์
Cerebras ๋ฑ NPU์
์ฒด์์๋ ๋ฌด๋ ค ์ด๋น 2000ํ ํฐ์ง๋ฆฌ ์๋น์ค๋ฅผ ์ง์ํจ (GPT์ถ๋ ฅ ์๋์ 20๋ฐฐ ์ ๋)
4. ๊ทธ๋๋ ๋งฅ๋ฏธ๋ ๊ฐ์ฑ๋น์๋?
์-ํผ ๊ฐ์ฑ๋น์ง
์๋๋ M1~ ์๋ฆฌ์ฆ๊ฐ ์์ฒญ ๊ฐ์ฑ๋น์๋๋ฐ ์ต๊ทผ ๋จ๊ฐ ํญ๋ฑ์ผ๋ก ๋ ์ ๋ ๊ฐ์ฑ๋น๊ฐ ๋จ. ์๋์ฐ๋ ๋๋ฐฐ ์ฌ๋๋๋ฐ ์ ๊ทธ๋๋ก์ผ
๊ทผ๋ฐ ๊ฐ์ฑ๋น๋ผ๊ณ 50 ~ 100 ํ๋๊ฑธ ๋์ปฅ ์ฌ์ผ๋ ์ด์ ๋ ๋ฑํ ์๋๊ฑฐ์. ์์ ๊ฑฐํ๊ณ ๋ค๋๋์ฌ๋์ด ๊ฐ์ฑ๋น ์ํ์ฐจ ์ฌ์ง ์๋๊ฒ์ฒ๋ผ
์๋น์ ๊ฐ์ฑ๋น๋ณด๋ค ์์๋๊ฑด ๋ชฉ์ ์ด๋ ๋ถํฉํ๋๋๊ฑฐ์
๊ฐ ์ ์ผ๋ก๋ ๋งฅ๋ฏธ๋M5๊ฐ ๋์ค๋ฉด ๊ตฌ๋งคํ ๊ณํ์ด ์์. K-EXAONE์ ๋๋ ค๋ณด๊ณ ์ถ์๋ฐ ์ด๊ฑด ๋ผ์ด์ผ์ค๋๋ฌธ์ API์์ ์ ๋๋ก ์๋น์ค๋ฅผ ์ํ๊ฑฐ๋ ? M5๋ ๋ด๋ด ๊ฐ์๊ธฐ๋ ๋ถ์ด์ ์ฑ๋ฅ๋์ข๊ณ ์์ฌ์๊น์ง ๋๋ฆด์์๋ค๋๊ฑฐ์
๋๋ RAG๋๋ฌธ์ ์๋ฒ ๋ฉ๋ชจ๋ธ ์ ๋ ์ฐ๊ฒ ๋คํ๋ฉด ์ข์ ์ ํ์. ์๋ค๋ API์ฐ๋ฉด ์ถ๋ก ์๊ฐ๋ณด๋ค ๋๋ ์ด๊ฐ ๋ ๋์ค๊ธฐ๋๋ฌธ์
5. ๊ทธ๋ผ ์๋๋ค์ ์์ผ?
๊ตณ์ด๊ตณ์ด ํ๊ณ๋ฅผ ๋์๋ฉด ๋งฅ์ ์ธ๊ฒฝ์ฐ iMessage ์ฐ๋๊ณผ ์์ฑ UX๊ฐ ์ฌ์ฉ ๊ฐ๋ฅํจ
๊ทผ๋ฐ ๋ณดํต ๋ชฐํธ๋ด์ UX ํธํ ์์ด์ ํธ / ๋ชฐํธ๋ถ ์ฅ๋๊ฐ์ฉ์ด์์ ๊ทธ๊ฑฐํ๋๋๋ฌธ์ ๊ตณ์ด ๋งฅ๋ฏธ๋๋ฅผ?
๋งฅ๋ฏธ๋ ๊ฐ์ฑ๋น๋๋ฌธ์ ๋๋์ฅ์ฐ์ด๋จ๋ค๊ฐ ํ๊ณ์๊ธฐ๋๊น ์๋ค๋๊ฒ ํ๊ณ์ ์ ์ค
6. ๊ทธ๋์ ๋ญ ์ฌ๋ฉด ๋จ?
"๋ชฐํธ๋ด์ ๋๋ฆฌ๊ธฐ ์ํด์"๋ผ๋ ๋ชฉ์ ์ด๋ผ๋ฉด...
1) ํด๋ผ์ฐ๋์ ์ต์ํ๋ค๋ฉด ํด๋ผ์ฐ๋ ์๋น์ค๋ฅผ ์ฐ์
. AWS๊ฐ์๊ฑฐ
2) ๋ผ์ฆ๋ฒ ๋ฆฌ ํ์ด๋ N100์ ์ฌ์ ๋ฆฌ๋
์ค๋ฅผ ๊น์
๋ผ์ฆ๋ฒ ๋ฆฌ ํ์ด๋ ์ด์ง ๋ธ๋ฆด์๋ ์์ง๋ง N100์ ๊ฒฝ์ฐ ๋จ 16๊ธฐ๊ฐ๊น์ง ์ธ์ ์๊ธฐ๋๋ฌธ์ ์
ํํธ์คํ
์ฑ ์ ๋์ผ ์ฌ๋ฌ๊ฐ ๋์๋๊ณ 24์๊ฐ ๋๋ ค๋ ์๋ฌด๋ฐ ๋ฌธ์ ๊ฐ ์์
ํ๋๊น์ OpenWebUI๊ฐ์๊ฒ๋ค๋ ์จ๋ณด์
์ ๋ ๋ฆฌ๋
์ค๋ฅผ ๋ชจ๋ฅด๋๋ฐ์ <- ๊ทธ๋ผ ๋ชฐํธ๋ด ์๋ ๋ชป์จ GPT ์ฐพ์๋ด
์ ๋ฆฌ์ํ๋ ธ.. openclaw ๋งฅ์์ ํ๋๋ฐ๋ ๋ ธ๋๋ฒ์ ์ฐ๋น ๋๊ณ ์์กด์ฑ ์ง๋๋์ ์ผ๋ณํ์
๋ฐ์ด๋ธ์ฝ๋ฉ์ผ๋ก ๋ง๋ ์ฑ ์ข ํน์ด์ผ ๋ถํ์ํ๊ฒ ๋ฌด๊ฑฐ์ + ๊ทธ๋์ ์ค๋ฅ์๋จ
์ ์ด์ m5๊ฐ ultra๊ฐ ์๋์ค๋์ด์ k-exaone 235B๋๋ฆด๋ ค๋ฉด 4tok/s๋ ๋์ฌ๊น์ถ๋ค. ์ฐ์ ๊ธฐ๋ณธm5 ๋ดค์๋ ๊ทธ์ ๋ ์ฑ๋ฅํฅ์์ ์์๊บผ๊ณ , ultra๋ ์ฌ์ง์ด m4๋ ์๋์ด ๋งฅ์ผ๋ก๋ ์ ํ์ธํธ๋ผ ๋์๋ ๊ธฐ๊ปํด์ผ 100B๊ฐ ํ๊ณ๋ผ๋ด. ๋์ญํญ ํ๊ณ๊ฐ ๋๋ฌด ๋ช ํํ๊ธฐ๋ ํ๊ณ
์กฐ๊ธ ๋ค๋ฅธ ๋ด์ฉ์ด๊ฐํ๋ฐ ๋ ์ปดํจํฐ ํฌ๋๋ง๋ค ์๋์ผ๋ก openclaw-gateway.cmd ์ผ์ง๊ฒ ํด์ ์ ์๋๊ณ ์์. ์ด์ฐจํผ ์๊ณ ์์๋ ์๋์ ๋๋ฆด ํ๋ก๊ทธ๋จ์ด ์๊ธฐ๋ ํ๊ณ . ๋ญ์งํ ์ง๋ ๋ชจ๋ฅด๊ธฐ๋ ํ๊ณ .
๋ถ์๋ค์ด๋ผ m4์ฌ์ ๊ฐ๊ณ ๋๋ค๊ฐ ํ ๋ฌํ์ 80ํผ ๊ฐ๊ฒฉ์ผ๋ก ํ์์ค ์์ ์ด๋
์ด์ ํ ๊ฑฐ๋ฉด M5๋ก ํด์ฃผ
์ ๋ฆฌ ใ ใ ใ ใ ๋ค ์ค๋ผํด๋ ๋ฌด๋ฃ๋ก ๋ญ ์๋ฒ ์ฃผ๋๊ฑธ๋ก ์๋๋ฐ ์ถ๊ฐํ๋ฉด ์ข์๋ฏ
๊ทธ๊ฑฐ ์ฃผ๊ธด์ฃผ๋๋ฐ ๊ฐ์ ์ด ๊ฐ๋นก์ธ๊ณ ๊ท์ฐฎ์
@ใ ใ ๊ท์ฐฎ์๋ ๋งฅ๋ฏธ๋๋ ๋น๊ตํ๋ฉด ๊ฝ์ง๋๊น..
๊น๋ํ๋ค
์ด๊ฑฐ ๋ณด๊ณ ์ฅ๋ฐ๊ตฌ๋ ์ญ์ ํ๋ค ใ ใ
์ฃฝ์ด๊ฐ๋ ์ ํ์ ์๊ธฐ๊ฐ ๋๋ค
๋ด๊ฐ ๋ฑ ์ด๊ฑฐ ๊ถ๊ธํ๋๋ฐ ์ง๊ธ llm gpt_oss 20b ์ ๋๋ฅผ ๊ณ ๋น๋ ํธ์ถ๋ก ๋๋ฆด 24์๊ฐ ์ ์ ๋ ฅ ์๋ฒ ์ฐพ๊ณ ์์๋๋ฐ ๋จ๊ฐ ์ค๋ฅด๋๋ผ๋ m5 ๊ธฐ๋ค๋ฆฌ๋๊ฒ ๋์๊ฑฐ ๊ฐ๋ค ใณใณ
์ ๊ฑธ๋ก ๋ก์ปฌ? api๋ ์ฝ๋ฑ์ค ๋ถ๋ฌ์ ์ฐ์ง ์๋? ๋งฅ๋ฏธ๋ ์ฐ๋ผ๋ ์ด์ ๋ ๊ธฐ์กด ๊ฐ์ธ pc ๋ณด์ ๋๋ฌธ์ ์ค์ ์๋ฃ ์๋ ์๋ธ์ปด์ ์ฐ๋ผ๋๊ฑด๋ฐ ๊ทธ ์ค์ ๊ฐ์ฑ๋น๊ฐ ์ข์๊ฒ ๋งฅ๋ฏธ๋๋ผ์ ๋ฌ๊ฑฐ๊ณ
๊ฐ์๋ฆฌ ๋งฅ๋ฏธ๋๋งํผ ์์ ์ ์ผ๋ก ๋ฆฌ๋ ์ค 24์๊ฐ ๋ด๋ด ๋๋ฆฌ๋๊ฑฐ ์์+๋งฅos ํํํ ๊ธฐ๋ณธ๊ธฐ๋๋งค ์ ํํ๋๊ฑฐ์ง ๋ผ์ฆ๋ฒ ๋ฆฌํ์ด๋ ํด๋ผ์ฐ๋๋ ํ์๋ฆฌํ๊ณ ์๋ค
์ด๊ฑด ๋ ๋ญ์๋ฆฌ์ผ ์๋ฒ์ฉ์ ์ ๋ฐ์ดํธ ํธํ์ฑ์๋ ๋งฅ๋ณด๋ค ๋ฆฌ๋ ์ค๊ฐ ํจ ๋์๋ฐ ๋งฅ์ผ๋ก ๋ฆฌ๋ ์ค ๋๋ฆฐ๋ค๋๊ฑด ๋ ๋ญ์ ์ด๋์๋ถํฐ ์๋ชป์๊ณ ์๋๊ฑฐ์
ํธํ์ฑ ๋ฌธ์
์ ๋์ค๊ณ์ด๋งํ๋๊ฑฐ์ ๊ทธ๋๊น ๋ง์ฝ์ ๋ฌด์ธ๊ฐ 24์๊ฐ ๋๋ฆฌ๊ณ ์ถ์ดํ๋์ ๋ ๋ผ์ฆ๋ฒ ๋ฆฌ๋ n100์ด๋ ํ๋๊ฑฐ๋ณด๋ค ๋งฅ๋ฏธ๋์ฌ๋๊ฒ ๋ฌด์กฐ๊ฑด ๋์ ์์ ์ฑ ๋๋ฌธ์ ๋งฅ๋ฏธ๋ ๋จ๋๊ฑฐ๋ผ๋๊น ํ๋์จ์ด์ ์ธ ์์ฑ๋๊ฐ ์์ ์ฑ์ ์ผ๋ง๋ ์ค์ํ๋ฐ ๋ผ์ฆ๋ฒ ๋ฆฌ๋ฅผ ์ฐ๋ผ๊ทธ๋ผ
๋ผ์ฆ๋ฒ ๋ฆฌ๋ ์ ์๋น์ด ๊ฐ๋ฐ๋ณด๋๋ ๊ทธ๋ ๋ค์น๊ณ , ๋งฅ๊ณผ ๋ฆฌ๋ ์ค์ ์ฐจ์ด๋ ์ ๋์ค๋ผ๊ณ ํ์น ์์์์ ๋๋ก ์์ง ์์. ์ ์ด์ ๋งฅ์ ๋ค์ ์ปค๋์๋ค๊ฐ ์ ๋ฐ์ดํธ๋๋ง๋ค ํธํ์ฑ ๋ฆฌ์คํฌ๊ฐ์์ด์ ์๋ฒ๋ก ์ฌ์ฉํ๊ธฐ ์ ์ ํ์ง ์์. ์์ ์ฑ์ธก๋ฉด์์๋ ๋งฅ๋ฏธ๋๊ฐ N100๋ณด๋ค ๋ฑํ ์ฐ์ํ์ ์ด ์์ N100์ ๋ญ ํฝ ๊บผ์ง๋์ค์? 3๋ ๋ด๋ด ์ฒญ์์ํด๋ ๋ฌธ์ ์์
@ใ ใ n100 ๋์จ์ง 3๋ ์ด ์๋๋ค ๋ ๋ง์ด ์จ๋ผ...
์ ์ฐ๊ณ ์์ด์ ์์ผ๋ก๋ ์ด์ํ๊ฑฐ ์ฃผ์๋ฃ๊ณ ์๋ฌดํผ ๋งฅ์ด ์ต๊ณ ์์ด๋ผ๊ณ ์ ๋ณด๊ธ์ ์๋นํธ์ง ๋ง์ธ์
@ใ ใ ๋ณ์ ์ด ํ๋ผ ์์ฌ๋ก 8์ฒ์ ๋ณถ์๋ฐฅ์ด ์ธ๊ธฐ๋๋ผ๋ผ๋ ๊ธ์ ๋ณถ์๋ฐฅ ์๋จน์? ๋ผ๋ฉด์ 800์์ธ๋ฐ ์ด๋ฐ ๋ณ์ ๊ธ ์จ๋๊ณ ์ ๋ณด๊ธ์ด๋ผํ๋คใ ใ
์ ์ฑ๋ฑ์ด๋ค์ ํด๋ณด์ง๋ ์์๊ฑฐ์ ์๋์ฒํ๋ฉด์ ์ ํ ์ธ ์ ํ์ 1970๋ ๋์ ๋จธ๋ฌด๋ฅธ๋ค๊ณ ์๊ฐํ ๊น? ์๋ฒ๋ ๋ฆฌ๋ ์ค๊ฐ ํ์ค์ด์์~ ๋ญ ์๋์ฒ๋ ๊ธฐ์ด๊ฐ ์์ด์ผํ์ง ์๋ฌด๋ง๋น์ ํ๋ฉด์ ์๋ฐ๊ธฐ~
์ง์ง ์ข๋ณ์ ์๋๊ฐ ์ ๋์ค = ๋ฆฌ๋ ์ค๋ผ๊ณ ๋์ถฉ ์ด๋์ ๋ค์๋๋ณด๋ค
๋งฅ์์ oss 120b ๋๋ ค๋ณด๋ฉด ์ฌ๋ผ๊ฐ๊ธด ํ๋๋ฐ ๋๋ฌด ๋๋ ค์ ์ข ๊ทธ๋ผ
์ฑ๋ฑ์ด๋ค ๋ฐ์ด๋ด์ด์๊ตฌ๋
๋ณ๊ฐ๋ก M4 Max 128๊ธฐ๊ฐํ๊ณ dgx sparkํ๊ณ ๋น๊ตํ๊ฑฐ ๋ณด๋ฉด M4 Max๊ฐ ํจ์ฌ๋ ๋น ๋ฆ. ๊ฐ๊ฒฉ์ dgx๊ฐ ๋ ๋น์ธ๊ณ . dgx๋ ๋์ญํญ ๋ฌธ์ ๊ฐ ํ์คํ ์์. dgx๋ฅผ ์จ์ผํ๋? cuda ์ฐ๊ณ ์ถ์ ์ฌ๋ ์ธ์ ์ ํ ์ดํ์์์ ๊ทผ๋ฐ ์คํํด๋ก๋๋งค 4-500์ด์์ ํ์ด๋ค? ๊ธ์.
20๋ ํ ๋จ 8gb M1 ์นฉ ํ์ฌ๋ ๋งฅ๋ถ์ผ๋ก ๋ชป ์ฐ๋?
์ง์์ ์ ๋ค์ด์๋ m1 ๋งฅ๋ฏธ๋ ๊บผ๋ผ๋๊ฐ ์จ๊ฑด๊ฐ?
๋ด๊ฐ ์ดํ๋์ ์ฝ์งํ๊ฑธ ๊น๋ํ๊ฒ ์ ๋ฆฌํด์คฌ๋ค. 128๊ธฐ๊ฐ๋จ ๋ฌ ๋์ผ๋ก ํ ํฐ๊ฐ๋ด๋๊ฒ ์ด๋.
๋ณ์ ๋ จ์ ๋ชฐํธ๋ด ์๋๊ณ openclaw ์คํํด๋ก์ผ
์ด์๋ ๊ฑ ๊ธ์ ์์ฝ๋ ธ
๋ญ ๊ทธ๋๋ unified memory๋๊น ์ผ๋ฐ PC์์ SSD + RAM + VRAM ์๊ณ ์์ํ ๋ชจ๋ธ ๊ตด๋ฆฌ๋ ๊ฒ ๋ณด๋ค๋ ์ฑ๋ฅ์ด ๋๊ฒ ๋์ค์ง ์์๊น ์ถ๊ธด ํจ. ๊ทผ๋ฐ ๋ค๋ฅธ ๊ฑธ ๋ ๋์ ๋งฅ๋ฏธ๋ M4๊ฐ ์ญ๋๊ธ์ผ๋ก ์ด์๊ฒ ์ ๋น ์ ธ์ ํ๋๊ธด ํด.
๊ตด๋ ค๋ณธ ์ ์ฅ์์ ๋๋ ค์ ๊ตณ์ด ์ถ๋๋ฐ - dc App
๋งฅ๋ถํ๋ก m5 ํ๋ก ๋งฅ์ค ๋ชจ๋ธ์ด ๋นจ๋ฆฌ ๋์์ผํ๋๋ฐ
๊ทธ๋ฅ ๋ฉ๋ชจ๋ฆฌ ํ์จ ๋ค ์น์ฐฝ๋์ ์ง๊ธ์ด๋ผ๋ ์ฌ์ผํ๋? ํ๋ ํ์ด๋ฐ์ ์ ์ ํ ์ฉ๋๋ ์๊ฒจ์ ์ธ๊ธฐํญ๋ฐ์ธ๋ฏ ๊ณ ์ฑ๋ฅ ์ ์ ๋ ฅ ์๋ธํผ์๋ ๊ทธ๋ฅ ๋ก๋ง์ด ์์