๋ง์ดํฌ๋ก์ํํธ(MS)๋ AI ์ถ๋ก (inference)์ ์ต์ ํ๋ ์ค๊ณ๋ ์ฐจ์ธ๋ AI ์นฉ์ ๊ณต๊ฐํ๋ฉฐ, ์๋น๋์ ์ค์ฌ์ผ๋ก ํ์ฑ๋ AI ์นฉ ์์ฅ์ ๋ณธ๊ฒฉ์ ์ธ ๋์ ์ฅ์ ๋ด๋ฐ์๋ค.
MS๋ 26์ผ(ํ์ง์๊ฐ) ์ฐจ์ธ๋ AI ์ถ๋ก ์นฉ โ๋ง์ด์ 200(Maia 200)โ์ ๊ณต๊ฐํ๋ค. MS๊ฐ 2023๋ ์ฒ์ ์ ๋ณด์ธ ์์ฒด ์นฉ ๋ง์ด์์ ํ์ ์ ํ์ด๋ค.
๋ง์ด์ 200์ ์ด๋ฒ ์ฃผ ์์ด์ค์์ฃผ ๋ฐ์ดํฐ์ผํฐ์์ ๊ฐ๋์ ์์ํ๋ฉฐ, ์ ๋ฆฌ์กฐ๋๋ก๋ ๋ฐฐ์น๊ฐ ํ๋๋ ์์ ์ด๋ค.
์ด์ฒ๋ผ ์ต๊ทผ์๋ ๊ตฌ๊ธ๊ณผ ์๋ง์กด์น์๋น์ค(AWS) ๋ฑ ์ฃผ์ ํด๋ผ์ฐ๋ ๊ธฐ์ ๋ค์ด ์๋ฌ์ ์์ฒด ์นฉ์ ๋ด๋๋ ํ๋ฆ์ด๋ค. ์ด๋ค์ AI ์์ ๊ธ์ฆ์ผ๋ก ์๋น๋์ ์ต์ ์นฉ์ ๋์ ๊ฐ๊ฒฉ๊ณผ ๊ณต๊ธ ๋ถ์กฑ์ ๊ฒช์ผ๋ฉด์, ๋น์ฉ ํจ์จ์ ์ด๊ณ ๋ฐ์ดํฐ์ผํฐ์ ์ต์ ํ๋ ๋์์ ํ๋ณดํ๋ ๋ฐ ์ฃผ๋ ฅํด ์๋ค.
MS๋ ๋ง์ด์ 200์ด TSMC์ 3๋๋ ธ ๊ณต์ ์ผ๋ก ์ ์๋์ผ๋ฉฐ, ๊ฐ์ ๊ฐ๊ฒฉ๋์ ๊ฒฝ์ ์ ํ์ ๋นํด 30% ๋์ ์ฑ๋ฅ์ ๋ธ๋ค๊ณ ๊ฐ์กฐํ๋ค. ์ผ๋ถ AI ์์ ์์ ๊ตฌ๊ธ๊ณผ AWS์ ์์ฒด ์นฉ๋ณด๋ค ๋์ ์ฑ๋ฅ์ ๋ณด์ด๋ฉฐ, ์ง๊ธ๊น์ง ๋ฐฐ์นํ ์ถ๋ก ์์คํ ์ค ๊ฐ์ฅ ํจ์จ์ ์ด๋ผ๊ณ ๊ฐ์กฐํ๋ค.
4๋นํธ ์ ๋ฐ๋(FP4)์์ 10ํํํ๋กญ์ค(PFLOPS) ์ด์, 8๋นํธ ์ ๋ฐ๋(FP8)์์ 5PFLOPS ์ด์์ ์ฑ๋ฅ์ ์ ๊ณตํ๋ค. ๋ฉ๋ชจ๋ฆฌ๋ 216GB ์ฉ๋์ ๊ณ ๋์ญํญ ๋ฉ๋ชจ๋ฆฌ(HBM3e)๋ฅผ ์ฑํํ์ง๋ง, ๋ฉ๋ชจ๋ฆฌ ์ธ๋๋ ์๋น๋์๊ฐ ์ถ์๋ฅผ ์๋ ์ฐจ์ธ๋ ํ๋๊ทธ์ญ โ๋ฒ ๋ผ ๋ฃจ๋นโ๋ณด๋ค ํ ๋จ๊ณ ๋ฎ๋ค.
๋์ , ๋์ฉ๋ SRAM(์ ์ ๋จ)์ ์นฉ์ ๋ฐฐ์นํด, ์ฌ์ฉ์ ๋ค์์ ์์ฒญ์ ๋์์ ์ฒ๋ฆฌํด์ผ ํ๋ ์ฑ๋ด๊ณผ AI ์ถ๋ก ์์ ์์ ์ฒ๋ฆฌ ์๋์ ์๋์ง ํจ์จ์ ๋์ด์ฌ๋ ธ๋ค๊ณ ์ค๋ช ํ๋ค. ์ด๋ ์ธ๋ ๋ธ๋ผ์ค๋ ๊ทธ๋กํฌ ๋ฑ ์ ํฅ AI ์นฉ ์ ์ฒด๋ค์ด ์ฑํํ ์ ๋ต๊ณผ ์ ์ฌํ๋ค.
์ํํธ์จ์ด ์ ๋ต๋ ๋์ ๋๋ค. MS๋ ๋ง์ด์ 200๊ณผ ํจ๊ป ์คํ ์์ค ํ๋ก๊ทธ๋๋ฐ ๋๊ตฌ โํธ๋ผ์ดํค(Triton)โ์ ํฌํจํ ๊ฐ๋ฐ ํจํค์ง๋ฅผ ์ ๊ณตํ๋ค.
ํธ๋ผ์ดํค์ ์๋น๋์์ ๋ ์ ์ ์ํ๊ณ ํต์ฌ์ผ๋ก ํ๊ฐ๋ฐ๋ ์ฟ ๋ค(CUDA)์ ์ ์ฌํ ์ญํ ์ ์ํํ๋ฉฐ, ์คํAI๋ ๊ฐ๋ฐ์ ๊ธฐ์ฌํ๋ค. ์ด๋ ๊ฐ๋ฐ์ ์นํ์ ์ธ ์ํํธ์จ์ด ์คํ์ ํตํด ์๋น๋์์ ๊ฒฝ์ ์ฐ์๋ฅผ ์ฝํํ๋ ค๋ ์๋๋ค.
์ด๊ธฐ ๋ฌผ๋์ MS์ โ์ํผ์ธํ ๋ฆฌ์ ์คโ ํ์ ํฌ์ , ์ฐจ์ธ๋ AI ๋ชจ๋ธ๊ณผ ํด๋ผ์ฐ๋ ์ธํ๋ผ ๊ฐ์ ์ ํ์ฉ๋๋ค. ๋ ๊ธฐ์ ์ฉ '์ฝํ์ผ๋ฟ(Copilot)'๊ณผ MS๊ฐ ํด๋ผ์ฐ๋ ๊ณ ๊ฐ์๊ฒ ์ ๊ณตํ๋ ์คํAI ์ต์ ๋ชจ๋ธ ๊ตฌ๋์๋ ์ฌ์ฉ๋ ์์ ์ด๋ค.
์ ์ (Azure) ํด๋ผ์ฐ๋ ๊ณ ๊ฐ์ด ์ธ์ ๋ถํฐ ๋ง์ด์ 200 ๊ธฐ๋ฐ ์๋ฒ๋ฅผ ์ง์ ์ฌ์ฉํ ์ ์์์ง๋ ์์ง ๋ช ํํ์ง ์๋ค. ํ์ฌ๋ ๊ฐ๋ฐ์๋ค์ด ์ ์ด ์ํํธ์จ์ด๋ฅผ ์ํํด ๋ณผ ์ ์๋ ๋จ๊ณ๋ค.
MS๋ ์ด๋ฏธ ์ฐจ์ธ๋ โ๋ง์ด์ 300โ ๊ฐ๋ฐ์๋ ์ฐฉ์ํ๋ค๊ณ ๋ฐํ๋ค. ๋ด๋ถ ์นฉ ๊ฐ๋ฐ์ด ์์๋งํผ ์ฑ๊ณผ๋ฅผ ๋ด์ง ๋ชปํ ๊ฒฝ์ฐ๋ฅผ ๋๋นํด, ํํธ๋์ธ ์คํAI์ ์นฉ ์ค๊ณ์ ์ ๊ทผํ ๊ถํ๋ ํ๋ณดํ ์ํ๋ค.
์ถ์ฒ : AIํ์์ค(https://www.aitimes.com)
๋๊ธ 0