https://www.aitimes.com/news/articleView.html?idxno=158708๋ฉํ๋ ์์ฒด ๊ฐ๋ฐ ์ฐจ์ธ๋ AI ์นฉ 'MTIA' ์ถ์...๋ฉํ๊ฐ ์์ฒด ๊ฐ๋ฐํ ์๋ก์ด ์ธ๊ณต์ง๋ฅ(AI) ๊ฐ์๊ธฐ ์นฉ์ ์ ๋ณด์๋ค. ์๋น๋์์ GPU์ ๋ํ ์์กด๋๋ฅผ ์ค์ด๊ณ , ์๋์ง ๋น์ฉ์ ์ ๊ฐํ๋ ค๋ ๋ชฉ์ ์ด๋ค. ๋ธ๋ฃธ๋ฒ๊ทธ๋ 10์ผ(ํ์ง์๊ฐ) ๋ฉํ๊ฐ ๊ณต์ ๋ธ๋ก๊ทธ๋ฅผ ํตํด โ๋ฉํ ํ์ต ๋ฐ ์ถ๋ก ์์
๋ฌ๋ ์ดํฐ(MTIA)โ 2์ธ๋ ๋ฐ๋์ฒด์ ์ธ๋ถ์ ์ธ ์ ๋ณด๋ฅผ ๊ณต๊ฐํ๋ค๊ณ ๋ณด๋ํ๋ค.์ด์ ๋ฐ๋ฅด๋ฉด ์๋ก์ด MTIA ์นฉ์ 1์ธ๋ ๋๋น ์ปดํจํ
๋ฐ ๋ฉ๋ชจ๋ฆฌ ๋์ญํญ์ด ๋๋ฐฐ ์ด์ ์ปค์ก๋ค. ๋ฉํ๊ฐ ๊ฐ๋ฐํ ์ถ์ฒ ๊ด๊ณ ๋ฐ ์์ ๋ชจ๋ธ์ ํจ์จ์ ์ผ๋ก ๊ตฌ๋ํ ์ ์๋๋ก ์ค๊ณ๋๋ค๋ ์ ์ด ํน์ง์ด๋ค. ์ด ์นฉ์ ์ง๋ํด '์๋ฅดํ
๋ฏธ์ค'๋ผ๋ ํ๋ก์ ํธ ๋ช
์ผ๋กwww.aitimes.com
๋ฉํ๊ฐ ์์ฒด ๊ฐ๋ฐํ ์๋ก์ด ์ธ๊ณต์ง๋ฅ(AI) ๊ฐ์๊ธฐ ์นฉ์ ์ ๋ณด์๋ค. ์๋น๋์์ GPU์ ๋ํ ์์กด๋๋ฅผ ์ค์ด๊ณ , ์๋์ง ๋น์ฉ์ ์ ๊ฐํ๋ ค๋ ๋ชฉ์ ์ด๋ค.
๋ธ๋ฃธ๋ฒ๊ทธ๋ 10์ผ(ํ์ง์๊ฐ) ๋ฉํ๊ฐ ๊ณต์ ๋ธ๋ก๊ทธ๋ฅผ ํตํด โ๋ฉํ ํ์ต ๋ฐ ์ถ๋ก ์์
๋ฌ๋ ์ดํฐ(MTIA)โ 2์ธ๋ ๋ฐ๋์ฒด์ ์ธ๋ถ์ ์ธ ์ ๋ณด๋ฅผ ๊ณต๊ฐํ๋ค๊ณ ๋ณด๋ํ๋ค.
์ด์ ๋ฐ๋ฅด๋ฉด ์๋ก์ด MTIA ์นฉ์ 1์ธ๋ ๋๋น ์ปดํจํ
๋ฐ ๋ฉ๋ชจ๋ฆฌ ๋์ญํญ์ด ๋๋ฐฐ ์ด์ ์ปค์ก๋ค. ๋ฉํ๊ฐ ๊ฐ๋ฐํ ์ถ์ฒ ๊ด๊ณ ๋ฐ ์์ ๋ชจ๋ธ์ ํจ์จ์ ์ผ๋ก ๊ตฌ๋ํ ์ ์๋๋ก ์ค๊ณ๋๋ค๋ ์ ์ด ํน์ง์ด๋ค.
์ด ์นฉ์ ์ง๋ํด '์๋ฅดํ
๋ฏธ์ค'๋ผ๋ ํ๋ก์ ํธ ๋ช
์ผ๋ก ์๋ ค์ก๋ ๊ฒ์ผ๋ก, ๋น์์๋ ์ถ๋ก ๋ง์ด ๊ฐ๋ฅํ ๊ฒ์ผ๋ก ์์๋๋ค.
ํ์ง๋ง ๋ฉํ๋ "MTIA๋ ์ฃผ๋ก ์์ ๋ฐ ์ถ์ฒ ์๊ณ ๋ฆฌ์ฆ์ ๊ต์กํ์ง๋ง, ๊ถ๊ทน์ ์ผ๋ก ์นฉ์ ๊ธฐ๋ฅ์ ํ์ฅํ์ฌ '๋ผ๋ง 2'์ ๊ฐ์ ์์ฑ AI ๋ชจ๋ธ ๊ต์ก์ ์์ํ๋ ๊ฒ์ด ๋ชฉํ"๋ผ๊ณ ๋ฐํ๋ค.
๋ด๋ถ ํ
์คํธ ๊ฒฐ๊ณผ ์ฐจ์ธ๋ MTIA๋ 1์ธ๋ ๋๋น 4๊ฐ AI ๋ชจ๋ธ์์ 3๋ฐฐ ๋์ ์ฑ๋ฅ์ ๊ธฐ๋กํ๋ค.
2์ธ๋ MTIA๋ AI ์ถ๋ก ์์
์ ์ต์ ํ๋ PE๋ผ๊ณ ๋ถ๋ฆฌ๋ 64๊ฐ์ ์ปดํจํ
๋ชจ๋๋ก ๊ตฌ์ฑ๋๋ค. PE ์ ์ฉ ๋ฐ์ดํฐ ์บ์์ ์ฉ๋๋ 3๋ฐฐ ๋์ด ์ฒ๋ฆฌ ์๋๊ฐ ๋๋ฐฐ ์ด์ ํฅ์๋๋ค. 64๊ฐ์ PE ์ปดํจํ
๋ชจ๋์ ํด๋น ์บ์๋ก ๋ฐ์ดํฐ๋ฅผ ์ด๋ํ ์ ์์ ๋ฟ๋ง ์๋๋ผ ํด๋น ๋ฐ์ดํฐ๋ฅผ ์๋ก ๊ณต์ ํ ์๋ ์๋ค.
๋ฉ๋ชจ๋ฆฌ ๋ฐ๋์ฒด๋ก๋ ๋๋จ(DRAM)์ ์์ง์ผ๋ก ์ฌ๋ฌ๊ฐ ์์ HBM(๊ณ ๋์ญํญ ๋ฉ๋ชจ๋ฆฌ)๊ฐ ์๋ SRAM์ด ์ฌ์ฉ๋์ผ๋ฉฐ, 1์ธ๋ ์นฉ ๋๋น SRAM ์ฉ๋์ด ๋๋ฐฐ๋ก ๋์๋ค. SRAM๊ณผ ํจ๊ป LPDDR5 ๋๋จ ์ฉ๋๋ ๋๋ฐฐ ํ์ฅํ ์นฉ์ด๋ค.
๋ฉํ๋ ์ ์นฉ์ ์ฑ๋ฅ ํฅ์์ ๊ธฐ์ฌํ ๋ ๋ค๋ฅธ ์์ธ์ผ๋ก ํฌ์ ์ปดํจํ
ํ์ดํ๋ผ์ธ๊ณผ ๊ด๋ จ๋ ์ผ๋ จ์ ๊ฐ์ ์ฌํญ์ ๋ค์๋ค. AI ์ถ๋ก ์์ ํฌ์์ฑ์ ์ ๊ฒฝ๋ง์ด ์ฒ๋ฆฌํ๋ ๋ฐ์ดํฐ์ ์๋น ๋ถ๋ถ์ด ์ ํํ ๊ฒฐ๊ณผ๋ฅผ ์์ฑํ๋ ๋ฐ ํ์ํ์ง ์์ ๊ฒฝ์ฐ๊ฐ ๋ง๋ค๋ ์๋ฏธ๋ค.
์ด๋ฐ ๋ถํ์ํ ๋ฐ์ดํฐ๋ฅผ ์ ๊ฑฐํ์ฌ AI ์ถ๋ก ์นฉ์ ๊ณ์ฐ ์๋๋ฅผ ๋์ผ ์ ์๋ค๋ ์ค๋ช
์ด๋ค. ์ด๋ฅผ ํตํด 2์ธ๋ MTIA๋ 1์ธ๋์ ๋นํด 3.5๋ฐฐ์ ๊ณ ๋ฐ๋ ์ปดํจํ
์ฑ๋ฅ๊ณผ 7๋ฐฐ์ ํฌ์ ์ปดํจํ
์ฑ๋ฅ์ ์ ๊ณตํ๋ค๊ณ ์ ํ๋ค.
TSMC์ 5๋๋
ธ ๊ณต์ ์ผ๋ก ์์ฐ๋์ผ๋ฉฐ, ์ต๋ 72๊ฐ์ ๊ฐ์๊ธฐ๋ฅผ ๋ด์ ์ ์๋ ๋ํ ๋(rack) ๊ธฐ๋ฐ ์์คํ
๋ ํจ๊ป ๊ฐ๋ฐํ๋ค. ์ฌ๋ฌ๊ฐ์ ๊ฐ์๊ธฐ๋ฅผ ํ๋์ฒ๋ผ ๋ฌถ์ด ๋ ๊ฐ๋ ฅํ ์ฐ์ฐ ์ฑ๋ฅ์ ์ ๊ณตํ๊ธฐ ์ํ ์ค๊ณ๋ค.
๋ ๋ฉํ๋ ๊ฐ๋ฐ์๊ฐ ํ๋ก์ธ์์์ AI ๋ชจ๋ธ์ ๋ณด๋ค ์ฝ๊ฒ ์คํํ ์ ์๋๋ก ๋ง์ถคํ ์ํํธ์จ์ด ๋๊ตฌ๋ฅผ ๊ฐ๋ฐํ๋ค. ํต์ฌ ์์๋ ๊ฐ๋ฐ์์ AI ๋ชจ๋ธ์ ์นฉ์ด ์คํํ ์ ์๋ ํํ๋ก ๋ฐ๊พธ๋ 'ํธ๋ฆฌํค-MTIA(Triton-MTIA)'๋ผ๋ ์์คํ
์ด๋ค. ํธ๋ฆฌํค-MTIA๋ ํ์ดํ ์น(PyTorch)๋ฅผ ํฌํจํ ๋ค๋ฅธ ์คํ ์์ค ๊ธฐ์ ๊ณผ๋ ํตํฉ๋๋ค.
๋ฉํ ๊ด๊ณ์๋ โMTIA๋ AI ์ธํ๋ผ์ ๋ํ ๋ฉํ์ ํฌ์ ํ๋์ ์ผํโ์ด๋ผ๋ฉฐ โ๋ฏธ๋ AI ์ธํ๋ผ๋ฅผ ๋ณด์ํด ์๋น์ค ์ ๋ฐ์ ๊ฑธ์ณ ์๋กญ๊ณ ๋ ๋์ ๊ฒฝํ์ ์ ๊ณตํ๊ฒ ๋คโ๋ผ๊ณ ๋ฐํ๋ค.
ํํธ ๋งํฌ ์ ์ปค๋ฒ๊ทธ ๋ฉํ CEO๋ ์ง๋ํด 10์ AI ์ธํ๋ผ ๊ตฌ์ถ์ ์ต๋ 350์ต๋ฌ๋ฌ(์ฝ 48์กฐ์)๋ฅผ ํฌ์
ํ๊ฒ ๋ค๊ณ ๋ฐํํ๋ค. ์ด ๊ฐ์ด๋ฐ ์๋น ๋ถ๋ถ์ด ์์ฒด AI ์นฉ ๊ฐ๋ฐ ๋ฐ ์ํ์์ฐ์ ํ์ฉ๋ ๊ฒ์ผ๋ก ๋ณด์ธ๋ค.
๊ทธ๋ฌ๋ ๋ธ๋ฃธ๋ฒ๊ทธ๋ ์ ์ปค๋ฒ๊ทธ๊ฐ ์ต๊ทผ ์๋น๋์ 'H100' GPU 35๋ง๋๋ฅผ ๊ตฌ๋งคํ ๊ณํ์ ๋ฐํ๋ ๋งํผ, ์ฌ์ ํ ๋๋ถ๋ถ์ ํฌ์ ๊ธ์ก์ ์๋น๋์ GPU ๊ตฌ๋งค์ ์ฐ์ผ ๊ฐ๋ฅ์ฑ์ด ์๋ค๊ณ ๋ด๋ค๋ดค๋ค.
ํ์ค์ ์ผ๋ก ๋ฉํ์ ๋ฐ๋์ฒด๋ ์๋น๋์ ์ ํ๊ณผ ์ฑ๋ฅ์ฐจ๊ฐ ์ปค, ์ฉ๋๊ฐ ๋ค์ ๋ค๋ฅด๊ฒ ์ฐ์ผ ๊ฒ์ผ๋ก ์์๋๊ธฐ ๋๋ฌธ์ด๋ค. ์ค์ ๋ก ๋ฉํ๋ 2์ธ๋ MTIA๊ฐ ์๋น๋์์ GPU๋ฅผ ๋์ฒดํ๋ ๋์ ๋ณด์ํ ๊ฒ์ด๋ผ๊ณ ๋ฐํ๋ค.
ํ์ง๋ง ํฅํ AI ๊ด๋ จ ์ธํ๋ผ ํฌ์๊ฐ ์ง์๋ ๊ฒ์ด๋ผ๋ ์ ์ ๊ณ ๋ คํ๋ฉด ๋น์ฉ ๋ถ๋ด๊ณผ ๋ฐ๋์ฒด ์๊ธ ์์ ์ฑ์ ๊ณ ๋ คํด ์์ฒด ๊ฐ๋ฐ AI ์นฉ์ ๋น์ค์ด ์ ์ฐจ ๋์์ง ๊ฒ์ผ๋ก ์์๋๋ค.
๋ธ๋ฃธ๋ฒ๊ทธ๋ โ๋ฉํ๋ฟ ์๋๋ผ ์๋ง์กด๊ณผ ๋ง์ดํฌ๋ก์ํํธ, ๊ตฌ๊ธ ๋ฑ์ด ์๋น๋์์ ์์กด์ ๋ฎ์ถ๋ ค ๋ชจ๋ ์์ฒด AI ์นฉ ๊ฐ๋ฐ์ ๋ฐ์ด๋ค์๋คโ๋ผ๋ฉฐ โ๋จ๊ธฐ๊ฐ์ ์คํ ๊ฐ๋ฅํ ๊ณผ์ ๋ ์๋ ๊ฒโ์ด๋ผ๊ณ ์ง์๋ค.
๋๊ธ 1