https://www.aitimes.com/news/articleView.html?idxno=158708๋ฉ”ํƒ€๋„ ์ž์ฒด ๊ฐœ๋ฐœ ์ฐจ์„ธ๋Œ€ AI ์นฉ 'MTIA' ์ถœ์‹œ...๋ฉ”ํƒ€๊ฐ€ ์ž์ฒด ๊ฐœ๋ฐœํ•œ ์ƒˆ๋กœ์šด ์ธ๊ณต์ง€๋Šฅ(AI) ๊ฐ€์†๊ธฐ ์นฉ์„ ์„ ๋ณด์˜€๋‹ค. ์—”๋น„๋””์•„์˜ GPU์— ๋Œ€ํ•œ ์˜์กด๋„๋ฅผ ์ค„์ด๊ณ , ์—๋„ˆ์ง€ ๋น„์šฉ์„ ์ ˆ๊ฐํ•˜๋ ค๋Š” ๋ชฉ์ ์ด๋‹ค. ๋ธ”๋ฃธ๋ฒ„๊ทธ๋Š” 10์ผ(ํ˜„์ง€์‹œ๊ฐ) ๋ฉ”ํƒ€๊ฐ€ ๊ณต์‹ ๋ธ”๋กœ๊ทธ๋ฅผ ํ†ตํ•ด โ€˜๋ฉ”ํƒ€ ํ•™์Šต ๋ฐ ์ถ”๋ก  ์—‘์…€๋Ÿฌ๋ ˆ์ดํ„ฐ(MTIA)โ€™ 2์„ธ๋Œ€ ๋ฐ˜๋„์ฒด์˜ ์„ธ๋ถ€์ ์ธ ์ •๋ณด๋ฅผ ๊ณต๊ฐœํ–ˆ๋‹ค๊ณ  ๋ณด๋„ํ–ˆ๋‹ค.์ด์— ๋”ฐ๋ฅด๋ฉด ์ƒˆ๋กœ์šด MTIA ์นฉ์€ 1์„ธ๋Œ€ ๋Œ€๋น„ ์ปดํ“จํŒ… ๋ฐ ๋ฉ”๋ชจ๋ฆฌ ๋Œ€์—ญํญ์ด ๋‘๋ฐฐ ์ด์ƒ ์ปค์กŒ๋‹ค. ๋ฉ”ํƒ€๊ฐ€ ๊ฐœ๋ฐœํ•œ ์ถ”์ฒœ ๊ด‘๊ณ  ๋ฐ ์ˆœ์œ„ ๋ชจ๋ธ์„ ํšจ์œจ์ ์œผ๋กœ ๊ตฌ๋™ํ•  ์ˆ˜ ์žˆ๋„๋ก ์„ค๊ณ„๋๋‹ค๋Š” ์ ์ด ํŠน์ง•์ด๋‹ค. ์ด ์นฉ์€ ์ง€๋‚œํ•ด '์•„๋ฅดํ…Œ๋ฏธ์Šค'๋ผ๋Š” ํ”„๋กœ์ ํŠธ ๋ช…์œผ๋กœwww.aitimes.com



7ce88871b58a07f739ef81ed44ee776efa0907096d7c3fa7f16e64a9c0cd2f00fd72



๋ฉ”ํƒ€๊ฐ€ ์ž์ฒด ๊ฐœ๋ฐœํ•œ ์ƒˆ๋กœ์šด ์ธ๊ณต์ง€๋Šฅ(AI) ๊ฐ€์†๊ธฐ ์นฉ์„ ์„ ๋ณด์˜€๋‹ค. ์—”๋น„๋””์•„์˜ GPU์— ๋Œ€ํ•œ ์˜์กด๋„๋ฅผ ์ค„์ด๊ณ , ์—๋„ˆ์ง€ ๋น„์šฉ์„ ์ ˆ๊ฐํ•˜๋ ค๋Š” ๋ชฉ์ ์ด๋‹ค.

๋ธ”๋ฃธ๋ฒ„๊ทธ๋Š” 10์ผ(ํ˜„์ง€์‹œ๊ฐ) ๋ฉ”ํƒ€๊ฐ€ ๊ณต์‹ ๋ธ”๋กœ๊ทธ๋ฅผ ํ†ตํ•ด โ€˜๋ฉ”ํƒ€ ํ•™์Šต ๋ฐ ์ถ”๋ก  ์—‘์…€๋Ÿฌ๋ ˆ์ดํ„ฐ(MTIA)โ€™ 2์„ธ๋Œ€ ๋ฐ˜๋„์ฒด์˜ ์„ธ๋ถ€์ ์ธ ์ •๋ณด๋ฅผ ๊ณต๊ฐœํ–ˆ๋‹ค๊ณ  ๋ณด๋„ํ–ˆ๋‹ค.

์ด์— ๋”ฐ๋ฅด๋ฉด ์ƒˆ๋กœ์šด MTIA ์นฉ์€ 1์„ธ๋Œ€ ๋Œ€๋น„ ์ปดํ“จํŒ… ๋ฐ ๋ฉ”๋ชจ๋ฆฌ ๋Œ€์—ญํญ์ด ๋‘๋ฐฐ ์ด์ƒ ์ปค์กŒ๋‹ค. ๋ฉ”ํƒ€๊ฐ€ ๊ฐœ๋ฐœํ•œ ์ถ”์ฒœ ๊ด‘๊ณ  ๋ฐ ์ˆœ์œ„ ๋ชจ๋ธ์„ ํšจ์œจ์ ์œผ๋กœ ๊ตฌ๋™ํ•  ์ˆ˜ ์žˆ๋„๋ก ์„ค๊ณ„๋๋‹ค๋Š” ์ ์ด ํŠน์ง•์ด๋‹ค.

์ด ์นฉ์€ ์ง€๋‚œํ•ด '์•„๋ฅดํ…Œ๋ฏธ์Šค'๋ผ๋Š” ํ”„๋กœ์ ํŠธ ๋ช…์œผ๋กœ ์•Œ๋ ค์กŒ๋˜ ๊ฒƒ์œผ๋กœ, ๋‹น์‹œ์—๋Š” ์ถ”๋ก ๋งŒ์ด ๊ฐ€๋Šฅํ•  ๊ฒƒ์œผ๋กœ ์˜ˆ์ƒ๋๋‹ค.

ํ•˜์ง€๋งŒ ๋ฉ”ํƒ€๋Š” "MTIA๋Š” ์ฃผ๋กœ ์ˆœ์œ„ ๋ฐ ์ถ”์ฒœ ์•Œ๊ณ ๋ฆฌ์ฆ˜์„ ๊ต์œกํ•˜์ง€๋งŒ, ๊ถ๊ทน์ ์œผ๋กœ ์นฉ์˜ ๊ธฐ๋Šฅ์„ ํ™•์žฅํ•˜์—ฌ '๋ผ๋งˆ 2'์™€ ๊ฐ™์€ ์ƒ์„ฑ AI ๋ชจ๋ธ ๊ต์œก์„ ์‹œ์ž‘ํ•˜๋Š” ๊ฒƒ์ด ๋ชฉํ‘œ"๋ผ๊ณ  ๋ฐํ˜”๋‹ค.

๋‚ด๋ถ€ ํ…Œ์ŠคํŠธ ๊ฒฐ๊ณผ ์ฐจ์„ธ๋Œ€ MTIA๋Š” 1์„ธ๋Œ€ ๋Œ€๋น„ 4๊ฐœ AI ๋ชจ๋ธ์—์„œ 3๋ฐฐ ๋‚˜์€ ์„ฑ๋Šฅ์„ ๊ธฐ๋กํ–ˆ๋‹ค.

2์„ธ๋Œ€ MTIA๋Š” AI ์ถ”๋ก  ์ž‘์—…์— ์ตœ์ ํ™”๋œ PE๋ผ๊ณ  ๋ถˆ๋ฆฌ๋Š” 64๊ฐœ์˜ ์ปดํ“จํŒ… ๋ชจ๋“ˆ๋กœ ๊ตฌ์„ฑ๋œ๋‹ค. PE ์ „์šฉ ๋ฐ์ดํ„ฐ ์บ์‹œ์˜ ์šฉ๋Ÿ‰๋„ 3๋ฐฐ ๋Š˜์–ด ์ฒ˜๋ฆฌ ์†๋„๊ฐ€ ๋‘๋ฐฐ ์ด์ƒ ํ–ฅ์ƒ๋๋‹ค. 64๊ฐœ์˜ PE ์ปดํ“จํŒ… ๋ชจ๋“ˆ์€ ํ•ด๋‹น ์บ์‹œ๋กœ ๋ฐ์ดํ„ฐ๋ฅผ ์ด๋™ํ•  ์ˆ˜ ์žˆ์„ ๋ฟ๋งŒ ์•„๋‹ˆ๋ผ ํ•ด๋‹น ๋ฐ์ดํ„ฐ๋ฅผ ์„œ๋กœ ๊ณต์œ ํ•  ์ˆ˜๋„ ์žˆ๋‹ค.

๋ฉ”๋ชจ๋ฆฌ ๋ฐ˜๋„์ฒด๋กœ๋Š” ๋””๋žจ(DRAM)์„ ์ˆ˜์ง์œผ๋กœ ์—ฌ๋Ÿฌ๊ฐœ ์Œ“์€ HBM(๊ณ ๋Œ€์—ญํญ ๋ฉ”๋ชจ๋ฆฌ)๊ฐ€ ์•„๋‹Œ SRAM์ด ์‚ฌ์šฉ๋์œผ๋ฉฐ, 1์„ธ๋Œ€ ์นฉ ๋Œ€๋น„ SRAM ์šฉ๋Ÿ‰์ด ๋‘๋ฐฐ๋กœ ๋Š˜์—ˆ๋‹ค. SRAM๊ณผ ํ•จ๊ป˜ LPDDR5 ๋””๋žจ ์šฉ๋Ÿ‰๋„ ๋‘๋ฐฐ ํ™•์žฅํ•œ ์นฉ์ด๋‹ค.

๋ฉ”ํƒ€๋Š” ์ƒˆ ์นฉ์˜ ์„ฑ๋Šฅ ํ–ฅ์ƒ์— ๊ธฐ์—ฌํ•œ ๋˜ ๋‹ค๋ฅธ ์š”์ธ์œผ๋กœ ํฌ์†Œ ์ปดํ“จํŒ… ํŒŒ์ดํ”„๋ผ์ธ๊ณผ ๊ด€๋ จ๋œ ์ผ๋ จ์˜ ๊ฐœ์„  ์‚ฌํ•ญ์„ ๋“ค์—ˆ๋‹ค. AI ์ถ”๋ก ์—์„œ ํฌ์†Œ์„ฑ์€ ์‹ ๊ฒฝ๋ง์ด ์ฒ˜๋ฆฌํ•˜๋Š” ๋ฐ์ดํ„ฐ์˜ ์ƒ๋‹น ๋ถ€๋ถ„์ด ์ •ํ™•ํ•œ ๊ฒฐ๊ณผ๋ฅผ ์ƒ์„ฑํ•˜๋Š” ๋ฐ ํ•„์š”ํ•˜์ง€ ์•Š์€ ๊ฒฝ์šฐ๊ฐ€ ๋งŽ๋‹ค๋Š” ์˜๋ฏธ๋‹ค.

์ด๋Ÿฐ ๋ถˆํ•„์š”ํ•œ ๋ฐ์ดํ„ฐ๋ฅผ ์ œ๊ฑฐํ•˜์—ฌ AI ์ถ”๋ก  ์นฉ์˜ ๊ณ„์‚ฐ ์†๋„๋ฅผ ๋†’์ผ ์ˆ˜ ์žˆ๋‹ค๋Š” ์„ค๋ช…์ด๋‹ค. ์ด๋ฅผ ํ†ตํ•ด 2์„ธ๋Œ€ MTIA๋Š” 1์„ธ๋Œ€์— ๋น„ํ•ด 3.5๋ฐฐ์˜ ๊ณ ๋ฐ€๋„ ์ปดํ“จํŒ… ์„ฑ๋Šฅ๊ณผ 7๋ฐฐ์˜ ํฌ์†Œ ์ปดํ“จํŒ… ์„ฑ๋Šฅ์„ ์ œ๊ณตํ•œ๋‹ค๊ณ  ์ „ํ–ˆ๋‹ค.

TSMC์˜ 5๋‚˜๋…ธ ๊ณต์ •์œผ๋กœ ์ƒ์‚ฐ๋์œผ๋ฉฐ, ์ตœ๋Œ€ 72๊ฐœ์˜ ๊ฐ€์†๊ธฐ๋ฅผ ๋‹ด์„ ์ˆ˜ ์žˆ๋Š” ๋Œ€ํ˜• ๋ž™(rack) ๊ธฐ๋ฐ˜ ์‹œ์Šคํ…œ๋„ ํ•จ๊ป˜ ๊ฐœ๋ฐœํ–ˆ๋‹ค. ์—ฌ๋Ÿฌ๊ฐœ์˜ ๊ฐ€์†๊ธฐ๋ฅผ ํ•˜๋‚˜์ฒ˜๋Ÿผ ๋ฌถ์–ด ๋” ๊ฐ•๋ ฅํ•œ ์—ฐ์‚ฐ ์„ฑ๋Šฅ์„ ์ œ๊ณตํ•˜๊ธฐ ์œ„ํ•œ ์„ค๊ณ„๋‹ค.

๋˜ ๋ฉ”ํƒ€๋Š” ๊ฐœ๋ฐœ์ž๊ฐ€ ํ”„๋กœ์„ธ์„œ์—์„œ AI ๋ชจ๋ธ์„ ๋ณด๋‹ค ์‰ฝ๊ฒŒ ์‹คํ–‰ํ•  ์ˆ˜ ์žˆ๋„๋ก ๋งž์ถคํ˜• ์†Œํ”„ํŠธ์›จ์–ด ๋„๊ตฌ๋ฅผ ๊ฐœ๋ฐœํ–ˆ๋‹ค. ํ•ต์‹ฌ ์š”์†Œ๋Š” ๊ฐœ๋ฐœ์ž์˜ AI ๋ชจ๋ธ์„ ์นฉ์ด ์‹คํ–‰ํ•  ์ˆ˜ ์žˆ๋Š” ํ˜•ํƒœ๋กœ ๋ฐ”๊พธ๋Š” 'ํŠธ๋ฆฌํ†ค-MTIA(Triton-MTIA)'๋ผ๋Š” ์‹œ์Šคํ…œ์ด๋‹ค. ํŠธ๋ฆฌํ†ค-MTIA๋Š” ํŒŒ์ดํ† ์น˜(PyTorch)๋ฅผ ํฌํ•จํ•œ ๋‹ค๋ฅธ ์˜คํ”ˆ ์†Œ์Šค ๊ธฐ์ˆ ๊ณผ๋„ ํ†ตํ•ฉ๋œ๋‹ค.

๋ฉ”ํƒ€ ๊ด€๊ณ„์ž๋Š” โ€œMTIA๋Š” AI ์ธํ”„๋ผ์— ๋Œ€ํ•œ ๋ฉ”ํƒ€์˜ ํˆฌ์ž ํ™•๋Œ€์˜ ์ผํ™˜โ€์ด๋ผ๋ฉฐ โ€œ๋ฏธ๋ž˜ AI ์ธํ”„๋ผ๋ฅผ ๋ณด์™„ํ•ด ์„œ๋น„์Šค ์ „๋ฐ˜์— ๊ฑธ์ณ ์ƒˆ๋กญ๊ณ  ๋” ๋‚˜์€ ๊ฒฝํ—˜์„ ์ œ๊ณตํ•˜๊ฒ ๋‹คโ€๋ผ๊ณ  ๋ฐํ˜”๋‹ค.

ํ•œํŽธ ๋งˆํฌ ์ €์ปค๋ฒ„๊ทธ ๋ฉ”ํƒ€ CEO๋Š” ์ง€๋‚œํ•ด 10์›” AI ์ธํ”„๋ผ ๊ตฌ์ถ•์— ์ตœ๋Œ€ 350์–ต๋‹ฌ๋Ÿฌ(์•ฝ 48์กฐ์›)๋ฅผ ํˆฌ์ž…ํ•˜๊ฒ ๋‹ค๊ณ  ๋ฐœํ‘œํ–ˆ๋‹ค. ์ด ๊ฐ€์šด๋ฐ ์ƒ๋‹น ๋ถ€๋ถ„์ด ์ž์ฒด AI ์นฉ ๊ฐœ๋ฐœ ๋ฐ ์œ„ํƒ์ƒ์‚ฐ์— ํ™œ์šฉ๋  ๊ฒƒ์œผ๋กœ ๋ณด์ธ๋‹ค.

๊ทธ๋Ÿฌ๋‚˜ ๋ธ”๋ฃธ๋ฒ„๊ทธ๋Š” ์ €์ปค๋ฒ„๊ทธ๊ฐ€ ์ตœ๊ทผ ์—”๋น„๋””์•„ 'H100' GPU 35๋งŒ๋Œ€๋ฅผ ๊ตฌ๋งคํ•  ๊ณ„ํš์„ ๋ฐํ˜”๋˜ ๋งŒํผ, ์—ฌ์ „ํžˆ ๋Œ€๋ถ€๋ถ„์˜ ํˆฌ์ž ๊ธˆ์•ก์€ ์—”๋น„๋””์•„ GPU ๊ตฌ๋งค์— ์“ฐ์ผ ๊ฐ€๋Šฅ์„ฑ์ด ์žˆ๋‹ค๊ณ  ๋‚ด๋‹ค๋ดค๋‹ค.

ํ˜„์‹ค์ ์œผ๋กœ ๋ฉ”ํƒ€์˜ ๋ฐ˜๋„์ฒด๋Š” ์—”๋น„๋””์•„ ์ œํ’ˆ๊ณผ ์„ฑ๋Šฅ์ฐจ๊ฐ€ ์ปค, ์šฉ๋„๊ฐ€ ๋‹ค์†Œ ๋‹ค๋ฅด๊ฒŒ ์“ฐ์ผ ๊ฒƒ์œผ๋กœ ์˜ˆ์ƒ๋˜๊ธฐ ๋•Œ๋ฌธ์ด๋‹ค. ์‹ค์ œ๋กœ ๋ฉ”ํƒ€๋Š” 2์„ธ๋Œ€ MTIA๊ฐ€ ์—”๋น„๋””์•„์˜ GPU๋ฅผ ๋Œ€์ฒดํ•˜๋Š” ๋Œ€์‹  ๋ณด์™„ํ•  ๊ฒƒ์ด๋ผ๊ณ  ๋ฐํ˜”๋‹ค.

ํ•˜์ง€๋งŒ ํ–ฅํ›„ AI ๊ด€๋ จ ์ธํ”„๋ผ ํˆฌ์ž๊ฐ€ ์ง€์†๋  ๊ฒƒ์ด๋ผ๋Š” ์ ์„ ๊ณ ๋ คํ•˜๋ฉด ๋น„์šฉ ๋ถ€๋‹ด๊ณผ ๋ฐ˜๋„์ฒด ์ˆ˜๊ธ‰ ์•ˆ์ •์„ฑ์„ ๊ณ ๋ คํ•ด ์ž์ฒด ๊ฐœ๋ฐœ AI ์นฉ์˜ ๋น„์ค‘์ด ์ ์ฐจ ๋†’์•„์งˆ ๊ฒƒ์œผ๋กœ ์˜ˆ์ƒ๋œ๋‹ค.

๋ธ”๋ฃธ๋ฒ„๊ทธ๋Š” โ€œ๋ฉ”ํƒ€๋ฟ ์•„๋‹ˆ๋ผ ์•„๋งˆ์กด๊ณผ ๋งˆ์ดํฌ๋กœ์†Œํ”„ํŠธ, ๊ตฌ๊ธ€ ๋“ฑ์ด ์—”๋น„๋””์•„์— ์˜์กด์„ ๋‚ฎ์ถ”๋ ค ๋ชจ๋‘ ์ž์ฒด AI ์นฉ ๊ฐœ๋ฐœ์— ๋›ฐ์–ด๋“ค์—ˆ๋‹คโ€๋ผ๋ฉฐ โ€œ๋‹จ๊ธฐ๊ฐ„์— ์‹คํ˜„ ๊ฐ€๋Šฅํ•œ ๊ณผ์ œ๋Š” ์•„๋‹ ๊ฒƒโ€์ด๋ผ๊ณ  ์งš์—ˆ๋‹ค.