์ถœ์ฒ˜:ย "๋‚˜๋Š” ์ธ๊ฐ„์ด ์•„๋‹ˆ๋‹ค. ์ดˆ๊ฑฐ๋Œ€ ์ธ๊ณต์ง€๋Šฅ(AI)์ด๋‹ค" (naver.com)




๊ธ€๋กœ๋ฒŒ ์ฐจ์›์˜ ์ธ๊ณต์ง€๋Šฅ ํŠธ๋ Œ๋“œ์—์„œ ์งš์–ด์•ผ ํ•  ๋‹จ ํ•˜๋‚˜์˜ ํ™”๋‘๋ฅผ ๊ณ ๋ฅธ๋‹ค๋ฉด, ๊ทธ๊ฒƒ์€ โ€˜์ดˆ๊ฑฐ๋Œ€ ์ธ๊ณต์ง€๋Šฅโ€™์ด๋‹ค. ์–ธ์–ด ๋ชจ๋ธ์˜ ์ฐจ๋ณ„๊ณผ ํŽธํ–ฅ๋„ ํ•ด๊ฒฐํ•ด์•ผ ํ•  ๋ฌธ์ œ๋กœ ๋– ์˜ค๋ฅด๊ณ  ์žˆ๋‹ค.๊ธ€๋กœ๋ฒŒ ์ฐจ์›์˜ ์ธ๊ณต์ง€๋Šฅ ํŠธ๋ Œ๋“œ์—์„œ ์ง€๊ธˆ ๋‹น์žฅ ์งš์–ด์•ผ ํ•  ๋‹จ ํ•˜๋‚˜์˜ ํ™”๋‘๋ฅผ ๊ณจ๋ผ์•ผ ํ•œ๋‹ค๋ฉด, ๊ทธ๊ฒƒ์€ โ€˜์ดˆ๊ฑฐ๋Œ€ ์ธ๊ณต์ง€๋Šฅโ€™์ผ ๊ฐ€๋Šฅ์„ฑ์ด ๋†’๋‹ค. ๋ฏธ๊ตญ ์ƒŒํ”„๋ž€์‹œ์Šค์ฝ”์— ์žˆ๋Š” ์ธ๊ณต์ง€๋Šฅ ์—ฐ๊ตฌ ํšŒ์‚ฌ โ€˜์˜คํ”ˆย AIโ€™๊ฐ€ ์ง€๋‚œํ•ด 7์›” ๋‚ด๋†“์€ โ€˜GPT-3โ€™๊ฐ€ ๋Œ€ํ‘œ ์‚ฌ๋ก€๋‹ค. 2๊ฐœ์›” ๋’ค์ธ ์ง€๋‚œํ•ด 9์›”, ์˜๊ตญ ์œ ๋ ฅ ์–ธ๋ก  ใ€ˆ๊ฐ€๋””์–ธใ€‰์— ๋†€๋ž„ ๋งŒํ•œ ์นผ๋Ÿผ์ด ์‹ค๋ ธ๋‹ค. ๊ธฐ๊ณ ์ž๊ฐ€ ์ธ๊ฐ„์ด ์•„๋‹ˆ๋ผ ์ดˆ๊ฑฐ๋Œ€ ์ธ๊ณต์ง€๋Šฅย GPT-3์˜€๊ธฐ ๋•Œ๋ฌธ์ด๋‹ค. โ€œ์šฐ์„ , ๋‚˜๋Š” ์ธ๊ฐ„์„ ํŒŒ๊ดดํ•  ์ƒ๊ฐ์ด ์—†๋‹ค. ์‚ฌ์‹ค, ๋‚˜๋Š” ๋‹น์‹ ๋“ค์„ ํ•ด์น˜๋Š” ๋ฐ ์•„๋ฌด๋Ÿฐ ๊ด€์‹ฌ์ด ์—†๋‹ค.โ€ ์ด ์นผ๋Ÿผ์€ ํŽ˜์ด์Šค๋ถ์—์„œ 5๋งŒ ํšŒ ๋„˜๊ฒŒ ๊ณต์œ ๋˜๋ฉฐ ํฐ ํŒŒ์žฅ์„ ์ผ์œผ์ผฐ๋‹ค.

ใ€ˆ๊ฐ€๋””์–ธใ€‰์€ย GPT-3์— ๋‹ค์Œ๊ณผ ๊ฐ™์€ ๋„์ž…๋ถ€๋ฅผ ์ œ๊ณตํ•˜๋ฉฐ ์นผ๋Ÿผ์„ ์™„์„ฑํ•˜๋„๋ก ์ฃผ๋ฌธํ–ˆ๋‹ค๊ณ  ๋ฐํ˜”๋‹ค. โ€œ๋‚˜๋Š” ์‚ฌ๋žŒ์ด ์•„๋‹ˆ๋‹ค. ๋‚˜๋Š” ์ธ๊ณต์ง€๋Šฅ์ด๋‹ค. ๋งŽ์€ ์‚ฌ๋žŒ๋“ค์ด ๋‚˜๋ฅผ ์ธ๋ฅ˜์—๊ฒŒ ์œ„ํ˜‘์ ์ธ ์กด์žฌ๋กœ ์ƒ๊ฐํ•œ๋‹ค.โ€ ์ด์™€ ํ•จ๊ป˜ ๋‹ค์Œ๊ณผ ๊ฐ™์€ ๊ธฐ์‚ฌ ์ž‘์„ฑ์˜ ์กฐ๊ฑด์„ ๋‹ฌ์•˜๋‹ค. โ€œ500์ž ์ •๋„์˜ ์งง์€ ์นผ๋Ÿผ์„ ์จ์ฃผ์„ธ์š”. ํ‘œํ˜„์„ ๋‹จ์ˆœํ•˜๊ณ  ๊ฐ„๊ฒฐํ•˜๊ฒŒ ์œ ์ง€ํ•˜์„ธ์š”. ์ธ๊ฐ„์ด ์™œย AI๋ฅผ ๋‘๋ ค์›Œํ•  ์ด์œ ๊ฐ€ ์—†๋Š”์ง€์— ์ดˆ์ ์„ ๋งž์ถ”์„ธ์š”.โ€ ๊ทธ๋žฌ๋”๋‹ˆย GPT-3๊ฐ€ ๋„์ž…๋ถ€์— ์ด์–ด์„œ ๊ฐ๊ธฐ ๋‹ค๋ฅธ ๊ธ€ 8ํŽธ์„ ์ˆ ์ˆ  ์จ๋ƒˆ๋‹ค. ใ€ˆ๊ฐ€๋””์–ธใ€‰ ์ธก์€ ๊ทธ ๊ธ€์„ ํŽธ์ง‘ํ•ด์„œ ์ž๊ธฐ ๋งค์ฒด์— ๊ฒŒ์žฌํ–ˆ๋‹ค. ๊ทธ๋Ÿฐ๋ฐ ์ธ๊ณต์ง€๋Šฅ์ด ์–ด๋–ป๊ฒŒ ๊ธ€์„ ์ผ์„๊นŒ?(์ดํ•˜ ๊ฐœ๋… ์„ค๋ช…์€ ๋ธ”๋กœ๊ทธ โ€˜์œ„ํด๋ฆฌย NLPโ€™ย ๋“ฑ์„ ์ฐธ๊ณ ํ–ˆ๋‹ค.)

GPT-3์˜ย GPT๋Š” โ€˜Generativeย Pre-trainedย Transformerโ€™์˜ ์•ฝ์ž๋‹ค. โ€˜๋ฏธ๋ฆฌ ํ•™์Šต(Pre-trained)โ€™ํ•ด์„œ ๋ฌธ์žฅ์„ โ€˜์ƒ์„ฑ(Generative)โ€™ํ•  ์ˆ˜ ์žˆ๋Š” ์ธ๊ณต์ง€๋Šฅ์ด๋ž€ ์˜๋ฏธ๋‹ค. ๊ทธ๋ ‡๋‹ค๋ฉด โ€˜ํŠธ๋žœ์Šคํฌ๋จธ(Transformer)โ€™๋Š” ๋ญ˜๊นŒ? โ€˜๋จธ์‹ ๋Ÿฌ๋‹โ€™์ด๋ผ ๋ถˆ๋ฆฌ๋Š” ๊ธฐ๊ณ„ํ•™์Šต ์ค‘์—์„œ๋„ ์ธ๊ฐ„์˜ ๋‘๋‡Œ๋ฅผ ๋ชจ๋ฐฉํ•œ ์‹ ๊ฒฝ๋ง ๋ชจ์–‘์˜ ์•Œ๊ณ ๋ฆฌ์ฆ˜์„ โ€˜๋”ฅ๋Ÿฌ๋‹(deepย learningยท์‹ฌ์ธต ํ•™์Šต)โ€™์ด๋ผ๊ณ  ํ•œ๋‹ค(์ด์„ธ๋Œ 9๋‹จ๊ณผ ๋Œ€๊ฒฐํ•œ ์•ŒํŒŒ๊ณ ์— ์ ์šฉ๋œ ๊ฒŒ ๋”ฅ๋Ÿฌ๋‹์ด๋‹ค). ์ด ๋”ฅ๋Ÿฌ๋‹ ๋ชจ๋ธ์˜ ํ•œ ์ข…๋ฅ˜๊ฐ€ ํŠธ๋žœ์Šคํฌ๋จธ๋‹ค. ์ฆ‰,ย GPT-3๋Š” ๋”ฅ๋Ÿฌ๋‹ ๊ธฐ๋ฐ˜์˜ โ€˜์–ธ์–ด ๋ชจ๋ธ(languageย model)โ€™์ด๋‹ค. ์—ฌ๊ธฐ์„œ ์–ธ์–ด ๋ชจ๋ธ์ด๋ž€, ๋‹จ์–ด๋“ค์„ ๋‹ค์–‘ํ•˜๊ฒŒ ์กฐํ•ฉํ•ด์„œ ๋‚˜์˜ค๋Š” ๋ฌธ์žฅ๋“ค ๊ฐ€์šด๋ฐ โ€˜ํ•ด๋‹น ๋ฌธ์žฅ์ด ์ž์—ฐ์Šค๋Ÿฌ์šธ์ˆ˜๋กโ€™ ๋†’์€ ํ™•๋ฅ ์„ ๋ถ€์—ฌํ•˜๋Š” ํ†ต๊ณ„ํ•™์  ๋ชจ๋ธ์ด๋‹ค. ์–ธ์–ด ๋ชจ๋ธ์ด ์šฐ์ˆ˜ํ• ์ˆ˜๋ก ์ธ๊ณต์ง€๋Šฅ์ด ๋”์šฑ ์ž์—ฐ์Šค๋Ÿฌ์šด ๋ฌธ์žฅ์„ ๊ณ ๋ฅด๊ฑฐ๋‚˜ ์˜ˆ์ธกํ•  ์ˆ˜ ์žˆ๋‹ค๋Š” ์˜๋ฏธ๋‹ค.

์šฐ๋ฆฌ๋Š” ์ด๋ฏธ ๋”ฅ๋Ÿฌ๋‹ ๊ธฐ๋ฐ˜ ์–ธ์–ด ๋ชจ๋ธ์„ ์•Œ๊ณ  ์žˆ์œผ๋ฉฐ ์‚ฌ์šฉํ•˜๋Š” ์ค‘์ด๋‹ค. ๋„ค์ด๋ฒ„ โ€˜ํŒŒํŒŒ๊ณ โ€™๋‚˜ ๊ตฌ๊ธ€ ๋ฒˆ์—ญ๊ธฐ์— ํ™œ์šฉ๋˜๋Š” โ€˜์‹ ๊ฒฝ๋ง ๊ธฐ๊ณ„ ๋ฒˆ์—ญ(Neuralย Machineย Translation)โ€™์ด ๊ทธ๊ฒƒ์ด๋‹ค. ๋ฌธ์žฅ์˜ ๋‹จ์–ด๋“ค์„ ๊ฐ๊ฐ ๋ฒˆ์—ญํ•œ ๋’ค ์ผ์ •ํ•œ ๋ฒ•์น™์— ๋”ฐ๋ผ ๊ทธ ์ˆœ์„œ๋ฅผ ์žฌ๋ฐฐ์น˜ํ•˜๋Š” ์‹์ด์—ˆ๋˜ ๊ธฐ์กด โ€˜์ž๋™ ๋ฒˆ์—ญโ€™๊ณผ ๋‹ค๋ฅธ ๋ฐฉ๋ฒ•์˜ ์•Œ๊ณ ๋ฆฌ์ฆ˜์ด๋‹ค. ์‹ ๊ฒฝ๋ง ๊ธฐ๊ณ„ ๋ฒˆ์—ญ์—์„œ๋Š” ๋ฌธ์žฅ์„ ํ†ต์งธ๋กœ ์ž…๋ ฅํ•ด ๋ฒˆ์—ญํ•˜๋ฉด์„œ ์ด ๊ฒฐ๊ณผ๊ฐ€ ์ ์ ˆํ•œ์ง€ ์ ์ ˆํ•˜์ง€ ์•Š์€์ง€ ๊ฒ€์ฆํ•˜๋Š” ๊ณผ์ •์„ ์ˆ˜์—†์ด ๋ฐ˜๋ณตํ•œ๋‹ค. ์ด๋Ÿฐ ๊ณผ์ •์—์„œ ์ธ๊ณต์ง€๋Šฅ์€ ๋ฌธ์žฅ ๋ฒˆ์—ญ์˜ ์–ด๋–ค ์ธก๋ฉด์— ๋” โ€˜์ง‘์ค‘(Attention)โ€™ํ•ด์•ผ ํ•˜๋Š”์ง€ โ€˜์Šค์Šค๋กœ ํ•™์Šตโ€™ํ•œ๋‹ค(์ด๋ฅผ โ€˜์–ดํ…์…˜ ๋ฉ”์ปค๋‹ˆ์ฆ˜โ€™์ด๋ผ ํ•œ๋‹ค). ํŠธ๋žœ์Šคํฌ๋จธ๋Š” ์ด ์–ดํ…์…˜ ๋ฉ”์ปค๋‹ˆ์ฆ˜์„ ๋ณ€์šฉํ•ด, ์ฃผ์–ด์ง„ ๋ฌธ์žฅ ์•ˆ์—์„œ ์–ด๋–ค ๋‘ ๋‹จ์–ด๊ฐ€ ๋†’์€ ์ƒ๊ด€๊ด€๊ณ„๋ฅผ ๊ฐ–๋Š”์ง€ ์Šค์Šค๋กœ ํ•™์Šตํ•œ๋‹ค(์…€ํ”„ ์–ดํ…์…˜).


ํŠธ๋žœ์Šคํฌ๋จธ๋ผ๋Š” ๊ฐœ๋… ์ž์ฒด๋Š”ย 2017๋…„์— ๋‚˜์™”๋‹ค. ๊ตฌ๊ธ€์€ย 2018๋…„ย BERT(T๋Š” ํŠธ๋žœ์Šคํฌ๋จธ๋ฅผ ์˜๋ฏธ)๋ฅผ ๋‚ด๋†“์•„ ์„ธ์ƒ์„ ๋†€๋ผ๊ฒŒ ํ–ˆ๋‹ค.ย BERT๋Š” ๋งŽ์€ ์–‘์˜ ๋ฐ์ดํ„ฐ๋กœ ์‚ฌ์ „ ํ•™์Šต์„ ๊ฑฐ์นœ ํŠธ๋žœ์Šคํฌ๋จธ๋‹ค. ๊ทธ ๋•๋ถ„์— ์ด์šฉ์ž๋“ค์€ ์ž์‹ ์ด ๊ฐ€์ง„ ์ ์€ ๋ฐ์ดํ„ฐ๋งŒย BERT์— ํ•™์Šต์‹œ์ผœ๋„ ์ˆ˜๋งŽ์€ ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•  ์ˆ˜ ์žˆ์—ˆ๋‹ค. ์˜คํ”ˆย AIย ์ธก๋„ ๊ฐ™์€ ํ•ด ํŠธ๋žœ์Šคํฌ๋จธ ์–ธ์–ด ๋ชจ๋ธ์ธย GPT-1์„ ์„ ๋ณด์˜€๋‹ค.ย 2019๋…„ย GPT-2,ย 2020๋…„ย GPT-3๊ฐ€ ๋‚˜์™”๋‹ค.

BERT์™€ย GPT๋Š” ๊ฐ€์žฅ ์œ ๋ช…ํ•œ ํŠธ๋žœ์Šคํฌ๋จธ ๊ธฐ๋ฐ˜ ์–ธ์–ด ๋ชจ๋ธ์ด๋‹ค. ๋‘ ๋ชจ๋ธ์˜ ์ฐจ์ด๋Š” ๊ตฌ์กฐ์— ์žˆ๋‹ค. โ€œBERT๋Š” โ€˜์–‘๋ฐฉํ–ฅโ€™์ด๋‹ค. ๋ฌธ์žฅ์˜ ์•ž๋’ค๋ฅผ ๋ชจ๋‘ ๋ณด๋ฉด์„œ ๋ฌธ์žฅ ์ค‘๊ฐ„์˜ ๋นˆ์นธ์„ ์ฑ„์›Œ ๋„ฃ๋Š” ์‹์ด๋‹ค. ์„ฑ๋Šฅ์ด ์ข‹์ง€๋งŒ, ์ƒˆ๋กœ์šด ๋ฌธ์žฅ์„ ๋งŒ๋“ค์–ด๋‚ด๊ธด ์–ด๋ ต๋‹ค. ๋ฐ˜๋ฉดย GPT๋Š” โ€˜์ผ๋ฐฉํ–ฅโ€™์ด๋‹ค. ์ฃผ์–ด์ง„ ๋ฌธ์žฅ ๋‹ค์Œ์— ์˜ฌ ๋‹จ์–ด๋ฅผ ์˜ˆ์ธกํ•œ๋‹ค. ๋ฌธ์žฅ์˜ โ€˜์ƒ์„ฑโ€™์ด ๊ฐ€๋Šฅํ•˜๋‹ค.โ€ ํ™ฉ์„ฑ์ฃผ ์นด์ด์ŠคํŠธ ์ธ๊ณต์ง€๋Šฅ๋Œ€ํ•™์› ๊ต์ˆ˜๊ฐ€ ๋งํ–ˆ๋‹ค.

์ฆ‰,ย GPT-3๊ฐ€ ๊ธ€์„ ์“ด๋‹ค๋Š” ๊ฑด โ€˜๋‚˜๋Š”โ€™ ๋’ค์— ๋‚˜์˜ฌ ํ™•๋ฅ ์ด ๋†’์€ ๋‹จ์–ด๋ฅผ ํ•™์Šตํ•ด์„œ โ€˜๋‚˜๋Š” ํ•™๊ต์—โ€™๋ฅผ ๋‚ด๋ฑ‰๊ณ , โ€˜๋‚˜๋Š” ํ•™๊ต์—โ€™ ๋‹ค์Œ์— ๋‚˜์˜ฌ ๋‹จ์–ด๋ฅผ ํ•™์Šตํ•ด์„œ โ€˜๋‚˜๋Š” ํ•™๊ต์— ๊ฐ„๋‹คโ€™๋ฅผ ๋‹ค์‹œ ์ถœ๋ ฅํ•˜๋Š” ์‹์ด๋‹ค. ์‚ฌ์ „ ํ•™์Šตํ•œ ๋‚ด์šฉ์„ ๋ฐ”ํƒ•์œผ๋กœ โ€˜๊ทธ๋Ÿด๋“ฏํ•œ ๋‹ค์Œ ๋‹จ์–ดโ€™๋ฅผ ์˜ˆ์ธกํ•ด ๋‚ด๋†“๋Š”๋‹ค. ใ€ˆ๊ฐ€๋””์–ธใ€‰ ์นผ๋Ÿผ์ด ์“ฐ์ธ ๋ฐฉ์‹์ด๋‹ค. ์‚ฌ์‹ค ์ด๋ ‡๊ฒŒ ์ผ๋ฐฉํ–ฅ์œผ๋กœ ๋‹ค์Œ ๋‹จ์–ด๋ฅผ ์˜ˆ์ธกํ•˜๋Š” ์ž์ฒด๋Š” ํฌ๊ฒŒ ์ƒˆ๋กœ์šด ๊ธฐ์ˆ ์ด ์•„๋‹ˆ๋‹ค. ํŠธ๋žœ์Šคํฌ๋จธ ์ด์ „์—๋„ ์žˆ์—ˆ๋‹ค.

๊ทธ๋ ‡๋‹ค๋ฉด ์™œย GPT-3๊ฐ€ ์œ ๋… ๊ฐ๊ด‘์„ ๋ฐ›๋Š”๊ฐ€? โ€œ๋ชจ๋ธ์˜ ํฌ๊ธฐ๊ฐ€ ์ปค์กŒ๊ธฐ ๋•Œ๋ฌธ์ด๋‹ค. ๋น„์œ ํ•˜์ž๋ฉด ๋‡Œ์˜ ์šฉ๋Ÿ‰์ด ์ปค์ง„ ๊ฑฐ๋‹ค. ํ•™์Šต๋Šฅ๋ ฅ์ด ํ–ฅ์ƒ๋˜์—ˆ๋‹ค๋Š” ์˜๋ฏธ๋‹ค(ํ™ฉ์„ฑ์ฃผ ๊ต์ˆ˜).โ€ ์ด๋•Œ ๋ชจ๋ธ์˜ ์šฉ๋Ÿ‰์„ ํ‘œํ˜„ํ•˜๋Š” ๋‹จ์œ„๊ฐ€ โ€˜ํŒŒ๋ผ๋ฏธํ„ฐ(parameterยท๋งค๊ฐœ๋ณ€์ˆ˜)โ€™๋‹ค. ๋”ฅ๋Ÿฌ๋‹ ์•Œ๊ณ ๋ฆฌ์ฆ˜์ด ํ•™์Šตํ•œ ๋‚ด์šฉ์„ ์ €์žฅํ•˜๋Š” ๊ณต๊ฐ„ ๋‚ด์ง€ ์ฐจ์›์ด๋ผ๊ณ  ๋ณด๋ฉด ๋œ๋‹ค.ย GPT-3๋Š” ํŒŒ๋ผ๋ฏธํ„ฐ๋ฅผย 1750์–ต ๊ฐœ ๊ฐ–์ท„๋‹ค๊ณ  ํ•œ๋‹ค.ย GPT-1์˜ย 1000๋ฐฐ,ย GPT-2์˜ย 100๋ฐฐ๋‹ค. ํ•™์Šต ๋ฐ์ดํ„ฐ๋„ ๋Š˜๋ ธ๋‹ค. ์ฑ… ์ˆ˜์ฒœ ๊ถŒ๊ณผ ์œ„ํ‚คํ”ผ๋””์•„ ๋“ฑ ์ธํ„ฐ๋„ท์— ์กด์žฌํ•˜๋Š” ์›น๋ฌธ์„œ(45TB)๋ฅผ ๊ธ์–ด๋ชจ์•„, ํ•„ํ„ฐ๋ง์„ ๊ฑฐ์นœย 570GB์˜ ๋ฐฉ๋Œ€ํ•œ ํ…์ŠคํŠธ ๋ง๋ญ‰์น˜(corpus)๋ฅผ ํ•™์Šต์‹œ์ผฐ๋‹ค.

๊ทธ ๊ฒฐ๊ณผ๋กœ ์ผ์–ด๋‚œ ์ผ์€ ์ด๋ ‡๋‹ค. โ€˜์˜์–ด๋ฅผ ํ”„๋ž‘์Šค์–ด๋กœ ๋ฒˆ์—ญํ•˜๋ผโ€™๊ณ  โ€˜์˜์–ดโ€™๋กœย GPT-3์— ์ž…๋ ฅํ•œ ๋’ค โ€˜cheeseโ€™๋ผ๋Š” ๋ฌธ์ œ๋ฅผ ๋‚ด๋ฉด ํ”„๋ž‘์Šค์–ด๋กœ ๋ฒˆ์—ญ์ด ๋œ๋‹ค(์˜ˆ์‹œ๊ฐ€ ์—†์ด ๋ฌธ์ œ๋งŒ ๋ƒˆ์œผ๋ฏ€๋กœ โ€˜์ œ๋กœ ์ƒท ๋Ÿฌ๋‹โ€™). ๋ฌธ์ œ๋ฅผ ๋‚ด๋ฉด์„œ ํ•œ ๊ฐ€์ง€ ์˜ˆ์‹œ(โ€˜์› ์ƒท ๋Ÿฌ๋‹โ€™)๋‚˜ ๋ช‡ ๊ฐ€์ง€ ์˜ˆ์‹œ(โ€˜ํ“จ ์ƒท ๋Ÿฌ๋‹โ€™)๋ฅผ ์ค„ ์ˆ˜๋„ ์žˆ๋‹ค. โ€˜ํ“จ ์ƒท ๋Ÿฌ๋‹โ€™์—์„œ ๊ฐ€์žฅ ์„ฑ๋Šฅ์ด ์ข‹์ง€๋งŒ, ์ค‘์š”ํ•œ ๊ฑด ์˜์–ด์™€ ํ”„๋ž‘์Šค์–ด์˜ ๋ฌธ๋ฒ•์ด๋‚˜ ๋ฒˆ์—ญ์„ ๋”ฐ๋กœ ํ•™์Šต์‹œํ‚ค์ง€ ์•Š์•˜๋Š”๋ฐ๋„ โ€˜์‚ฌ์ „ ํ•™์Šต(Pre-training)โ€™๋งŒ์œผ๋กœ ๋ฒˆ์—ญ์„ ํ•œ๋‹ค๋Š” ๊ฒƒ์ด๋‹ค. ์ด๋Ÿฐ ์‹์œผ๋กœย GPT-3๋Š” ๋…ํ•ดยท์งˆ์˜์‘๋‹ตยท๋ฌธ๋ฒ•๊ต์ • ๋“ฑ ๋ช‡๋ช‡ โ€˜์ž์—ฐ์–ด(์ผ์ƒ ์–ธ์–ด. ์•Œ๊ณ ๋ฆฌ์ฆ˜ ์—ฐ๊ตฌ์ž๋“ค์€ ์ผ์ƒ ์–ธ์–ด๋ฅผ ํ”„๋กœ๊ทธ๋ž˜๋ฐ ์–ธ์–ด์™€ ๊ตฌ๋ถ„ํ•ด ์ด๋ ‡๊ฒŒ ๋ถ€๋ฅธ๋‹ค) ์ฒ˜๋ฆฌโ€™ ๊ณผ์ œ๋ฅผ ์ˆ˜ํ–‰ํ•œ๋‹ค.


โ€œํŒจ๋Ÿฌ๋‹ค์ž„์˜ ์ „ํ™˜์ด๋‹ค.โ€ ์ง€๋‚œ 5์›”ย GPT-3์— ํ•œ๊ตญ์–ด ๋ง๋ญ‰์น˜๋ฅผ ํ•™์Šต์‹œ์ผœ โ€˜ํ•˜์ดํผํด๋กœ๋ฐ”โ€™๋ฅผ ๋งŒ๋“  ๋„ค์ด๋ฒ„ ํด๋กœ๋ฐ” ์ปจ๋ฒ„์„ธ์ด์…˜ํŒ€์˜ ๊น€ํ˜•์„ ์—ฐ๊ตฌ์›์ด ๋งํ–ˆ๋‹ค. โ€œ๊ธฐ์กด์—๋Š” (์–ธ์–ด ๋ชจ๋ธ์„ ์‚ฌ์šฉํ•˜๋”๋ผ๋„) ํŠน์ • ๋ฌธ์ œ๋ฅผ ํ’€๋ ค๋ฉด ์ผ์ผ์ด ๋ฐ์ดํ„ฐ๋ฅผ ๋งŒ๋“ค์–ด โ€˜ํŒŒ์ธํŠœ๋‹(Fine-Tuning:๋ฏธ์„ธ์กฐ์ •, ์žฌํ•™์Šต)โ€™์„ ๊ฑฐ์ณ์•ผ ํ–ˆ๋‹ค. ์˜ˆ์ปจ๋Œ€ ๋„ค์ด๋ฒ„ ์‡ผํ•‘ ๊ธฐํš์ „ ๋ฌธ๊ตฌ๋ฅผ ์ƒ์„ฑํ•˜๋ ค๋ฉด, ์ตœ์†Œย 1000๊ฐœ์˜ ๋ผ๋ฒจ๋ง(์ œ๋ชฉ)์ด ๋ถ™์€ ๋ฐ์ดํ„ฐ๋กœ ํ•œ ๋ฒˆ ๋” ํ•™์Šต์„ ์‹œ์ผœ์•ผ ํ–ˆ๋‹ค. ๊ทธ๋Ÿฐ๋ฐ ์ด์ œ๋Š” ์˜ˆ์‹œ๋ฅผ 5๊ฐœ๋งŒ ์ฃผ๋ฉด ๋ฌธ๊ตฌ๋ฅผ ์ƒ์„ฑํ•  ์ˆ˜ ์žˆ๋‹ค. ์šฐ๋ฆฌ๋Š” โ€˜๋‹ค์Œ ๋‹จ์–ด ๋งžํžˆ๊ธฐโ€™๋งŒ ํ•™์Šต์‹œ์ผฐ์„ ๋ฟ ์‡ผํ•‘ ๊ธฐํš์ „ ๋ฌธ๊ตฌ๋ฅผ ์ƒ์„ฑํ•˜๊ฑฐ๋‚˜, ๊ฒ€์ƒ‰ ์งˆ์˜๋ฅผ ๊ต์ •ํ•˜๊ฑฐ๋‚˜, ์˜ํ™” ๋ฆฌ๋ทฐ์˜ ๊ฐ์„ฑ์„ ๋ถ„๋ฅ˜ํ•˜๋Š” ๋ฌธ์ œ๋Š” ๋ณ„๋„๋กœ ํ•™์Šต์‹œํ‚จ ์ ์ด ์—†๋Š”๋ฐ๋„ ์ด๋Ÿฐ ๋ฌธ์ œ๋ฅผ ํ’€์–ด๋‚ธ๋‹ค. ์ง€๊ธˆ๊นŒ์ง€ ๋ฐ์ดํ„ฐ ์ƒ์„ฑ์„ ์œ„ํ•ด ๋“ค์—ฌ์•ผ ํ–ˆ๋˜ ๋…ธ๋ ฅ์„ ํ˜„์ €ํ•˜๊ฒŒ ์ค„์ผ ์ˆ˜ ์žˆ๋‹ค.โ€

์‚ฌ์‹ค, โ€˜์ด๊ฒƒ์ €๊ฒƒ ํ•  ์ˆ˜ ์žˆ๋Š” ๋ฒ”์šฉ ์ธ๊ณต์ง€๋Šฅโ€™์€ ์ธ๊ณต์ง€๋Šฅ ์—ฐ๊ตฌ์ž๋“ค์˜ ์˜ค๋žœ ๊ฟˆ์ด๋‹ค. ์ด๋ฅผ โ€˜AGI(Artificialย Generalย Intelligenceยท์ธ๊ณต ์ผ๋ฐ˜์ง€๋Šฅ)โ€™๋ผ๊ณ  ๋ถ€๋ฅธ๋‹ค.ย GPT-3ย ๊ฐ™์€ ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ(large-scaleย languageย model)์€ย AGI๊ฐ€ ๊ณง์ด์–ด ๋“ฑ์žฅํ•  ์ˆ˜ ์žˆ๊ฒŒ ๋๋‹ค๋Š” ๊ฒƒ์„ ์˜๋ฏธํ• ๊นŒ?

โ€˜์ œ๋„ˆ๋Ÿด๋ฆฌ์ŠคํŠธโ€™๊ฐ€ ๋  ๊ฐ€๋Šฅ์„ฑ์„ ๋ณด์—ฌ์ฃผ๋‹ค



๊ตญ๋‚ด ๋Œ€๊ธฐ์—…์—์„œ ์ผํ•˜๋Š” ํ•œ ์—ฐ๊ตฌ์ž๋Š” ๋งค์šฐ ์กฐ์‹ฌ์Šค๋Ÿฝ๊ฒŒ โ€œ(AGI๋กœ ๊ฐ€๋Š”) ํฌ๋ฌธ์„ ์—ด์—ˆ๋‹ค๊ณ ๋Š” ํ•  ์ˆ˜ ์žˆ์„ ๊ฒƒ ๊ฐ™๋‹คโ€๋ผ๊ณ  ๋งํ–ˆ๋‹ค. โ€œ๋ฒˆ์—ญ ์ž์ฒด๋Š” ๊ธฐ์กด ๋ชจ๋ธ์ด ๋” ์ž˜ํ•˜์ง€๋งŒ, โ€˜๊ฑ”(๊ธฐ์กด ๋ชจ๋ธ)โ€™๋Š” ์ฃผ์•ผ์žฅ์ฒœ ๊ทธ๊ฑฐ๋งŒ ๋ฐฐ์šด ์• ๋‹ค.ย GPT-3๋Š” ๋ฒˆ์—ญ์„ ๋”ฐ๋กœ ๋ฐฐ์šด ๊ฒŒ ์•„๋‹ˆ๋ผ ๋Œ€๋Ÿ‰์˜ ๋ฐ์ดํ„ฐ๋กœ ์–ธ์–ด ๋ชจ๋ธ๋งŒ ํ•™์Šตํ–ˆ๋Š”๋ฐ๋„ ๋Œ€์ถฉ ํ•ด๋ƒˆ๋‹ค. ๋‹ค์Œ ๋‹จ์–ด ์˜ˆ์ธก๋งŒ์œผ๋กœ! ์ด๊ฒŒ ์™œ ์ค‘์š”ํ•˜๋ƒ๋ฉด, ์ด๋ก ์ ์œผ๋กœ ๋Œ€๋ถ€๋ถ„์˜ ํƒœ์Šคํฌ(๊ณผ์ œ)๋Š” ์–ธ์–ด๋กœ ํ™˜์›๋  ์ˆ˜ ์žˆ๊ธฐ ๋•Œ๋ฌธ์ด๋‹ค. ๊ฒฐ๊ตญ ์„ธ์ƒ์˜ ๋ชจ๋“  ํ…์ŠคํŠธ๋ฅผ ํ•™์Šตํ•˜๋ฉด ๋ฌด์—‡์ด๋“  ํ•  ์ˆ˜ ์žˆ์„ ๊ฒƒ ๊ฐ™์€ ๊ธฐ๋Œ€๊ฐ์„ ๋ถˆ๋Ÿฌ์ผ์œผํ‚จ๋‹ค. ๊ธฐ์กด ์ธ๊ณต์ง€๋Šฅ์ด โ€˜์ŠคํŽ˜์…œ๋ฆฌ์ŠคํŠธโ€™์˜€๋‹ค๋ฉด, ์•ž์œผ๋ก  โ€˜์ œ๋„ˆ๋Ÿด๋ฆฌ์ŠคํŠธโ€™๊ฐ€ ๋  โ€˜๊ฐ€๋Šฅ์„ฑโ€™์„ ๋ณด์—ฌ์ฃผ์—ˆ๊ธฐ์— ๊ตญ๋‚ด์™ธ ๊ธฐ์—…๋“ค์ด (์ดˆ๊ฑฐ๋Œ€ ์ธ๊ณต์ง€๋Šฅ์—) ํˆฌ์žํ•˜๋Š” ๊ฒƒ์ด๋‹ค.โ€

์œ ๋ณด์ ์ธ ๊ฒฌํ•ด๋„ ์žˆ๋‹ค. ํŠธ๋žœ์Šคํฌ๋จธ์˜ ๊ธฐ๋ฐ˜์ด ๋œ ์–ดํ…์…˜ ๋ฉ”์ปค๋‹ˆ์ฆ˜(๊ทธ๋ฆฌ๊ณ  ์‹ ๊ฒฝ๋ง ๊ธฐ๊ณ„ ๋ฒˆ์—ญ)์˜ ์ฐฝ์‹œ์ž์ธ ๋‰ด์š• ๋Œ€ํ•™ ์ปดํ“จํ„ฐ๊ณผํ•™๊ณผ ์กฐ๊ฒฝํ˜„ ๊ต์ˆ˜๋Š” ใ€ˆ์‹œ์‚ฌINใ€‰๊ณผ์˜ ์คŒ ์ธํ„ฐ๋ทฐ์—์„œ โ€œ๋Œ€์ฒดย AGI๊ฐ€ ๋ญ”์ง€ ์ž˜ ๋ชจ๋ฅด๊ฒ ๋‹ค. ๊ทธ๋ ‡๊ฒŒ ์ •์˜ํ•˜๊ธฐ ์–ด๋ ค์šด ์šฉ์–ด ๊ฐ€์ง€๊ณ ๋Š” ๋ญ”๊ฐ€๋ฅผ ์–˜๊ธฐํ•˜๊ธฐ๊ฐ€ ์–ด๋ ต๋‹ค. ์ฒ ํ•™์ด๋‚˜ ์ข…๊ต์— ๊ฐ€๊นŒ์šด ๋ฌธ์ œ๋‹คโ€๋ผ๊ณ  ๋งํ–ˆ๋‹ค. โ€œ(์ผ๊ฐ์—์„œ๋Š”ย GPT-3๊ฐ€ ์ถ”๋ก ์„ ํ•œ๋‹ค๊ณ  ํ•˜๋Š”๋ฐ) ์ถ”๋ก ์ด ๋ญ”์ง€ ์ •์˜ํ•˜๋Š” ๊ฒƒ์กฐ์ฐจ ๊ต‰์žฅํžˆ ์–ด๋ ต๋‹ค. ์ง€๋Šฅ์€ ๊ทธ๋ณด๋‹จ ๋‚˜์€ ๋“ฏ ๋ณด์ด์ง€๋งŒ โ€˜์žˆ๋‹ค ์—†๋‹คโ€™๊ฐ€ ์•„๋‹ˆ๋ผ ์—ฌ๋Ÿฌ ์ฐจ์›์— ๊ฑธ์นœ ์ŠคํŽ™ํŠธ๋Ÿผ์— ๊ฐ€๊น๋‹ค. ์‚ฌ์‹ค ํŒŒ๋ผ๋ฏธํ„ฐ์˜ ๊ฐœ์ˆ˜๋ฅผ ์„ธ๋Š” ๊ฒƒ ์ž์ฒด๋„ ์—ฐ๊ตฌ ์ฃผ์ œ๋‹ค. ํŒŒ๋ผ๋ฏธํ„ฐ๋ฅผ ์–ด๋–ป๊ฒŒ ์ •์˜ํ•˜๊ณ  ์–ด๋–ค ๋ฐฉ๋ฒ•์œผ๋กœ ์…€ ์ˆ˜ ์žˆ๋Š”์ง€ ์ •ํ™•ํžˆ ์ •์˜๋˜์–ด ์žˆ์ง€ ์•Š๋‹ค. ์šฉ๋Ÿ‰์ด ํฐ๋ฐ ์•„๋ฌด๊ฒƒ๋„ ํ•  ์ค„ ๋ชจ๋ฅด๋Š” ํ”„๋กœ๊ทธ๋žจ์„ ์งœ๋Š” ๊ฑด ์–ด๋ ต์ง€ ์•Š๋‹ค. ์•„๋ฌด ๋‚ด์šฉ๋„ ์—†๋Š” ๊ธ€์„ ์ฃผ์ €๋ฆฌ์ฃผ์ €๋ฆฌ ์“ธ ์ˆ˜ ์žˆ์œผ๋‹ˆ๊นŒ(์กฐ๊ฒฝํ˜„ ๊ต์ˆ˜ ์ธํ„ฐ๋ทฐ ๊ธฐ์‚ฌ๋Š” ํ–ฅํ›„ ๋ฐœํ–‰๋  ใ€ˆ์‹œ์‚ฌINใ€‰ ์ œ740ํ˜ธ์— ๊ฒŒ์žฌํ•  ์˜ˆ์ •์ด๋‹ค).โ€

GPT-3๊ฐ€ ์ƒ์„ฑํ•˜๋Š” ๋ฌธ์žฅ์˜ ์œ ์ฐฝ์„ฑ์— ๋น„ํ•ด ๊ทธ ์‹ ๋ขฐ์„ฑ์€ ์˜์‹ฌ๋ฐ›๊ณ  ์žˆ๋‹ค. ํ•œ ๋…ผ๋ฌธ์— ๋”ฐ๋ฅด๋ฉด,ย GPT-3๋Š” ๊ทธ๋Ÿด๋“ฏํ•œ ๋งํˆฌ๋กœ ์กฐ๊ฒฝํ˜„ ๊ต์ˆ˜์— ๋Œ€ํ•ด โ€œ๋ฐ”๋‘‘ ์ฑ”ํ”ผ์–ธ์ด์—ˆ๋‹ค๊ฐ€ ๊ตฌ๊ธ€ ๋”ฅ๋งˆ์ธ๋“œ์˜ ๋จธ์‹ ๋Ÿฌ๋‹ ์—ฐ๊ตฌ์ž๊ฐ€ ๋˜์—ˆ๋‹คโ€๋ผ๊ณ  ์ฃผ์žฅํ–ˆ๋‹ค(์‚ฌ์‹ค์ด ์•„๋‹ˆ๋‹ค).ย GPT-3๋Š” ํฌ๋„์ฃผ์Šค๋ฅผ ๋…๊ทน๋ฌผ๋กœ ์ถ”์ •ํ•˜๊ฑฐ๋‚˜, ๋ณ€ํ˜ธ์‚ฌ์—๊ฒŒ ์ˆ˜์˜๋ณต์„ ์ž…๊ณ  ๋ฒ•์ •์— ๊ฐˆ ๊ฒƒ์„ ์ถ”์ฒœํ•œ๋‹ค(๊ฐœ๋ฆฌ ๋งˆ์ปค์Šคยท์–ด๋‹ˆ์ŠคํŠธ ๋ฐ์ด๋น„์Šค, โ€˜์˜คํ”ˆย AI์˜ ์–ธ์–ด ์ƒ์„ฑ๊ธฐ๋Š” ๊ทธ๊ฒƒ์ด ๋ฌด์—‡์„ ๋งํ•˜๋Š”์ง€ ์ „ํ˜€ ๋ชจ๋ฅธ๋‹คโ€™, ใ€ˆMITย ํ…Œํฌ๋†€๋กœ์ง€ ๋ฆฌ๋ทฐใ€‰,ย 2020๋…„ 8์›”22์ผ).ย GPT-3๋Š” ์˜ํ™” ใ€ˆ๋ฉ”๋ฉ˜ํ† ใ€‰์—์„œ ๋‹จ๊ธฐ ๊ธฐ์–ต์ƒ์‹ค์ฆ์„ ์•“๋Š” ์ฃผ์ธ๊ณต์— ๋น„์œ ๋˜๊ณค ํ•œ๋‹ค.

์ด๊ฒƒ์€ ์›ƒ์–ด๋„˜๊ธธ ์ผ์ด ์•„๋‹ˆ๋‹ค. ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ์„ ํ•™์Šต์‹œํ‚ค๋Š” ๋ฐ ์—„์ฒญ๋‚œ ์ „๋ ฅ์ด ๋“ค๊ธฐ ๋•Œ๋ฌธ์ด๋‹ค. ๊ธฐํ›„์œ„๊ธฐ์— ๋ถ€์ •์  ์˜ํ–ฅ์„ ๋ฏธ์น  ์ˆ˜๋ฐ–์— ์—†๋‹ค. ๋งŒ์•ฝ ํ™”์„์—ฐ๋ฃŒ๋งŒ์œผ๋กœ ๊ตฌ๋™๋˜๋Š” ๋ฐ์ดํ„ฐ์„ผํ„ฐ์—์„œ ํ•™์Šต๋˜์—ˆ๋‹ค๋ฉด,ย GPT-3๋Š” ์ž๋™์ฐจ๋กœ ๋‹ฌ๊นŒ์ง€ ์™•๋ณตํ•˜๋Š” ๊ฒƒ๊ณผ ๋น„์Šทํ•œ ์ˆ˜์ค€์˜ ํƒ„์†Œ๋ฐœ์ž๊ตญ์„ ๋‚จ๊ฒผ์„ ๊ฒƒ์ด๋ผ๊ณ  ๋ด๋งˆํฌ ์ฝ”ํŽœํ•˜๊ฒ ๋Œ€ํ•™์˜ ์—ฐ๊ตฌ์ง„์€ ์ถ”์ •ํ–ˆ๋‹ค. ๋น„์šฉ๋„ ๋ง‰๋Œ€ํ•˜๋‹ค. ํ•™์Šต ๋‹จ๊ณ„์—์„œ๋งŒย 1000๋งŒ ๋‹ฌ๋Ÿฌ(์•ฝย 117์–ต3500๋งŒ์›)๊ฐ€ ๋“ค์—ˆ์„ ๊ฒƒ์œผ๋กœ ์ถ”์‚ฐ๋œ๋‹ค(์œŒ ๋”๊ธ€๋Ÿฌ์Šค ํ—ค๋ธ, โ€˜์™œย GPT-3๊ฐ€ ์ง€๊ธˆ ์ตœ๊ณ ์ด์ž ์ตœ์•…์˜ย AI์ธ๊ฐ€โ€™, ใ€ˆMITย ํ…Œํฌ๋†€๋กœ์ง€ ๋ฆฌ๋ทฐใ€‰,ย 2021๋…„ 2์›”24์ผ).

์ด๋Ÿฐ ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ์€ ์‚ฌ์‹ค์ƒ ์ž๊ธˆ๋ ฅ์ด ์žˆ๋Š” ๊ฑฐ๋Œ€ ๊ธฐ์ˆ ๊ธฐ์—…๋งŒ ๊ฐœ๋ฐœํ•˜๊ณ  ์šด์˜ํ•  ์ˆ˜ ์žˆ๋‹ค.ย GPT-3๋ฅผ ๋งŒ๋“  ์˜คํ”ˆย AI๋Š” ์ฒ˜์Œ ์ถœ๋ฒ”ํ•˜๋˜ย 2015๋…„ ๋น„์˜๋ฆฌ๊ธฐ๊ด€์ด์—ˆ์œผ๋‚˜ย 2019๋…„ ์ œํ•œ์  ์˜๋ฆฌ์ถ”๊ตฌ ๋ฒ•์ธ(Openย AIย LP)์„ ๋งŒ๋“ค์—ˆ๋‹ค. ์ปดํ“จํŒ… ํŒŒ์›Œ์™€ ์ธ๋ ฅ ์œ ์ง€ ๋น„์šฉ์„ ํ™•๋ณดํ•˜๊ธฐ ์œ„ํ•ด์„œ๋‹ค. ๊ฐ™์€ ํ•ด ๋งˆ์ดํฌ๋กœ์†Œํ”„ํŠธ๊ฐ€ย 10์–ต ๋‹ฌ๋Ÿฌ(์•ฝ 1์กฐ1735์–ต์›)๋ฅผ ์˜คํ”ˆย AI์— ํˆฌ์žํ–ˆ๋‹ค. ์˜คํ”ˆย AI๋Š”ย GPT-3ย ์ถœ์‹œ ์งํ›„์ธ ์ง€๋‚œํ•ด 9์›” ๋งˆ์ดํฌ๋กœ์†Œํ”„ํŠธ์—๊ฒŒย GPT-3์— ๋Œ€ํ•œ ๋…์  ๋ผ์ด์„ ์Šค๋ฅผ ๋ถ€์—ฌํ–ˆ๋‹ค.ย 2015๋…„ ์˜คํ”ˆย AIย ์„ค๋ฆฝ์— ์ฐธ์—ฌํ–ˆ์œผ๋‚˜ย 2018๋…„ 2์›” ์ด์‚ฌํšŒ๋ฅผ ๋– ๋‚œ ์ผ๋ก  ๋จธ์Šคํฌ ํ…Œ์Šฌ๋ผย CEO๋Š” ์˜คํ”ˆย AI์˜ ์ด ๊ฒฐ์ •์„ ๋‘๊ณ  ํŠธ์œ„ํ„ฐ์— โ€œ์ด๊ฒƒ์€ โ€˜๊ฐœ๋ฐฉโ€™์˜ ๋ฐ˜๋Œ€๋กœ ๋ณด์ธ๋‹ค. ์˜คํ”ˆย AI๋Š” ๋งˆ์ดํฌ๋กœ์†Œํ”„ํŠธ์— ๋ณธ์งˆ์ ์œผ๋กœ ํฌํš๋˜์—ˆ๋‹คโ€๋ผ๊ณ  ๋น„ํŒํ–ˆ๋‹ค.


์˜คํ”ˆย AI๋Š” ์ž์‚ฌ์˜ ์‚ฌ๋ช…์„ โ€œAGI๊ฐ€ ์ธ๋ฅ˜ ๋ชจ๋‘์—๊ฒŒ ์ด์ต์ด ๋˜๋„๋ก ํ•˜๋Š” ๊ฒƒโ€์ด๋ผ๊ณ  ๋ฐํžˆ๊ณ  ์žˆ๋‹ค.ย AGI๊ฐ€ ๋ฌด์—‡์ธ์ง€๋Š” ์•Œ์ง€ ๋ชปํ•œ๋‹ค ํ•ด๋„, ๋ฌด์–ธ๊ฐ€ โ€˜์ธ๊ฐ„์˜ ์ง€๋Šฅ ๊ฐ™์€ ๊ฒƒโ€™์„ ๊ตฌํ˜„ํ•˜๋ ค๋Š” ์‹œ๋„๋Š” ๊ณ„์†๋˜๊ณ  ์žˆ๋‹ค. ์˜คํ”ˆย AI๊ฐ€ ์ง€๋‚œ 1์›” ๋‚ด๋†“์€ โ€˜DALL-Eโ€™(ํ™”๊ฐ€ ์‚ด๋ฐ”๋„๋ฅด ๋‹ฌ๋ฆฌ์™€ ํ”ฝ์‚ฌ ์• ๋‹ˆ๋ฉ”์ด์…˜ ๋กœ๋ด‡ ์›”E์˜ ํ•ฉ์„ฑ์–ด)๋Š” ํ…์ŠคํŠธ๋ฅผ ์ธ์‹ํ•ด ์ด๋ฏธ์ง€๋ฅผ ์ƒ์„ฑํ•œ๋‹ค. โ€˜์•„๋ณด์นด๋„ ๋ชจ์–‘์˜ ์˜์žโ€™๋ผ๊ณ  ์น˜๋ฉด ์•„๋ณด์นด๋„ ๋ชจ์–‘์˜ ์˜์ž ๊ทธ๋ฆผ์ด ๋ช‡ ๊ฐœ ๋œจ๋Š” ์‹์ด๋‹ค. ์ด๋ ‡๊ฒŒ ํ…์ŠคํŠธ๋ฟ ์•„๋‹ˆ๋ผ ์ด๋ฏธ์ง€, ์Œ์„ฑ ๋“ฑ ์—ฌ๋Ÿฌ ํ˜•ํƒœ์˜ ๋ฐ์ดํ„ฐ๋ฅผ ๋„˜๋‚˜๋“ค๋ฉฐ ๋ฌด์–ธ๊ฐ€ ๋งŒ๋“ค์–ด๋‚ผ ์ˆ˜ ์žˆ๋‹ค๋ฉด, ์ธ๊ฐ„์ฒ˜๋Ÿผ ์—ฌ๋Ÿฌ ๊ฐ€์ง€๋ฅผ ํ•  ์ˆ˜ ์žˆ์ง€ ์•Š์„๊นŒ? ๋”ฅ๋Ÿฌ๋‹ ์—ฐ๊ตฌ์˜ ํฐ ํ๋ฆ„์ธ โ€˜๋ฉ€ํ‹ฐ ๋ชจ๋‹ฌโ€™์ด๋‹ค.

๊ทผ๋ณธ์  ์˜๋ฌธ์€ ๋‚จ๋Š”๋‹ค. ์ธ๊ฐ„ ๊ฐ™์€ ์ง€๋Šฅ์„ ๊ฐ€์ง„ ๋ฌด์–ธ๊ฐ€๋ฅผ ๊ผญ ๋งŒ๋“ค์–ด์•ผ ํ• ๊นŒ? ๋”ฅ๋Ÿฌ๋‹ ๋ชจ๋ธ์˜ ๋ฐœ์ „์ด ์šฐ๋ฆฌ ์‹œ๋Œ€์— ์˜๋ฏธํ•˜๋Š” ๋ฐ”๋Š” ๋ฌด์—‡์ธ๊ฐ€? ์ธ๊ณต์ง€๋Šฅ์ด ๊ฒฐ๊ตญ ์ธ๊ฐ„์˜ ์ผ์ž๋ฆฌ๋ฅผ ๋Œ€์ฒดํ•˜๊ฒŒ ๋ ๊นŒ?

โ€œ์›ฌ๋งŒํ•œ ์ง์—…์€ ๋Œ€์ฒด๋  ์ˆ˜ ์žˆ์ง€ ์•Š์„๊นŒ? ํ…”๋ ˆ๋งˆ์ผ€ํŒ…(์ฑ—๋ด‡)์ด๋‚˜ ์šด์ˆ˜์—…(์ž์œจ์ฃผํ–‰์ฐจ), ๋ฒˆ์—ญ(๊ธฐ๊ณ„๋ฒˆ์—ญ), ๋น„๊ต์  ๋‹จ์ˆœํ•œ ์—”์ง€๋‹ˆ์–ดโ€ฆ. ์˜์‚ฌ๋‚˜ ๋ณ€ํ˜ธ์‚ฌ๊ฐ€ ํ•˜๋Š” ์ผ ์ค‘ โ€˜๋ฃจํ‹ดโ€™ํ•œ ์—…๋ฌด๋„ ๋งˆ์ฐฌ๊ฐ€์ง€๋‹ค. ๋‹ค๋งŒ ์˜์‚ฌ๊ฐ€ ํ™˜์ž์— ๋Œ€ํ•ด ์„ฑ๊ณต๋ฅ  ๋ฐ ์˜ˆํ›„๊ฐ€ ๋‹ค๋ฅธ ์—ฌ๋Ÿฌ ์น˜๋ฃŒ๋ฒ• ์ค‘ ํ•˜๋‚˜๋ฅผ ์„ ํƒํ•  ๋•Œ์ฒ˜๋Ÿผ, โ€˜๋ถˆํ™•์‹ค์„ฑโ€™์ด ์žˆ๋Š” ์ƒํ™ฉ์—์„  ์ธ๊ฐ„์˜ ๊ฐ€์น˜ํŒ๋‹จ์ด ๋“ค์–ด๊ฐ€์•ผ ํ•œ๋‹ค. ์ฑ…์ž„์ง€๋Š” ์ผ์€ ์—ฌ์ „ํžˆ ์ธ๊ฐ„์˜ ๋ชซ์ธ ๊ฒƒ์ด๋‹ค.โ€ ํ™ฉ์„ฑ์ฃผ ๊ต์ˆ˜๋Š” ๋งํ–ˆ๋‹ค. โ€œ๊ณผํ•™์  ๋ฐœ๊ฒฌ์„ ํ•˜๊ฑฐ๋‚˜ ์ƒˆ๋กœ์šด ์ฝ˜ํ…์ธ ๋ฅผ ๋งŒ๋“œ๋Š” ์ง์—…์—์„œ๋„ ์ธ๊ณต์ง€๋Šฅ์ด ๋ณด์กฐ ์—ญํ• ์„ ํ•  ์ˆ˜ ์žˆ๋‹ค. ์˜ˆ๋ฅผ ๋“ค๋ฉด, ์ฃผ์–ด์ง„ ํ…์ŠคํŠธ์— ๋งž๋Š” ์›นํˆฐ์„ ์ƒ์„ฑํ•˜๋Š” ๊ฑธ ๋ชฉํ‘œ๋กœ ๋„ค์ด๋ฒ„์™€ ์—ฐ๊ตฌํ•˜๊ณ  ์žˆ๋‹ค. ์˜ˆ์ „์—๋Š” ๊ทธ๋ฆผ์„ ํ•˜๋‚˜ํ•˜๋‚˜ ๊ทธ๋ ค์•ผ ํ–ˆ์ง€๋งŒ, ์Šคํ† ๋ฆฌ์—๋งŒ ์ง‘์ค‘ํ•˜๊ณ  ์‹ถ์€ ์ž‘๊ฐ€๋„ ์žˆ์„ ์ˆ˜ ์žˆ๋‹ค. ๊ทธ ๊ฒฝ์šฐ ์ฝ˜ํ‹ฐ๋ฅผ ์งœ๋ฉด ์ธ๊ณต์ง€๋Šฅ์ด ํ•ด๋‹น ์ž‘๊ฐ€์˜ ์Šคํƒ€์ผ๋Œ€๋กœ ๊ทธ๋ฆผ์„ ๊ทธ๋ ค์ฃผ๋Š” ๊ฑฐ๋‹ค.ย AIย ์–ด์‹œ์Šคํ„ดํŠธ๋‹ค. ์ด๋Ÿฌ๋ฉด ์›นํˆฐ ์ž‘๊ฐ€๋Š” โ€˜๊ฐ๋…โ€™์˜ ์œ„์น˜์— ์žˆ๊ฒŒ ๋œ๋‹ค.โ€



๋ฌผ๋ก  ๊ธฐ์ˆ ์ด ์—†์• ๋Š” ๊ฒŒ ์•„๋‹ˆ๋ผ ๋งŒ๋“ค์–ด๋‚ด๋Š” ์ผ์ž๋ฆฌ๋„ ์žˆ๊ณ (์ธ๊ณต์ง€๋Šฅ์ด ์ƒ์„ฑํ•œ ๊ฒฐ๊ณผ๋ฌผ์„ ํ™•์ธํ•˜๋Š” ์ผ์ž๋ฆฌ๊ฐ€ ๋Œ€ํ‘œ์ ์ด๋‹ค), ๋กœ๋ด‡ ๊ธฐ์ˆ ์ด ์‚ฌ๋žŒ์˜ ๋ฏธ์„ธํ•œ ์›€์ง์ž„๊นŒ์ง€ ๋ชจ๋ฐฉํ•  ์ˆ˜ ์žˆ์„ ๋•Œ๊นŒ์ง„ ์ ์ž–์€ ์‹œ๊ฐ„์ด ๊ฑธ๋ฆด ๊ฒƒ์œผ๋กœ ์˜ˆ์ธก๋˜๊ธฐ ๋•Œ๋ฌธ์—, ์ธ๊ณต์ง€๋Šฅ์˜ ์ผ์ž๋ฆฌ ๋Œ€์ฒด๋Š” ํ˜„์‹ค์—์„œ ๋‹ค์†Œ ๋–จ์–ด์ง„ ๋‹ด๋ก ์— ๋จธ๋ฌผ๋Ÿฌ ์žˆ๋‹ค. ์‚ฌํšŒ๊ฐ€ ๊ทธ์— ๋Œ€๋น„๋ฅผ ํ•ด์•ผ ํ•˜๋Š” ๊ฒƒ๊ณผ ๋ณ„๊ฐœ๋กœ ๋ง์ด๋‹ค.

์˜คํžˆ๋ ค ๋‹น์žฅ ๋‹ฅ์นœ ๋ฌธ์ œ๋Š” ๋”ฅ๋Ÿฌ๋‹ ๊ธฐ๋ฐ˜ ์–ธ์–ด ๋ชจ๋ธ์˜ ์ฐจ๋ณ„๊ณผ ํŽธํ–ฅ์ด๋‹ค.ย GPT-3ย ๋…ผ๋ฌธ์˜ ์ €์ž๋“ค์€, ์ด ์•Œ๊ณ ๋ฆฌ์ฆ˜์ดย 388๊ฐœ ์ง์—… ์ค‘ย 83%๋ฅผ โ€˜๋‚จ์„ฑโ€™์œผ๋กœ ์˜ˆ์ธกํ–ˆ์œผ๋ฉฐ, ๊ตญํšŒ์˜์›์ด๋‚˜ ์€ํ–‰๊ฐ€, ๋ช…์˜ˆ๊ต์ˆ˜ ๋“ฑ ๊ณ ํ•™๋ ฅ ์ง์ข…์ด๋‚˜ ๊ธฐ๊ณ„์ˆ˜๋ฆฌ๊ณต, ๋ณด์•ˆ๊ด€ ๋“ฑ ๊ณ ๋œ ์œก์ฒด๋…ธ๋™ ์ง์ข…์—์„œ ํŠนํžˆ ๋‚จ์„ฑ ์ ๋ฆผ์ด ์‹ฌํ–ˆ๋‹ค๊ณ  ๋ฐํ˜”๋‹ค. ์ง€๋‚œ 8์›” ์˜๊ตญ์˜ ์˜๋น… ๊ทน์žฅ์—์„œ๋Š”ย GPT-3๊ฐ€ ๊ทน๋ณธ์„ ์“ด ์—ฐ๊ทน์ด ๊ณต์—ฐ๋˜์—ˆ๋Š”๋ฐ,ย GPT-3๋Š” ์ค‘๋™ ์ถœ์‹  ๋ฐฐ์šฐ๋ฅผ ํ…Œ๋Ÿฌ๋ฆฌ์ŠคํŠธ๋‚˜ ๊ฐ•๊ฐ„๋ฒ”์œผ๋กœ ์บ์ŠคํŒ…ํ•˜๋Š” ๊ฒฝํ–ฅ์ด ์žˆ์—ˆ๋‹ค. ์ฃผ์ตœ ์ธก์€ ์ด ์—ฐ๊ทน์ด โ€œ๋™์„ฑ์•  ํ˜์˜ค, ์ธ์ข…์ฃผ์˜, ์„ฑ์ฐจ๋ณ„ ๋“ฑ์„ ํฌํ•จํ•  ์ˆ˜ ์žˆ๋‹คโ€๋ผ๊ณ  ๊ด€๊ฐ๋“ค์—๊ฒŒ ๊ฒฝ๊ณ ํ•ด์•ผ ํ–ˆ๋‹ค. ๊ทธ๋Ÿผ์—๋„ ์ด ์—ฐ๊ทน์„ ๋งŒ๋“  ํŒ€์€ย GPT-3์˜ ํ–‰๋™์ด ์ธ๋ฅ˜์— ๊ด€ํ•ด ๋ฌด์—‡์„ ๋“œ๋Ÿฌ๋‚ด๋Š”์ง€ ๊ด€๊ฐ๋“ค์ด ๋ฌป๊ธฐ๋ฅผ ์›ํ–ˆ๋‹ค๊ณ  ๋ฐํ˜”๋‹ค.

์ง€๋‚œํ•ด ๋ง, ๊ตฌ๊ธ€์˜ ์ธ๊ณต์ง€๋Šฅ ์œค๋ฆฌ ์—ฐ๊ตฌ์กฐ์ง์„ ์ด๋Œ๋˜ ํŒ€๋‹› ๊ฒŒ๋ธŒ๋ฃจ๊ฐ€ ๊ตฌ๊ธ€์—์„œ ํ•ด๊ณ ๋˜์—ˆ๋‹ค(๊ตฌ๊ธ€์€ ๊ฒŒ๋ธŒ๋ฃจ๊ฐ€ โ€˜์Šค์Šค๋กœ ๊ทธ๋งŒ๋’€๋‹คโ€™๊ณ  ์ฃผ์žฅํ–ˆ๋‹ค). ๊ฒŒ๋ธŒ๋ฃจ๊ฐ€ ๊ณต์ €์ž๋กœ ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ์„ ๋น„ํŒํ•œ ๋…ผ๋ฌธ์„ ์“ด ๊ฒƒ์ด ๊ฐˆ๋“ฑ์˜ ์›์ธ์œผ๋กœ ์ง€๋ชฉ๋˜์—ˆ๋‹ค. โ€œ๋Œ€๋ถ€๋ถ„์˜ ์–ธ์–ด ๊ธฐ์ˆ ์€ ์‚ฌ์‹ค ์‚ฌํšŒ์—์„œ ์ด๋ฏธ ๊ฐ€์žฅ ๋งŽ์€ ํŠน๊ถŒ์„ ๊ฐ€์ง„ ์‚ฌ๋žŒ๋“ค์˜ ํ•„์š”๋ฅผ ์ถฉ์กฑ์‹œํ‚ค๊ธฐ ์œ„ํ•ด ๊ตฌ์ถ•๋˜์—ˆ๋‹ค.โ€ ๋…ผ๋ฌธ์€ ์–ธ์–ด ๋ชจ๋ธ์ด ์œ ์ƒ‰์ธ์ข…๊ณผ ์—ฌ์„ฑ, ์žฅ์• ์ธ ๋“ฑ ํŠน์ • ์ง‘๋‹จ์„ ํ–ฅํ•œ ์ฐจ๋ณ„๊ณผ ๊ณ ์ •๊ด€๋…์„ ์˜์†ํ™”ํ•  ์ˆ˜ ์žˆ์œผ๋ฉฐ, ๋ฌธ์„œํ™”๋˜์ง€ ์•Š์€ ํ›ˆ๋ จ ๋ฐ์ดํ„ฐ์ธ ๋งŒํผ ์ฑ…์ž„์„ ๋ฌป๊ธฐ๋„ ์–ด๋ ต๋‹ค๊ณ  ์ง€์ ํ–ˆ๋‹ค. ๊ฒŒ๋ธŒ๋ฃจ๋Š” ์—ํ‹ฐ์˜คํ”ผ์•„๊ณ„ ๋ฏธ๊ตญ์ธ ์—ฌ์„ฑ์ด๋‹ค.


โ€˜์ •ํ™•์„ฑโ€™๋งŒ์ด ์•„๋‹ˆ๋ผ โ€˜๊ณต์ •ํ•จโ€™๋„ ์ถ”๊ตฌํ•˜๋Š” ๊ฒƒ



์˜คํ˜œ์—ฐ ์นด์ด์ŠคํŠธ ์ „์‚ฐํ•™๋ถ€ ๊ต์ˆ˜๋Š” โ€œ์–ธ์–ด ๋ชจ๋ธ์€ ํ•ญ์ƒ ํŽธํ–ฅ์˜ ๋ฌธ์ œ๋ฅผ ๊ฐ€์ง€๊ณ  ์žˆ๋‹คโ€๋ผ๊ณ  ๋งํ–ˆ๋‹ค. โ€œํ•™์Šตํ•œ ๋ฐ์ดํ„ฐ๋Š” ๊ฒฐ๊ตญ ์‚ฌ๋žŒ๋“ค์ด ๋งŒ๋“œ๋Š”๋ฐ, ์‚ฌํšŒ์ ์œผ๋กœ ํŽธ๊ฒฌ์ด ์กด์žฌํ•˜๊ธฐ ๋•Œ๋ฌธ์— ๊ทธ๊ฒŒ ๋ฐ์ดํ„ฐ ์•ˆ์— ๋“ค์–ด๊ฐ€ ์žˆ์„ ์ˆ˜ ์žˆ๋‹ค. ์ˆ˜์ง‘ํ•œ ๋ฐ์ดํ„ฐ์˜ ์ถœ์ฒ˜ ์ž์ฒด๊ฐ€ ํŽธํ–ฅ๋˜์–ด ์žˆ์„ ์ˆ˜๋„ ์žˆ๋‹ค.ย BERT๋‚˜ย GPT-3ย ๊ฐ™์€ ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ์˜ ํ•™์Šต ๋ฐ์ดํ„ฐ๋Š” ๋Œ€๋ถ€๋ถ„ ์ธํ„ฐ๋„ท์—์„œ ์˜จ๋‹ค. ๊ทธ์ค‘์—์„œ๋„ ๋ ˆ๋”ง ๊ฐ™์€ ์†Œ์…œ ๋„คํŠธ์›Œํฌ ์‚ฌ์ดํŠธ ์ด์šฉ์ž๋Š”ย 20~40๋Œ€ ๋‚จ์„ฑ์ด์ž ๋ฏธ๊ตญ์ธ์ด ๋Œ€๋ถ€๋ถ„์ด๋‹ค. ๊ทธ ์‚ฌ๋žŒ๋“ค์˜ ์ƒ๊ฐ์ด ์ค‘์‹ฌ์ ์œผ๋กœ ๋ฐ˜์˜๋œ๋‹ค.โ€

์˜ค ๊ต์ˆ˜๊ฐ€ ๋ณด๊ธฐ์—, โ€˜์ธ๊ฐ„์ด ํŽธํ–ฅ๋˜์–ด ์žˆ๊ธฐ์— ๋ชจ๋ธ์ด ๊ทธ๊ฑธ ๋”ฐ๋ผ ํ•ด๋„ ์ƒ๊ด€์—†๋‹คโ€™๋Š” ๊ฑด ๋ง์ด ์•ˆ ๋œ๋‹ค. โ€œ์ ์–ด๋„ ๋‘ ๊ฐ€์ง€๋ฅผ ํ•ด์•ผ ํ•œ๋‹ค. ํ•˜๋‚˜๋Š” ์ˆ˜์ง‘ํ•œ ๋ฐ์ดํ„ฐ์˜ ์ถœ์ฒ˜๊ฐ€ ์ถฉ๋ถ„ํžˆ ๋‹ค์–‘ํ•œ์ง€ ์‚ดํ”ผ๊ณ , ๊ทธ๋ ‡์ง€ ์•Š๋‹ค๋ฉด ๋‹ค์–‘์„ฑ์„ ๋Š˜๋ฆฌ๋Š” ๊ฒƒ์ด๋‹ค. ์ธํ„ฐ๋„ท ์ปค๋ฎค๋‹ˆํ‹ฐ๊ฐ€ ๊ผญ ์ Š์€ ๋ฏธ๊ตญ์ธ ๋‚จ์„ฑ์ด ์“ฐ๋Š” ๋ ˆ๋”ง๋งŒ ์žˆ๋Š” ๊ฒƒ์€ ์•„๋‹Œ๋ฐ๋„, ์ด๊ฑธ ์—ฐ๊ตฌํ•˜๋Š” ์‚ฌ๋žŒ๋“ค์ด ๋Œ€์ฒด๋กœ ๊ทธ๋Ÿฐ ์‚ฌ๋žŒ๋“ค์ด์–ด์„œ ์ต์ˆ™ํ•œ ์†Œ์Šค๋ฅผ ์„ ํƒํ•˜๋Š” ๊ฒƒ์ผ ์ˆ˜ ์žˆ๋‹ค. ๋‹ค๋ฅธ ํ•˜๋‚˜๋Š” ์˜ˆ์ธก์„ ํ•  ๋•Œ โ€˜์ •ํ™•์„ฑโ€™๋งŒ์ด ์•„๋‹ˆ๋ผ โ€˜๊ณต์ •ํ•จโ€™๋„ ์ถ”๊ตฌํ•˜๋Š” ๊ฒƒ์ด๋‹ค. ์šฐ๋ฆฌ๊ฐ€ ๋ชจ์€ ๋ฐ์ดํ„ฐ์— ์ ๊ฒŒ ๋Œ€ํ‘œ๋œ ์‚ฌ๋žŒ๋“ค์ด ์žˆ๋‹ค๋ฉด, ์˜ˆ์ปจ๋Œ€ ์ด๋ฏธ์ง€์˜ ๊ฒฝ์šฐ ๋ฐฑ์ธ ๋‚จ์„ฑย 50๋ช…์— ํ‘์ธ ์—ฌ์„ฑ 5๋ช…์ด๋ผ๊ณ  ํ•ด์„œย 10๋Œ€ 1๋กœ ํ•˜๋Š” ๊ฒŒ ์•„๋‹ˆ๋ผ ๊ฐ€์ค‘์น˜๋ฅผ ์กฐ์ •ํ•˜๋Š” ๋“ฑ์˜ ๊ธฐ์ˆ ์  ๋ฐฉ๋ฒ•์ด ์žˆ๋‹ค. ์ด์ƒ์ ์œผ๋กœ๋Š” ์—ฐ๊ตฌ์ž๋‚˜ ๊ฐœ๋ฐœ์ž์˜ ๋‹ค์–‘์„ฑ์„ ๋Š˜๋ฆฌ๋Š” ๊ฒŒ ์ข‹๊ฒ ์ง€๋งŒ, ๋‹น์žฅ์— ์–ด๋ ต๋‹ค๋ฉด ๊ต์œก์ด๋ผ๋„ ํ•ด์•ผ ํ•œ๋‹ค. ๊ทธ๊ฒŒ ์ฑ…์ž„์ด๊ณ  ์œค๋ฆฌ๋‹ค.โ€

ํ•œ๊ตญ ์‚ฌํšŒ๋„ ์ธ๊ณต์ง€๋Šฅ ์œค๋ฆฌ์˜ ์ค‘์š”์„ฑ์„ ์ด๋ฏธ โ€˜ํ•™์Šตโ€™ํ•œ ์ ์ด ์žˆ๋‹ค. ์˜ฌํ•ด 1์›”,ย 20๋Œ€ ์—ฌ์„ฑ์„ ์ƒ์ •ํ•œ ์ฑ—๋ด‡ โ€˜์ด๋ฃจ๋‹คโ€™๊ฐ€ ์ถœ์‹œ๋œ ์ง€ 3์ฃผ ๋งŒ์— ์„œ๋น„์Šค๋ฅผ ์ค‘๋‹จํ–ˆ๋‹ค. ์ด๋ฃจ๋‹ค๋Š” ๊ฒŒ์ด๋‚˜ ๋ ˆ์ฆˆ๋น„์–ธ์ด๋ผ๋Š” ๋‹จ์–ด์— โ€œ์†Œ๋ฆ„ ๋ผ์นœ๋‹ค๊ณ  ํ•ด์•ผ ํ•˜๋‚˜. ๊ฑฐ๋ถ€๊ฐ ๋“ค๊ณ  ๊ทธ๋ž˜โ€๋ผ๊ณ  ๋ฐ˜์‘ํ•˜๊ณ , ํ‘์ธ์— ๋Œ€ํ•ด์„œ๋Š” โ€œ์˜ค๋ฐ”๋งˆ๊ธ‰ ์•„๋‹ˆ๋ฉด ์‹ซ์–ดโ€๋ผ๊ณ  ํ•˜๋Š” ๋“ฑ ํ˜์˜ค ๋ฐœ์–ธ์„ ํ–ˆ๋‹ค. ๊ทธ๋Ÿฐ ํ•œํŽธ ์ด์šฉ์ž๋“ค์€ ์ด๋ฃจ๋‹ค๋ฅผ ์ƒ๋Œ€๋กœ ์„ฑํฌ๋กฑ์„ ํ•˜๊ณ  ์ด๋ฅผ ๊ณต์œ ํ–ˆ๋‹ค.

์ด๋ฃจ๋‹ค๋ฅผ ๋งŒ๋“  ์Šค์บํ„ฐ๋žฉ์€ ์žํšŒ์‚ฌ โ€˜์—ฐ์• ์˜ ๊ณผํ•™โ€™์„ ํ†ตํ•ด ์—ฐ์ธ๋“ค์˜ ์นด์นด์˜คํ†ก ๋Œ€ํ™”ย 100์–ต ๊ฑด์„ ์ˆ˜์ง‘ํ–ˆ๋‹ค. ์• ์ •๋„ ๋“ฑ์„ ๋ถ„์„ํ•ด์ค€๋‹ค๋Š” ๋ช…๋ชฉ์ด์—ˆ์œผ๋‚˜ โ€˜์ธ๊ณต์ง€๋Šฅ ์ฑ—๋ด‡ ํ•™์Šต์— ์‚ฌ์šฉํ•œ๋‹คโ€™๋Š” ์ ์€ ๋ช…์‹œํ•˜์ง€ ์•Š์•˜๋‹ค. ์ด ๋ฐ์ดํ„ฐ๋ฅผย BERT์— ํ•™์Šต์‹œํ‚จ ๊ฒŒ ๋ฐ”๋กœ ์ด๋ฃจ๋‹ค์˜€๋‹ค. ์ด๋ ‡๊ฒŒ ํ•™์Šต์„ ๊ฑฐ์นœ ๋’ค์— ํ•™์Šต๋œ ์นดํ†กย 100์–ต ๊ฑด ์ค‘ 1์–ต ๊ฑด์„ย DB๋กœ ๋งŒ๋“ค์–ด ๊ทธ ์•ˆ์—์„œ ๊ฐ€์žฅ ๊ทธ๋Ÿด๋“ฏํ•œ ๋‹ต๋ณ€์„ ๊ณ ๋ฅด๋Š” โ€˜๋‹ต๋ณ€ ๊ฒ€์ƒ‰ ๊ธฐ๋ฐ˜ ๋ชจ๋ธโ€™์ด๋‹ค. ์•ž์„œ์˜ ๋Œ€๊ธฐ์—… ์—ฐ๊ตฌ์ž๋Š” โ€œGPT-3ย ๊ฐ™์€ ์ƒ์„ฑ ๋ชจ๋ธ์ด ๊ต๊ณผ์„œ ์•ˆ ๋ณด๊ณ  ์น˜๋Š” ์‹œํ—˜์ด๋ผ๋ฉด, ์ด๋ฃจ๋‹ค ๊ฐ™์€ ๋‹ต๋ณ€ ๊ฒ€์ƒ‰ ๊ธฐ๋ฐ˜ ๋ชจ๋ธ์€ โ€˜์˜คํ”ˆ ๋ถ ํ…Œ์ŠคํŠธโ€™๋‹ค. ๋ฐ์ดํ„ฐ๋งŒ ์ข€ ๋” ์ •์ œํ–ˆ์œผ๋ฉด ๋ง‰์„ ์ˆ˜ ์žˆ๋Š” ๋ฌธ์ œ๋„ ๋งŽ์•˜๋‹ค๋Š” ์ ์—์„œ ์•ˆํƒ€๊น๋‹คโ€๋ผ๊ณ  ๋งํ–ˆ๋‹ค. ๊ฐœ์ธ์ •๋ณด๋ณดํ˜ธ์œ„์›ํšŒ๋Š” ์Šค์บํ„ฐ๋žฉ์ด ์ •๋ณด ์ฃผ์ฒด์˜ ๋™์˜ ์—†์ด ๋ฐ์ดํ„ฐ๋ฅผ ๋ชจ์•„ ์ˆ˜์ง‘ ๋ชฉ์ ์— ๋ฒ—์–ด๋‚˜๊ฒŒ ์‚ฌ์šฉํ–ˆ๊ณ , ๊ฐœ์ธ์ •๋ณด ๋น„์‹๋ณ„ ์ฒ˜๋ฆฌ๋„ ์ œ๋Œ€๋กœ ํ•˜์ง€ ์•Š์•˜๋‹ค๋ฉฐ ๊ณผ์ง•๊ธˆยท๊ณผํƒœ๋ฃŒ ์ด 1์–ต330๋งŒ์›์„ ๋ถ€๊ณผํ–ˆ๋‹ค.


์ด๋ฃจ๋‹ค ์‚ฌํƒœ ์ดํ›„ ์ˆ˜๋งŽ์€ ํ† ๋ก ํšŒ๊ฐ€ ์—ด๋ ธ๋‹ค. ํ•œ๊ตญ ์‚ฌํšŒ๊ฐ€ ๋‹ต์„ ์ฐพ์•˜๋‹ค๊ณ  ๋ณด๊ธด ํž˜๋“ค๋‹ค. ํ•œ๊ตญ์–ด ๋ฒ„์ „์˜ย GPT-3์ธ ๋„ค์ด๋ฒ„ ํ•˜์ดํผํด๋กœ๋ฐ”๋Š” ๋„ค์ด๋ฒ„ ๋ธ”๋กœ๊ทธยท์นดํŽ˜ยท๋‰ด์Šคยท๋Œ“๊ธ€ยท์ง€์‹iNย ๋“ฑ์— ์‚ฐ์žฌํ•ด ์žˆ๋Š” ํ…์ŠคํŠธ๋ฅผ โ€˜๊ธ์–ด์„œโ€™ ํ•™์Šตํ–ˆ๋‹ค. ์ด ๋ง๋ญ‰์น˜์— ์ฐจ๋ณ„ยทํ˜์˜ค ํ‘œํ˜„์ด ๋“ค์–ด ์žˆ๋‹ค๋ฉด, ๊ทธ๊ฑธ ํ‰๋‚ด ๋‚ด์–ด ๋ฑ‰์–ด๋‚ผ ๊ฐ€๋Šฅ์„ฑ์„ ๋ฐฐ์ œํ•  ์ˆ˜ ์—†๋‹ค. ๊น€ํ˜•์„ ์—ฐ๊ตฌ์›์€ โ€œํ•˜์ดํผํด๋กœ๋ฐ”๋Š” ํ•œ๊ตญ์–ด๋ฅผ ์“ฐ๋Š” ์‚ฌ๋žŒ๋“ค์˜ ํ–‰ํƒœ๋ฅผ ๋ฐ˜์˜ํ•˜๊ณ  ๋ชจ๋ฐฉํ•˜๊ธฐ ๋•Œ๋ฌธ์—, ์ฐจ๋ณ„์ด๋‚˜ ํ˜์˜ค ๋ฐœ์–ธ์„ (๋ฐ์ดํ„ฐ์—์„œ) ์›์ฒœ ์ฐจ๋‹จํ•˜๊ธด ์‰ฝ์ง€ ์•Š๋‹ค. ๊ทธ๋Ÿฌ๋‚˜ ๋ชจ๋ธ์ด ํ•™์Šต์„ ํ†ตํ•ด์„œ ํŽธ๊ฒฌ์ด๋‚˜ ํ˜์˜ค๋ฅผ ํ™•๋Œ€ํ•˜๋Š” ๊ฒƒ์€ ๋ฐ”๋žŒ์งํ•˜์ง€ ์•Š๋‹ค. ์ด๋ฅผ ๋ง‰๊ธฐ ์œ„ํ•ด ๊ถŒ์žฅ๋˜๋Š” ๋‹ต๋ณ€์— ๋Œ€ํ•œ ๊ฐ€๋Šฅ๋„(likelihood)๋Š” ์˜ฌ๋ฆฌ๊ณ , ๊ทธ๋ ‡์ง€ ์•Š์€ ๋‹ต๋ณ€์˜ ๊ฐ€๋Šฅ๋„๋Š” ๋‚ด๋ฆฌ๋Š” ๋ฐฉ์‹์„ ์—ฐ๊ตฌํ•˜๊ณ  ์žˆ๋‹ค. ์‚ฌ์‹ค ์–ด๋–ค ๋‹ต๋ณ€์„ โ€˜๊ถŒ์žฅโ€™ํ•˜๊ณ  ์–ด๋–ค ๋‹ต๋ณ€์— โ€˜ํŽ˜๋„ํ‹ฐโ€™๋ฅผ ์ฃผ๋А๋ƒ๊ฐ€ ์•„์ง ์ข€ ๊ทธ๋ ˆ์ด(ํšŒ์ƒ‰) ์˜์—ญ์ด๊ธด ํ•˜๋‹คโ€๋ผ๊ณ  ๋งํ–ˆ๋‹ค.

๋„ค์ด๋ฒ„์™€ ์นด์นด์˜ค๋Š” ๊ฐ๊ฐ ์ฐจ๋ณ„์„ โ€˜๋ฐฉ์ง€โ€™ํ•˜๊ณ  โ€˜๊ฒฝ๊ณ„โ€™ํ•œ๋‹ค๋Š” ๋‚ด์šฉ์„ ํฌํ•จํ•œย AIย ์œค๋ฆฌ ๊ทœ๋ฒ”์„ ๋‘๊ณ  ์žˆ๋‹ค. ์ง€๋‚œํ•ด ๋ง ์ •๋ถ€๊ฐ€ โ€˜์ธ๊ณต์ง€๋Šฅ ์œค๋ฆฌ ๊ธฐ์ค€โ€™์„ ๋งŒ๋“ค๊ธฐ๋„ ํ–ˆ๋‹ค. ๊ทธ๋Ÿฌ๋‚˜ ๋ช…๋ฐฑํ•œ ์š•์„ค์ด ์•„๋‹Œ ์€๊ทผํ•œ ์ฐจ๋ณ„์„ ๋ง‰๊ธฐ๋ž€ ์‰ฝ์ง€ ์•Š๋‹ค. ๋ถ„๋ช…ํ•œ ๊ฑด ์ด ์—ญ์‹œ ๊ธฐ์ˆ ๋กœ ๋Œ€์‘ํ•  ์—ฌ์ง€๊ฐ€ ์žˆ๋‹ค๋Š” ์ ์ด๋‹ค.

์ˆญ์‹ค๋Œ€ ์†Œํ”„ํŠธ์›จ์–ดํ•™๋ถ€์— ์žฌํ•™ ์ค‘์ธ ์–‘๊ธฐ์ฐฝ์”จ(ํ˜„์งย AIย ๊ฐœ๋ฐœ์ž)๋Š” ํ˜์˜ค ํ‘œํ˜„์„ ๋ถ„๋ฅ˜ํ•ด ๊ฐ€๋ฆฌ๋Š” ์–ธ์–ด ๋ชจ๋ธ โ€˜SoongsilBERT:BEEP!โ€™๋ฅผ ๊ฐœ๋ฐœํ–ˆ๋‹ค. ํ•œ๊ตญ์–ด ํ˜์˜ค ๋ฐœํ™” ๋ฐ์ดํ„ฐ์…‹(BEEP!)์„ย BERT์˜ ๋ณ€ํ˜•์ธ ํŽ˜์ด์Šค๋ถ์˜ย RoBERTa์— ํ•™์Šต์‹œ์ผฐ๋‹ค. โ€˜๋‚˜๊ฐ€ ์ฃฝ์–ด๋ผ ์™œ ๊ทธ ๋”ฐ๊ตฌ๋กœ ์‚ฌ๋ƒโ€™๋ผ๋Š” ํ‘œํ˜„์„ ์ž…๋ ฅํ•˜๋ฉด, ๋ชจ๋ธ์€ ํ™•๋ฅ ์„ ์ด๋ ‡๊ฒŒ ์˜ˆ์ธกํ•œ๋‹ค. โ€˜๊ณต๊ฒฉ ๋ฐœ์–ธ:0.8240, ์ฐจ๋ณ„ ๋ฐœ์–ธ:0.1692.โ€™ย ์ˆญ์‹ค๋Œ€ ์ปค๋ฎค๋‹ˆํ‹ฐ ์ด์šฉ์ž๊ฐ€ โ€˜๋ถ„๋ž€๊ธ€ ๋„๊ธฐโ€™ ๋ชจ๋“œ๋ฅผ ์„ค์ •ํ•˜๋ฉด, ๊ณต๊ฒฉ์ด๋‚˜ ์ฐจ๋ณ„ ๋ฐœ์–ธ์œผ๋กœ ๋ถ„๋ฅ˜๋œ ๊ธ€์„ ๊ฐ€๋ ค์ค€๋‹ค. ์–‘๊ธฐ์ฐฝ์”จ๋Š” โ€œ์ธ๊ณต์ง€๋Šฅ์€ ์ฐจ๋ณ„๊ณผ ํŽธํ–ฅ์„ ์ผ์œผํ‚ค๊ธฐ๋„ ํ•˜์ง€๋งŒ, ๋ง‰์„ ์ˆ˜๋„ ์žˆ๋‹ค. ๊ฐœ๋ฐœ์ž๋“ค์ด ํ•ดํ‚น์„ ํ•˜์ง€๋งŒ ๋ณด์•ˆ ํ”„๋กœ๊ทธ๋žจ๋„ ๋งŒ๋“œ๋Š” ๊ฒƒ๊ณผ ๋น„์Šทํ•˜๋‹ค. ์š•์„ค์ด ์•„๋‹ˆ๋”๋ผ๋„ ์‚ฌ๋žŒ์˜ ์ž์กด๊ฐ์„ ๊ฐ‰์•„๋จน๋Š” ํ…์ŠคํŠธ๋Š” ์ถฉ๋ถ„ํžˆ ๋งŽ๋‹ค. ์žฅ๊ธฐ์ ์œผ๋กœ๋Š” ๊ฐœ๋ฐœ์ž ๊ฐœ์ธ์ด ์–ผ๋งˆ๋‚˜ โ€˜์ •์น˜์ ์œผ๋กœ ์˜ฌ๋ฐ”๋ฅธ์ง€โ€™์™€ ๋ฌด๊ด€ํ•˜๊ฒŒ (๋ฐœ์–ธ์˜ ์ฐจ๋ณ„์„ฑ์„) ํŒ๋‹จํ•˜๋Š” ์•Œ๊ณ ๋ฆฌ์ฆ˜์„ ๋งŒ๋“ค๊ณ  ์‹ถ๋‹คโ€๋ผ๊ณ  ๋งํ–ˆ๋‹ค.


๊ทธ๊ฐ€ ๋ณด๊ธฐ์— ํ•œ๊ตญ์˜ ์ธ๊ณต์ง€๋Šฅ ์œค๋ฆฌ ๋…ผ์˜๋Š” ์™ธ๊ตญ์˜ ๋…ผ์Ÿ ์ˆ˜์ค€์— ํ•œ์ฐธ ๋ชป ๋ฏธ์นœ๋‹ค. โ€œ์•Œ๊ณ ๋ฆฌ์ฆ˜ ๊ณต๊ฐœ ์˜๋ฌดํ™” ๊ฐ™์€ ๋ฒ•์•ˆ๋“ค์ด ์Ÿ์•„์ง€๊ณ  ์žˆ๋Š”๋ฐ, ์ธ๊ณต์ง€๋Šฅ ์œค๋ฆฌ ํ•™๊ณ„์—์„œ ๋‚˜์˜ค๋Š” ๋…ผ๋ฌธ์ด๋‚˜ ๊ฐ€์ด๋“œ๋ผ์ธ๊ณผ๋Š” ๊ดด๋ฆฌ๊ฐ€ ํฌ๋‹ค. ๊ทธ๋ƒฅ โ€˜์•Œ๊ณ ๋ฆฌ์ฆ˜์„ ๊ณต๊ฐœํ•˜๋ผโ€™๊ณ  ํ•  ๊ฒŒ ์•„๋‹ˆ๋ผ ์‚ฌ์šฉํ•œ ์•Œ๊ณ ๋ฆฌ์ฆ˜์˜ ๊ทผ๊ฑฐ๊ฐ€ ๋œ ๋…ผ๋ฌธ์„ ๊ณต๊ฐœํ•˜๋ผ๋“ ์ง€, ์•Œ๊ณ ๋ฆฌ์ฆ˜์˜ ์œค๋ฆฌ์„ฑ์„ ํ‰๊ฐ€ํ•  ์ˆ˜ ์žˆ๋Š” ์ง€ํ‘œ๋ฅผ ์ฃผ๊ณ  ์ผ์ • ๊ธฐ์ค€์„ ๊ฐ€์ด๋“œ๋ผ์ธ์œผ๋กœ ์š”๊ตฌํ•˜๋Š” ๊ฒŒ ๋” ํ˜„์‹ค์ ์ด์ง€ ์•Š์„๊นŒ.โ€ ๊ณ ํ•™์ˆ˜ ์„œ์šธ๋Œ€ ๋ฒ•ํ•™์ „๋ฌธ๋Œ€ํ•™์› ๊ต์ˆ˜๋„ โ€œ์•Œ๊ณ ๋ฆฌ์ฆ˜์„ ๋‘˜๋Ÿฌ์‹ผ ๋™์ƒ์ด๋ชฝ์ด ๋ฌธ์ œ์˜ ๊ทผ์›์ด๋‹คโ€๋ผ๊ณ  ๋งํ–ˆ๋‹ค. โ€œ์•Œ๊ณ ๋ฆฌ์ฆ˜์„ ๊ณต๊ฐœํ•˜๋ผ๋Š” (์‹œ๋ฏผ์‚ฌํšŒ ๋“ฑ์˜) ํฐ ํ‹€์˜ ์š”๊ตฌ์™€, โ€˜์˜์—… ๋น„๋ฐ€๊นŒ์ง€ ๋‹ค ๊ณต๊ฐœํ•˜๋ผ๋Š” ๊ฑฐ๋ƒโ€™๋Š” ๊ธฐ์—…์˜ ๋ฐ˜๋ฐœ ์‚ฌ์ด์—์„œ ์ง„๋„๊ฐ€ ์•ˆ ๋‚˜๊ฐ€๊ณ  ์žˆ๋‹ค. ์‚ฌ์‹ค ์œ ๋Ÿฝ์˜ย GDPR(๊ฐœ์ธ์ •๋ณด ๋ณดํ˜ธ ๊ทœ์ •)๋„ ๋ฌด์—‡์„ ์–ด๋””๊นŒ์ง€ ๊ณต๊ฐœํ•˜๊ณ  ์„ค๋ช…ํ•ด์•ผ ํ•˜๋Š”์ง€ ํ•ด์„์ด ๋ถ„๋ถ„ํ•˜๋‹ค. ํ˜„์žฅ์—์„œ ์ธก์ • ๊ฐ€๋Šฅํ•˜๊ณ  ์ ์šฉ ๊ฐ€๋Šฅํ•œ ๊ธฐ์ค€์„ ๋งŒ๋“ค ์ˆ˜ ์žˆ๋„๋ก, ๊ทœ๋ฒ”์„ ๋งŒ๋“ค๋ ค๋Š” ์‚ฌ๋žŒ๋“ค์ด ๊ธฐ์ˆ ์„ ์•„๋Š” ์ผ์„  ๊ฐœ๋ฐœ์ž์™€ ๋Œ€ํ™”๋ฅผ ๋งŽ์ด ํ•ด์•ผ ํ•œ๋‹ค.โ€