https://youtube.com/v/1if6XbzD5Yg




์ด ์ธํ„ฐ๋ทฐ์—์„œ ํ”„๋ž‘์ˆ˜์•„ ์ˆ„๋ ˆ(Francois Chollet)์™€ ๋“œ์™€๋ฅด์ผ€์‹œ ํŒŒํ…”(Dwarkesh Patel)์€ AGI(๋ฒ”์šฉ ์ธ๊ณต์ง€๋Šฅ) ๋„๋‹ฌ ์‹œ์ ๊ณผ ๊ธฐ์ˆ ์  ๋ณ‘๋ชฉ, ๊ทธ๋ฆฌ๊ณ  โ€œ์ง€๋Šฅโ€์˜ ์ •์˜์— ๋Œ€ํ•ด ๊ฝค ๊นŠ์ด ์žˆ๋Š” ๋…ผ์˜๋ฅผ ํ–ˆ์Šต๋‹ˆ๋‹ค. ํ•ต์‹ฌ์„ ๊ตฌ์กฐ์ ์œผ๋กœ ์ •๋ฆฌํ•˜๋ฉด ๋‹ค์Œ๊ณผ ๊ฐ™์Šต๋‹ˆ๋‹ค.


โธป


1. AGI ๋„๋‹ฌ ์˜ˆ์ƒ ์‹œ์  ๋ณ€ํ™”

โ€ข 2024๋…„ ์ค‘๋ฐ˜๊นŒ์ง€๋Š” ์•ฝ 10๋…„ ํ›„๋ฅผ ์˜ˆ์ƒํ–ˆ์œผ๋‚˜, ํ˜„์žฌ๋Š” ์•ฝ 5๋…„ ์ •๋„๋กœ ๋‹จ์ถ•.

โ€ข ์ด์œ : ํ…Œ์ŠคํŠธ ์‹œ์  ์ ์‘ ๋Šฅ๋ ฅ(Test-time adaptation) ์ง„์ „.

๊ณผ๊ฑฐ AI๋Š” ํ•™์Šต ์‹œ์ ์— ๊ธฐ์–ตํ•œ ํ…œํ”Œ๋ฆฟ๋งŒ ์žฌ์ ์šฉ โ†’ ์ƒˆ๋กœ์šด ๋ฌธ์ œ์— ์ทจ์•ฝ.

์ตœ๊ทผ์—๋Š” O3(OpenAI) ๊ฐ™์€ ๋ชจ๋ธ๋“ค์ด ์ƒˆ๋กœ์šด ๋ฌธ์ œ๋ฅผ ๋ณด๊ณ ๋„ ๊ทธ ์ž๋ฆฌ์—์„œ ๋ชจ๋ธยทํ”„๋กœ๊ทธ๋žจยท์ถ”๋ก  ์ฒด์ธ์„ ํ•ฉ์„ฑํ•ด ํ•ด๊ฒฐ ๊ฐ€๋Šฅ.

โ€ข AGI ๋„๋‹ฌ๊นŒ์ง€ 3๋‹จ๊ณ„ ๊ตฌ๋ถ„:

1. ์•„์ด๋””์–ด ๋‹จ๊ณ„: ์˜ฌ๋ฐ”๋ฅธ ์•„์ด๋””์–ด๋ฅผ ์—ฐ๊ตฌ ์‹œ์ž‘.

2. ์ฒซ ๊ตฌํ˜„ ๋‹จ๊ณ„: AGI ๋น„์Šทํ•œ ์‹œ์Šคํ…œ ์ฒซ ๋นŒ๋“œยทํ…Œ์ŠคํŠธ.

3. ๋ฐฐํฌยทํ™•์‚ฐ ๋‹จ๊ณ„: ์‹ค์ œ ์‚ฌํšŒยท๊ฒฝ์ œ์— ๋Œ€๊ทœ๋ชจ ์ ์šฉ.

โ†’ ๊ฐ ๋‹จ๊ณ„ ์‚ฌ์ด์— ์ˆ˜๋…„์˜ ์‹œ์ฐจ ๊ฐ€๋Šฅ.


โธป


2. ์—ฌ์ „ํžˆ ๋‚จ์€ ๊ณผ์ œ โ€” โ€˜์˜จ๋”์žก ํ•™์Šต(Continual Learning)โ€™

โ€ข Test-time adaptation๊ณผ ๋‹ค๋ฅธ ์ :

โ€ข Test-time adaptation = ์ฆ‰์„์—์„œ ์ƒˆ๋กœ์šด ๋ฌธ์ œ ํ•ด๊ฒฐ ๋Šฅ๋ ฅ.

โ€ข On-the-job learning = ์žฅ๊ธฐ๊ฐ„ ๋งฅ๋ฝยท๊ฒฝํ—˜ ์ถ•์  ๋Šฅ๋ ฅ.

โ€ข ์ธ๊ฐ„ ์ง์›์€ ์ฒซ 3~6๊ฐœ์›”๊ฐ„ ๊ฒฝํ—˜ ์ถ•์ , ํšจ์œจ ํ–ฅ์ƒ, ์‹ค์ˆ˜ ๊ต์ • โ†’ ์žฅ๊ธฐ ๊ธฐ์–ต.

ํ˜„์žฌ LLM์˜ โ€˜๋ฉ”๋ชจ๋ฆฌ ๊ธฐ๋Šฅโ€™์€ ์ œํ•œ์ ยท์ปจํ…์ŠคํŠธ ์†Œ์‹ค(context rot) ๋ฐœ์ƒ.

โ€ข ์†”๋ฃจ์…˜ ๊ฐ€์„ค:

โ€ข ์งง์€ ๋ฐ์ดํ„ฐ๋กœ๋„ ์‚ฌ๋žŒ ์ˆ˜์ค€์œผ๋กœ ๋น ๋ฅด๊ฒŒ ํ•™์Šต.

โ€ข ํ•™์Šต๋œ ๋ชจ๋ธ์„ ์ „์—ญ ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค์— ์ €์žฅยท๊ณต์œ  โ†’ ๋ชจ๋“  AGI ์ธ์Šคํ„ด์Šค๊ฐ€ ์žฌํ™œ์šฉ ๊ฐ€๋Šฅ.

โ€ข ํ”„๋กœ๊ทธ๋ž˜๋จธ๊ฐ€ GitHub ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ ์žฌํ™œ์šฉํ•˜๋“ฏ, AGI๋„ ์ถ”์ƒํ™”๋œ ๋นŒ๋”ฉ๋ธ”๋ก์œผ๋กœ ๋ฌธ์ œ ์žฌํ•ด๊ฒฐ.


โธป


3. โ€˜์Šˆํผํœด๋จผโ€™ ์กฐ๊ฑด

โ€ข ์ธ๊ฐ„์€ ์ž๊ธฐ ๊ฒฝํ—˜์—์„œ๋งŒ ํ•™์Šต, AGI๋Š” ๋ชจ๋“  ์‚ฌ๋ณธ์ด ๋ณธ ๊ฒฝํ—˜์„ ๊ณต์œ .

โ€ข ๋ณ‘๋ ฌ๋กœ ์ˆ˜๋ฐฑ๋งŒ ์ธ์Šคํ„ด์Šค๊ฐ€ ์ƒํ˜ธ ์‹œ๋„ˆ์ง€๋ฅผ ๋‚ด๋ฉฐ ํ•™์Šต โ†’ ์ˆœ์ˆ˜ํ•œ ์†๋„ยทํšจ์œจ์—์„œ ์ด๋ฏธ ์ดˆ์ธ๊ฐ„ ๊ฐ€๋Šฅ.

โ€ข ๊ทธ๋Ÿฌ๋‚˜ ์ด๋Š” โ€˜์‹ฑ๊ทค๋ž˜๋ฆฌํ‹ฐโ€™์™€ ๋™์ผ ๊ฐœ๋…์€ ์•„๋‹˜.


โธป


4. ์‹ฑ๊ทค๋ž˜๋ฆฌํ‹ฐ(๊ธฐ์ˆ ํŠน์ด์ ) ๋…ผ์˜

โ€ข ์ˆ„๋ ˆ: ๊ธฐ์กด โ€˜๋ชจ๋“  ๊ฒƒ์ด ๊ธฐํ•˜๊ธ‰์ˆ˜์ ์œผ๋กœ ๊ฐ€์†โ€™ ์„œ์‚ฌ๋Š” ํšŒ์˜์ .

โ€ข ์‹œ์Šคํ…œ์˜ ํ•œ ๋ณ‘๋ชฉ์„ ์—†์• ๋ฉด ๊ณง ๋‹ค๋ฅธ ๋ณ‘๋ชฉ์ด ๋“ฑ์žฅ.

โ€ข AGI๊ฐ€ ์ง€๋Šฅ ๋ณ‘๋ชฉ์„ ์ œ๊ฑฐํ•ด๋„, ๋ฐ์ดํ„ฐ ์ˆ˜์ง‘ยท์‹คํ—˜ ์‹คํ–‰ ๋“ฑ ๋‹ค๋ฅธ ๋ณ‘๋ชฉ์ด ๋‚จ์Œ.

โ€ข ์„ธ์ƒ์€ ์ธ๊ฐ„ ์ค‘์‹ฌ โ†’ ์ธ๊ฐ„ ์ž์ฒด์˜ ๋ณ‘๋ชฉ์ด ์ปค์„œ ์ „์ฒด ์†๋„๋Š” ๋ฌดํ•œ ๊ฐ€์† ๋ถˆ๊ฐ€.

โ€ข ํŒŒํ…”: ๋ณ‘๋ชฉ์ด ์žˆ์–ด๋„ ์žฅ๊ธฐ๊ฐ„ 2~3% ์„ฑ์žฅ๋ฅ  ์œ ์ง€ ๊ฐ€๋Šฅ, AI๋Š” ์ธ๊ตฌ ์ œ์•ฝ ์—†์ด ์ƒ์‚ฐ์„ฑ ์ฆ๊ฐ€ ๊ฐ€๋Šฅ โ†’ ์žฅ๊ธฐ ์„ฑ์žฅ๋ฅ  ๋Œ€ํญ ์ƒ์Šน ๊ฐ€๋Šฅ์„ฑ.


โธป


5. ์ง€๋Šฅ์˜ ์ •์˜์™€ ํšจ์œจ์„ฑ

โ€ข ์ˆ„๋ ˆ: ์ง€๋Šฅ = ๋” ์ ์€ ์ž์›์œผ๋กœ ๋” ๋งŽ์€ ์„ฑ๊ณผ(๋ฐ์ดํ„ฐยท์—ฐ์‚ฐ ํšจ์œจ์„ฑ).

๋‹จ์ˆœํ•œ ๋ง‰๋Œ€ํ•œ ์—ฐ์‚ฐ(๋ธŒ๋ฃจํŠธํฌ์Šค)์€ ์ง€๋Šฅ์ด ์•„๋‹˜.

โ€ข ์˜ˆ: ์ฒด์Šค ๋งˆ์Šคํ„ฐ์ฒ˜๋Ÿผ ๋ช‡ ์ˆ˜๋งŒ ๋ณด๊ณ  ์ตœ์  ์ˆ˜๋ฅผ ์ฐพ๋Š” ๊ฒƒ, ๋ชจ๋“  ์ˆ˜๋ฅผ ๊ณ„์‚ฐํ•˜๋Š” ๊ฒƒ๊ณผ๋Š” ์งˆ์ ์œผ๋กœ ๋‹ค๋ฆ„.

โ€ข ARC ๋Œ€ํšŒ ๊ด€์ฐฐ:

โ€ข ์ผ๋ถ€ ๋ฌธ์ œ๋Š” ํƒ์ƒ‰ ๊ณต๊ฐ„ ๊นŠ์€ ๊ณณ์— ํ•ด๋‹ต ์กด์žฌ โ†’ ์—ฐ์‚ฐ ๋Š˜๋ฆฌ๋ฉด ์ ์ง„์  ํ–ฅ์ƒ.

โ€ข ๊ทธ๋Ÿฌ๋‚˜ ์ธ๊ฐ„์ด ์‰ฝ๊ฒŒ ํ‘ธ๋Š” ๋ฌธ์ œ์— ๊ณผ๋„ํ•œ ์—ฐ์‚ฐ ํ•„์š”ํ•˜๋ฉด AGI๋กœ ๋ณด๊ธฐ ์–ด๋ ค์›€.