์ด ์ธํฐ๋ทฐ์์ ํ๋์์ ์๋ (Francois Chollet)์ ๋์๋ฅด์ผ์ ํํ (Dwarkesh Patel)์ AGI(๋ฒ์ฉ ์ธ๊ณต์ง๋ฅ) ๋๋ฌ ์์ ๊ณผ ๊ธฐ์ ์ ๋ณ๋ชฉ, ๊ทธ๋ฆฌ๊ณ โ์ง๋ฅโ์ ์ ์์ ๋ํด ๊ฝค ๊น์ด ์๋ ๋ ผ์๋ฅผ ํ์ต๋๋ค. ํต์ฌ์ ๊ตฌ์กฐ์ ์ผ๋ก ์ ๋ฆฌํ๋ฉด ๋ค์๊ณผ ๊ฐ์ต๋๋ค.
โธป
1. AGI ๋๋ฌ ์์ ์์ ๋ณํ
โข 2024๋ ์ค๋ฐ๊น์ง๋ ์ฝ 10๋ ํ๋ฅผ ์์ํ์ผ๋, ํ์ฌ๋ ์ฝ 5๋ ์ ๋๋ก ๋จ์ถ.
โข ์ด์ : ํ ์คํธ ์์ ์ ์ ๋ฅ๋ ฅ(Test-time adaptation) ์ง์ .
๊ณผ๊ฑฐ AI๋ ํ์ต ์์ ์ ๊ธฐ์ตํ ํ ํ๋ฆฟ๋ง ์ฌ์ ์ฉ โ ์๋ก์ด ๋ฌธ์ ์ ์ทจ์ฝ.
์ต๊ทผ์๋ O3(OpenAI) ๊ฐ์ ๋ชจ๋ธ๋ค์ด ์๋ก์ด ๋ฌธ์ ๋ฅผ ๋ณด๊ณ ๋ ๊ทธ ์๋ฆฌ์์ ๋ชจ๋ธยทํ๋ก๊ทธ๋จยท์ถ๋ก ์ฒด์ธ์ ํฉ์ฑํด ํด๊ฒฐ ๊ฐ๋ฅ.
โข AGI ๋๋ฌ๊น์ง 3๋จ๊ณ ๊ตฌ๋ถ:
1. ์์ด๋์ด ๋จ๊ณ: ์ฌ๋ฐ๋ฅธ ์์ด๋์ด๋ฅผ ์ฐ๊ตฌ ์์.
2. ์ฒซ ๊ตฌํ ๋จ๊ณ: AGI ๋น์ทํ ์์คํ ์ฒซ ๋น๋ยทํ ์คํธ.
3. ๋ฐฐํฌยทํ์ฐ ๋จ๊ณ: ์ค์ ์ฌํยท๊ฒฝ์ ์ ๋๊ท๋ชจ ์ ์ฉ.
โ ๊ฐ ๋จ๊ณ ์ฌ์ด์ ์๋ ์ ์์ฐจ ๊ฐ๋ฅ.
โธป
2. ์ฌ์ ํ ๋จ์ ๊ณผ์ โ โ์จ๋์ก ํ์ต(Continual Learning)โ
โข Test-time adaptation๊ณผ ๋ค๋ฅธ ์ :
โข Test-time adaptation = ์ฆ์์์ ์๋ก์ด ๋ฌธ์ ํด๊ฒฐ ๋ฅ๋ ฅ.
โข On-the-job learning = ์ฅ๊ธฐ๊ฐ ๋งฅ๋ฝยท๊ฒฝํ ์ถ์ ๋ฅ๋ ฅ.
โข ์ธ๊ฐ ์ง์์ ์ฒซ 3~6๊ฐ์๊ฐ ๊ฒฝํ ์ถ์ , ํจ์จ ํฅ์, ์ค์ ๊ต์ โ ์ฅ๊ธฐ ๊ธฐ์ต.
ํ์ฌ LLM์ โ๋ฉ๋ชจ๋ฆฌ ๊ธฐ๋ฅโ์ ์ ํ์ ยท์ปจํ ์คํธ ์์ค(context rot) ๋ฐ์.
โข ์๋ฃจ์ ๊ฐ์ค:
โข ์งง์ ๋ฐ์ดํฐ๋ก๋ ์ฌ๋ ์์ค์ผ๋ก ๋น ๋ฅด๊ฒ ํ์ต.
โข ํ์ต๋ ๋ชจ๋ธ์ ์ ์ญ ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ ์ฅยท๊ณต์ โ ๋ชจ๋ AGI ์ธ์คํด์ค๊ฐ ์ฌํ์ฉ ๊ฐ๋ฅ.
โข ํ๋ก๊ทธ๋๋จธ๊ฐ GitHub ๋ผ์ด๋ธ๋ฌ๋ฆฌ ์ฌํ์ฉํ๋ฏ, AGI๋ ์ถ์ํ๋ ๋น๋ฉ๋ธ๋ก์ผ๋ก ๋ฌธ์ ์ฌํด๊ฒฐ.
โธป
3. โ์ํผํด๋จผโ ์กฐ๊ฑด
โข ์ธ๊ฐ์ ์๊ธฐ ๊ฒฝํ์์๋ง ํ์ต, AGI๋ ๋ชจ๋ ์ฌ๋ณธ์ด ๋ณธ ๊ฒฝํ์ ๊ณต์ .
โข ๋ณ๋ ฌ๋ก ์๋ฐฑ๋ง ์ธ์คํด์ค๊ฐ ์ํธ ์๋์ง๋ฅผ ๋ด๋ฉฐ ํ์ต โ ์์ํ ์๋ยทํจ์จ์์ ์ด๋ฏธ ์ด์ธ๊ฐ ๊ฐ๋ฅ.
โข ๊ทธ๋ฌ๋ ์ด๋ โ์ฑ๊ทค๋๋ฆฌํฐโ์ ๋์ผ ๊ฐ๋ ์ ์๋.
โธป
4. ์ฑ๊ทค๋๋ฆฌํฐ(๊ธฐ์ ํน์ด์ ) ๋ ผ์
โข ์๋ : ๊ธฐ์กด โ๋ชจ๋ ๊ฒ์ด ๊ธฐํ๊ธ์์ ์ผ๋ก ๊ฐ์โ ์์ฌ๋ ํ์์ .
โข ์์คํ ์ ํ ๋ณ๋ชฉ์ ์์ ๋ฉด ๊ณง ๋ค๋ฅธ ๋ณ๋ชฉ์ด ๋ฑ์ฅ.
โข AGI๊ฐ ์ง๋ฅ ๋ณ๋ชฉ์ ์ ๊ฑฐํด๋, ๋ฐ์ดํฐ ์์งยท์คํ ์คํ ๋ฑ ๋ค๋ฅธ ๋ณ๋ชฉ์ด ๋จ์.
โข ์ธ์์ ์ธ๊ฐ ์ค์ฌ โ ์ธ๊ฐ ์์ฒด์ ๋ณ๋ชฉ์ด ์ปค์ ์ ์ฒด ์๋๋ ๋ฌดํ ๊ฐ์ ๋ถ๊ฐ.
โข ํํ : ๋ณ๋ชฉ์ด ์์ด๋ ์ฅ๊ธฐ๊ฐ 2~3% ์ฑ์ฅ๋ฅ ์ ์ง ๊ฐ๋ฅ, AI๋ ์ธ๊ตฌ ์ ์ฝ ์์ด ์์ฐ์ฑ ์ฆ๊ฐ ๊ฐ๋ฅ โ ์ฅ๊ธฐ ์ฑ์ฅ๋ฅ ๋ํญ ์์น ๊ฐ๋ฅ์ฑ.
โธป
5. ์ง๋ฅ์ ์ ์์ ํจ์จ์ฑ
โข ์๋ : ์ง๋ฅ = ๋ ์ ์ ์์์ผ๋ก ๋ ๋ง์ ์ฑ๊ณผ(๋ฐ์ดํฐยท์ฐ์ฐ ํจ์จ์ฑ).
๋จ์ํ ๋ง๋ํ ์ฐ์ฐ(๋ธ๋ฃจํธํฌ์ค)์ ์ง๋ฅ์ด ์๋.
โข ์: ์ฒด์ค ๋ง์คํฐ์ฒ๋ผ ๋ช ์๋ง ๋ณด๊ณ ์ต์ ์๋ฅผ ์ฐพ๋ ๊ฒ, ๋ชจ๋ ์๋ฅผ ๊ณ์ฐํ๋ ๊ฒ๊ณผ๋ ์ง์ ์ผ๋ก ๋ค๋ฆ.
โข ARC ๋ํ ๊ด์ฐฐ:
โข ์ผ๋ถ ๋ฌธ์ ๋ ํ์ ๊ณต๊ฐ ๊น์ ๊ณณ์ ํด๋ต ์กด์ฌ โ ์ฐ์ฐ ๋๋ฆฌ๋ฉด ์ ์ง์ ํฅ์.
โข ๊ทธ๋ฌ๋ ์ธ๊ฐ์ด ์ฝ๊ฒ ํธ๋ ๋ฌธ์ ์ ๊ณผ๋ํ ์ฐ์ฐ ํ์ํ๋ฉด AGI๋ก ๋ณด๊ธฐ ์ด๋ ค์.
ํน๊ฐค์์ ์ ๋ช ํ์ง๋ ์์ง๋ง ์๋ ๊ฐ ๋ํ์ ์ ํ์ถฉ์ธ๋ฐ 5๋ ์ผ๋ก ๋จ์ถ ๋๊ฑฐ๋ฉด ํธ์ฌ๋ค
๋ณ๋ชฉ์ด ์์ด๋ ์ฅ๊ธฐ๊ฐ 2~3% ์ฑ์ฅ๋ฅ ์ ์ง ๊ฐ๋ฅ, AI๋ ์ธ๊ตฌ ์ ์ฝ ์์ด ์์ฐ์ฑ ์ฆ๊ฐ ๊ฐ๋ฅ โ ์ฅ๊ธฐ ์ฑ์ฅ๋ฅ ๋ํญ ์์น ๊ฐ๋ฅ์ฑ. ์ฌ๋ฆ์ด๋ค
๋ฌด๋ํ๋ด
๋ณ๋ชฉ์ ์๋ฎฌ๋ ์ด์ ๋ง๋ค์ด์ ํด๊ฒฐํ๋๊ฑธ ๋ชจ๋ฅด๋ค