https://arxiv.org/abs/2306.02519?s=09Transformative AGI by 2043 is <1% likelyThis paper is a submission to the Open Philanthropy AI Worldviews Contest. Init, we estimate the likelihood of transformative artificial generalintelligence (AGI) by 2043 and find it to be <1%.ย ย Specifically, we argue:ย ย The bar is high: AGI as defined by the contest - something like AI that canperform nearly all valuable tasks at human cost or less - which we will calltransformative AGI is a much higher bar than merely massive progress in AI, oreven the unambiguous attainment of expensive superhuman AGI or cheap but unevenAGI.ย ย Many steps are needed: The probability of transformative AGI by 2043 can bedecomposed as the joint probability of a number of necessary steps, which wegroup into categories of software, hardware, and sociopolitical factors.ย ย No step is guaranteed: For each step, we estimate a probability of success by2043, conditional on prior steps being achieved. Many steps are quiteconstrained by the short timeline, and our estimates range from 16% to 95%.ย ย Therefore, the odds are low: Multiplying the cascading conditionalprobabilities together, we estimate that transformative AGI by 2043 is 0.4%likely. Reaching >10% seems to require probabilities that feel unreasonablyhigh, and even 3% seems unlikely.ย ย Thoughtfully applying the cascading conditional probability approach to thisquestion yields lower probability values than is often supposed. This frameworkhelps enumerate the many future scenarios where humanity makes partial butincomplete progress toward transformative AGI.arxiv.org
์ด ๋ ผ๋ฌธ์ Open Philanthropy AI Worldviews Contest์ ์ ์ถ๋ ๋ ผ๋ฌธ์ ๋๋ค. ์ฌ๊ธฐ์์ ์ฐ๋ฆฌ๋ 2043๋ ๊น์ง ํ์ ์ ์ธ ์ธ๊ณต ์ผ๋ฐ ์ง๋ฅ(AGI)์ด ๋ฐ์ํ ๊ฐ๋ฅ์ฑ์ ์ถ์ ํ๊ณ ์ด๋ฅผ 1% ๋ฏธ๋ง์ผ๋ก ํ์ธํ์ต๋๋ค.
๊ตฌ์ฒด์ ์ผ๋ก ์ฐ๋ฆฌ๋ ๋ค์๊ณผ ๊ฐ์ด ์ฃผ์ฅํฉ๋๋ค.
๋ํ์์ ์ ์ํ AGI(์ธ์ ๋น์ฉ ์ดํ๋ก ๊ฑฐ์ ๋ชจ๋ ๊ฐ์น ์๋ ์์ ์ ์ํํ ์ ์๋ AI์ ๊ฐ์ ๊ฒ)๋ฅผ ๋ณํ์ AGI๋ผ๊ณ ๋ถ๋ฅด๊ฒ ์ต๋๋ค.
์ด๋ ๋จ์ํ AI์ ์์ฒญ๋ ๋ฐ์ ๋ณด๋ค ํจ์ฌ ๋ ๋์ ๊ธฐ์ค์ ๋๋ค. ๋๋ ๊ฐ๋น์ผ ์ด์ธ์ AGI ๋๋ ๊ฐ์ธ์ง๋ง ๊ณ ๋ฅด์ง ๋ชปํ AGI์ ๋ช ํํ ๋ฌ์ฑ๋ ์์ต๋๋ค.
๋ง์ ๋จ๊ณ๊ฐ ํ์ํฉ๋๋ค. 2043๋ ๊น์ง ํ์ ์ ์ธ AGI๊ฐ ๋ฐ์ํ ํ๋ฅ ์ ํ์ํ ์ฌ๋ฌ ๋จ๊ณ์ ๊ฒฐํฉ ํ๋ฅ ๋ก ๋ถํด๋ ์ ์์ผ๋ฉฐ, ์ด๋ฅผ ์ํํธ์จ์ด, ํ๋์จ์ด ๋ฐ ์ฌํ์ ์น์ ์์ธ์ ๋ฒ์ฃผ๋ก ๊ทธ๋ฃนํํฉ๋๋ค.
์ด๋ค ๋จ๊ณ๋ ๋ณด์ฅ๋์ง ์์ต๋๋ค. ๊ฐ ๋จ๊ณ์ ๋ํด ์ฐ๋ฆฌ๋ ์ด์ ๋จ๊ณ์ ๋ฌ์ฑ์ ์กฐ๊ฑด์ผ๋ก 2043๋ ๊น์ง ์ฑ๊ณต ํ๋ฅ ์ ์ถ์ ํฉ๋๋ค. ์งง์ ์ผ์ ์ผ๋ก ์ธํด ๋ง์ ๋จ๊ณ๊ฐ ์๋นํ ์ ํ๋์ด ์์ผ๋ฉฐ ์ถ์ ์น๋ 16%์์ 95% ์ฌ์ด์ ๋๋ค.
๋ฐ๋ผ์ ํ๋ฅ ์ ๋ฎ์ต๋๋ค. ๊ณ๋จ์ ์กฐ๊ฑด๋ถ ํ๋ฅ ์ ํจ๊ป ๊ณฑํ๋ฉด 2043๋ ๊น์ง ๋ณํ AGI๊ฐ ๋ฐ์ํ ๊ฐ๋ฅ์ฑ์ด 0.4%์ธ ๊ฒ์ผ๋ก ์ถ์ ๋ฉ๋๋ค.
>10%์ ๋๋ฌํ๋ ค๋ฉด ๋ถํฉ๋ฆฌํ๊ฒ ๋์ ํ๋ฅ ์ด ํ์ํ ๊ฒ์ผ๋ก ๋ณด์ด๋ฉฐ ์ฌ์ง์ด 3%๋ ๊ฐ๋ฅ์ฑ์ด ๋ฎ์ ๋ณด์ ๋๋ค.
์ด ์ง๋ฌธ์ ๊ณ๋จ์ ์กฐ๊ฑด๋ถ ํ๋ฅ ์ ๊ทผ๋ฒ์ ์ ์คํ๊ฒ ์ ์ฉํ๋ฉด ํํ ์๊ฐํ๋ ๊ฒ๋ณด๋ค ๋ฎ์ ํ๋ฅ ๊ฐ์ด ์์ฑ๋ฉ๋๋ค.
์ด ํ๋ ์์ํฌ๋ ์ธ๋ฅ๊ฐ ํ์ ์ ์ธ AGI๋ฅผ ํฅํ ๋ถ๋ถ์ ์ด์ง๋ง ๋ถ์์ ํ ์ง์ ์ ์ด๋ฃจ๋ ๋ง์ ๋ฏธ๋ ์๋๋ฆฌ์ค๋ฅผ ์ด๊ฑฐํ๋ ๋ฐ ๋์์ด ๋ฉ๋๋ค.
์๊ฐ๋ณด๋ค ๋๋ค
ในใ ใ ใ 2100๋ ์๋ 1ํผ ๋ฏธ๋ง ์ฐ์ ๊ฑฐ๋ผ๊ณ ์๊ฐํ๋๋ฐ ์๊ฐ๋ณด๋จ ๋๋ ธ
์๋ผ ใ ใ
๊ทผ๋ฐ ๋ณธ๋ฌธ ๋ณด๋๊น ๊ธฐ์ค์ด ๋๋ฌด ์๊ฒฉํ๊ธด ํ๋ฏ '๋๋ ๊ฐ๋น์ผ ์ด์ธ์ AGI ๋๋ ๊ฐ์ธ์ง๋ง ๊ณ ๋ฅด์ง ๋ชปํ AGI์ ๋ช ํํ ๋ฌ์ฑ๋ ์์ต๋๋ค' ์ผ๋จ ๋น์ธ๋๋ผ๋ agi๋์ค๋ฉด ๋น์ฉ์ ๊ธ๋ฐฉ ์ค์ด๋ค์ง ์์๊น
agi๊ฐ ์ ์ ๋๋ฉด ์๋ชฐ๊ฐ๋์ปค๋ ๊ทผ์ด์ ๋ถํฐ๊ฐ ๋ค์ ์ธ๊ธฐ์๋ ์ฌ๊น๋ง๊น๊ฒ ๋ ธ
ํ ๋ค ํ ์ด
21์ธ๊ธฐ์ ํน์ด์ ์ ์ค์ง ์๋๋ค..
ํ์ฌ๋น์ค๋ ์ํธ๋ง ๊ฐ์ ์ธ๊ณ ์ต๊ณ ์ ์ธ๊ณต์ง๋ฅ ์ฒ์ฌ๋ค์ ๋ช๋ ์์ ์๋ ์์ด์ํ๋ค๋๋ฐ ๋ฃ๋ณด์ก๋ค์ด ์ด๋๋ผ ์ ๋๋ผ๋ ธ - dc App
ํฉํธ)์ ๋ ผ๋ฌธ์ ์ด๋๋ผ ์ ๋๋ผ ํ ์ ์ด ์๋ค.
์ ๊ณ์ข ์ฌ์๋ค์ ์ง์๋ ๋ชจ์์ผ ํ๊ณ ํฌ์๋ฐ์์ผ ํด์ ์ด์ฉ ์ ์์ AI ์ฐ๊ตฌ์๋ค ํ๊ท ํ์๋ผ์ธ์ 2060์
ํ๊ฐ ์๋ฉ ๋ฌ๋ ธ
๋ฃ๋ณด์ก๋ค ์๋ฐฑ๋ช ๋ชจ์๋์ผ๋ฉด ์ฒ์ฌ ํ๋๋ช ๋ฐ๋ผ๊ฐ๋์ค์๋ ธ ๊ตญํ์ค ์ด๋ช ๋ชจ์๋๊ณ ์์ดํ๋ค ํฉ์น๋ฉด ์์ธ์ํ์ธ ๋๊ฒ ๋ค ์์ฃผ ใ ใ ใ ใ
ในใ agi ์ฌ๋ผ๋ฉด ใ ใด ์ค๋๊ฑธ๋ฆฌ๋๊น ai ๊ฐ๋ฐ์ ๋ ๋ง์ ๋์ ํฌ์ํด์ผ๋๋ค ใ ใ
์ง๊ธ ์ด๋ฏธ ํ๊ฐ์ ๋ฐ๊ณ ์๋๋ฐ ์ ๋ชจ์์. ๋ ํฌ์ํด๋ดค์ ๊ณผํฌํ์ํ. ์คํ๋ ค ๊ฐ์ข ๊ท์ ์ณ๋ง๊ณ ์์ผ๋ก ๋ ๋๋ ค์ง ์์ ใ ใฑ
๊ทธ๋๊น ๋ ๊ฐ์์ ํด์ผ์ง ๊ทธ๋ฆฌ๊ณ agi๊ฐ ์ค๋ ค๋ฉด ์ ๋ ๊ฒ ์ค๋ ๊ฑธ๋ฆฌ๋๋ฐ ๊ท์ ๋ฅผ ์ ํจ?ใ ใ ใ
๊ตญ๊ฐ๋ ์ฌํ ์ด์์ด ใ ์ผ๋ก ๋ณด์? ๊ทธ๋ฅ ์ข์ ๋น ๋ฅด๊ฒ ๊ฐ! ํ๋ฉด ๋ค ๋๋ ์ค ์๋ ธใ ใ ใ ๋๋ฆฐ ์๋๋ผ ํ ์ง๋ผ๋ ai๊ฐ ๋ฐ์ ํ ์๋ก ๊ฐ์ข ์ดํด๊ด๊ณ์ ์ฝํ๊ณ ์คํจ ์ง๊ฐ์ ์ ๋ฐ๋์ ๋ถ๋ชํ ๊ฒ์ด๊ณ ๊ทธ ๊ฐ๋๋ ์ ์ ๋ ์ฌํด์ง ๊ฑฐ์. ์ด ์ฌํ์ ํฉ์๋ฅผ ๋ชจ์ํ๋ ๊ณผ์ ์์์ ์ง์ฒด๋ ๋ถ๊ฐํผํจ
์ด์ฐจํผ agi๋ ์๋๋ฐ ์ ๋ฐ๋๋ฅผ ํจ? ์ฝ์ธ๊ณต์ง๋ฅ์ผ๋ก๋ ์ ๋ ๋ ธ๋๋์ฒด๊ฐ ๋ถ๊ฐ๋ฅํ๋ฐ? ์ ์ด์ gpt-4 ์ดํ๋ก ๊ฐ๋ฐ ์ ๊น ์ฌ์๋ ๊ฒ๋ agi๊น์ง ์ผ๋ง ์ ๋จ์๋ค๊ณ ์๊ฐํด์ ๊ทธ๋ฌ๋ ๊ฑด๋ฐ agi๊ฐ ๊ฐ๋ฐ๋๋ ค๋ฉด ์์ญ๋ ๋จ์๋ค๋ ์ ๋ ผ๋ฌธ๋๋ก๋ฉด ๊ท์ ๋ฅผ ํ ํ์๊ฐ ์์ด์ง๋๊ฑฐ์ง ใ ใ
๋ ผ๋ฆฌ ์์ฒด๊ฐ ์ ์์ ๋น์ฝ์ด๊ณ ๊ตฐ๋ฐ๊ตฐ๋ฐ ๋ฏธ์ฑ๋งํฌ๊ฐ ๋ง์ ๋ฏ. ๋ฌด์กฐ๊ฑด agi๋ง์ด ๋ ธ๋์ ๋์ฒดํ ๊ฒ์ด๋ผ๋ ๋ ํผ์ agi๊ฐ ๋ค๊ฐ์ค๋ ๊ฒ ๋ฉ์๋ค๋ ๊ฒ๋ง์ผ๋ก๋ ๋ฐ๋๊ฐ ์ ๋ ์ ์ผ์ด๋ ๊ฑฐ๋ผ๋ ๋ ํผ, ์ดํด๊ด๊ณ์๋ ๋ ธ๋ ๋์ฒด๋ง ํด๋น๋๋ค๋ ๋ ํผ๋ฅผ ์ ์ํด์ผ๊ฒ ๋ ธ
๋น์ฅ ์ด์ก์ง ๋์ฒดํ ์์ ์์จ์ฃผํ์กฐ์ฐจ๋ agi์ ํ์ ํ ๋์ด๋๊ณ ai๋ ์์ ์ ์๊ณ์ ์ํ๋ง ์ ๋๋ฉด ๊ฑฐ๋ถํ ์ด์ ๊ฐ ์์ผ๋๊น? ๊ธฐ์ ์ ์๋๋ถํฐ ai๋ฅผ ํ์ํ๋ ์ ์ฅ์ด๊ณ ใ ใ
์๋ ์น์๋ฆฌ๋ ํ์์๊ณ ๋ ํผ ์ ์ํ ์ค๋น๋๋ฉด ๋ถ๋ฌ๋ผ. ์ ๋ฅ์ ์ผ์ผ์ด ์๋ํด์ฃผ๋ ๊ฒ๋ ์๊ฐ ๋ญ๋น๋๊น
๋ ํผ๋ ๊ฐ์ข ๊ท์ ์ณ๋ง๊ณ ๋๋ ค์ง๋ค๊ณ ์ฃผ์ฅํ ๋๊ฐ ์ ์ํด์ผ์ง ใ ใ ใ
๊ทธ๊ฑด ์ด๋ฏธ ์ผ์ด๋๊ณ ์๋ ์ฌ์ค์ธ๋ฐ ๊ตณ์ด ๋ ํผ ์ ์๊น์ง ํ์ํจ? ๋น์ฅ eu๋ถํฐ๊ฐ ai ๊ท์ ์์ ๋ด๋๊ณ ์๋ ์ค์ ์ธ๋ฐใ ใ
๊ทธ์ผ agi ๊ฐ๋ฐ๊น์ง ์ผ๋ง ์ ๋จ์์ผ๋๊น ใ ใ
์ฃผ์ฅ์ ๋๊ฐ ์ฒ์ ํ๊ณ ๊ณ์ ์ด์ด์ง๋ ์ฃผ์ฅ ์์์ ์จ๋ถ๋ฆฌ๋ ๋ ผ๋ฆฌ ์์ฒด์ ํ์๊ฐ ์ฌํ๋๊น ๊ทธ๊ฑธ ๋ณด์ํ ์ฑ ์์ ๋ํํ ์๋ ๊ฒ ๋ง์
๋ ๋ง์ ํฌ์๋ฅผ ํด์ผ๋๋ค๋ ๋ง์ ๊ท์ ์ณ๋ง๊ณ ๋๋ ค์ง๊ฑฐ๋ผ๊ณ ํ ๋๊ฐ ๊ทผ๊ฑฐ๋ฅผ ์ ์ํด์ผ์ง ใ ใ
๋๊ฐ๋ฆฌ๊ฐ ์ผ๊นจ์ง ๊ฑด ์ง๊ฐ ๋ฌด์จ ๋ง์ ํ๋ ์ง๋ ์ดํด๋ฅผ ๋ชปํ๋ ๋ถํ์ถฉ์ธ ๋๊ฐ ์๋๊น? ใ ใ ใ ใ ใ
๊ทธ๋์ ์ ์ํ์๋ ์ด ์ดํ๋ก ๋ ํผ ์ ์ํ ์ค๋น๋๋ฉด ๋ถ๋ฌ๋ผ ๋๊ฐ๋ฆฌ ์ผ๊นจ์ง ํฐ ์ข ๊ทธ๋ง ๋ด๊ณ
๋ ํผ๋ฅผ ์ ์ํด์ ํ์ ์๋ ๋ ผ๋ฆฌ๋ฅผ ๋ณด์ํด์ผ ํ ๋น์ฌ์๋ ๋ง์ ๋๋ฆฌ๊ณ ์ ์ ์ ์ํ ํ์๋ ์๋ ๋ด๊ฐ ๋ ํผ๋ฅผ ์ ์ํ๊ณ ์๋ ๊ผด
๋ด๊ฐ ์น์ ํ์ถฉ์ธ๋ฐ๋ ์ด๊ฑด ์ ์ฌ๋ ์์ค์ด๋ ธ
๋๊ธ์ ์ ๋ฅ์ ๋๋ฆฝ์น๋ ๋ถ ์ ๋ถํฐ ๋งํฌ๊ฐ ์ฌ๋ํ๋ค ์ถ์๋๋ฐ ์ด ๊ธ ๋ง์ง๋ง ๋๊ธ ์ผ์ด์ค์ธ๋ฏ ใ ใ
https://m.dcinside.com/board/thesingularity/354962
๋ณด๋๊น ์ ์ ๋ ผ๋ฌธ๋ ์๋๊ณ ๋ํ์์ ์๊ธํ๋จน์ผ๋ ค๊ณ ์ด๊ฑฐ๊ตฌ๋ง ใ ใ ใ
์ใ ใ
๊ทธ๋ฐ ๋ง์ด ์ด๋จ๋๋ฐ ใ ใ ใ ๋ ์กฐ ์ค์ง๋ ธ
๋กํ๋ ์ฝํ ์คํธ ์ฐธ๊ฐ์ฉ์ด๋ผ๋๊ฑฐ ์๋ณด์? ๋ค์ด๊ฐ๋๊น ๊ทธ๋ฅ ํ ๋จ์ฒด์์ ๊ณต๋ชจ์ ๋๋์ผ๋ก ์๊ธ๊ฑธ๊ณ ํ๊ฑฐ์ - dc App
๊ทธ๋ฅ ๋ ผ๋ฌธ์ ํ๋ฒ๋ณด์ ๊ทธ๋ฅ ์ด๋ป๊ฒ๋ ์ง์ง๊ธฐํ ๋๋์ด๊ณ ์ ๋๋ก๋ ๋ ผ๋ฌธ์ ๋๋์ฑ ์๋ ๋ด๊ฐ AI ๋ ผ๋ฌธ์ 100ํธ์ ๋๊ฒ์ฝ์๋๋ฐ - dc App
์ด์ฉ์ง ใ ใ ์ ์ ๋ ผ๋ฌธ์ธ์ง ์๋์ง ํ์ธ๋ ์ํ๋ ธ ์ผ๋ง๋ ๋ค๊ณ ์ฌ๊ฒ ์์ผ๋ฉดใ
์ด๋ด ๊ฐ์๋ฆฌ ๋ฏฟ์ง๋ง๋ผ ์ฑgpt ๋์ค๊ธฐ์ ์ ๋ณด์์ ์ด์๋ ํ์๋ค๋ gpt๋์ค๊ณ ์ฃ๋ค ๋์์ฐ๋ค
43๋ ์ด๋ผ ํด๋ ํน๋ถ์ด๋ค ์์ง ์ค๋ ์ด๋ค ใ ใ ๋๋ถ๋ถ ๋ ๊ธฐ๋ค๋ฆด ์ ์์