https://arxiv.org/pdf/2212.01354.pdf
https://www.verses.ai/research-developmentResearch and Development | VERSESVERSES is a cognitive computing company building next-generation intelligent systems modeled after the Wisdom and Genius of Nature.www.verses.ai
VERSES AI์ ํต์ฌ: ๋ฅ๋์ ์ถ๋ก
์ฐ๋ฆฌ๋ ์ ๋ณด ๋ฌผ๋ฆฌํ์ ๊ธฐ๋ฐ์ผ๋ก ์ง๋ฅ์ ๋ชจ๋ธ๋งํ๋ ์ ๊ทผ ๋ฐฉ์์ธ ๋ฅ๋ ์ถ๋ก ์ ์ฌ์ฉํ์ฌ ์ด ๊ฐ์ค์ ์กฐ์ฌํ๊ณ ์์ต๋๋ค.ย ย ๋ฅ๋ ์ถ๋ก ์ ํตํด ์ฐ๋ฆฌ๋ ๋ค์ด์ค๋ ๋ฐ์ดํฐ๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ๊ฒฐ์ ์ ๋ด๋ฆฌ๊ณ ์ค์๊ฐ ์กฐ์น๋ฅผ ์ทจํ ์ ์๋ ์ํํธ์จ์ด ํ๋ก๊ทธ๋จ์ด๋ ์์ด์ ํธ๋ฅผ ์ค๊ณํ๊ณ ๋ง๋ค ์ ์์ต๋๋ค.ย ย ์ด๋ฌํ ์์ด์ ํธ๋ ์๋ก์ด ๋ฐ์ดํฐ๋ฅผ ๋ฐ์ ๋ ์ค์๊ฐ์ผ๋ก ์์ ์ ์ ๋ ์ ์ ๋ฐ์ดํธํ๊ณ , ์ธ์์ ๋ํ ์ดํด๋ฅผ ํ์ฉํ์ฌ ๋ฏธ๋ฆฌ ๊ณํํ๊ณ ๊ทธ ์์์ ์ ์ ํ๊ฒ ํ๋ํฉ๋๋ค.
์ฐ๋ฆฌ์ ์ ๊ทผ ๋ฐฉ์์ ์์ด์ ํธ์ ์ ๋ ์ ๋ํ ๋ช ์์ ์ธ ์ ๊ทผ์ ํ์ฉํฉ๋๋ค. ์ฆ, ์์ด์ ํธ๊ฐ ์ธ์์ ๋ํด ๋ฏฟ๋ ๊ฒ๊ณผ ์๋ก์ด ์ ๋ณด์ ๋น์ถ์ด ์์ด์ ํธ์ ์ ๋ ์ด ์ด๋ป๊ฒ ๋ณํ๋์ง ๋ฐ๊ฒฌํ๊ธฐ ์ํ ์ผ๋ จ์ ๋๊ตฌ๋ฅผ ์ ๊ณตํฉ๋๋ค.ย ย ์ฐ๋ฆฌ์ ๋ชจ๋ธ์ ๊ทผ๋ณธ์ ์ผ๋ก ๋ฒ ์ด์ง์์ด๋ฏ๋ก ์์ ํ๊ณ ์์ ์ ์ธ ํ๊ฒฝ์ ์ ์งํ๊ธฐ ์ํด ์ต์ ์ ์์ด์ ํธ๊ฐ ๋ฌด์์ ๋ฏฟ์ด์ผ ํ๋์ง, ์ด๋ป๊ฒ ํ๋ํด์ผ ํ๋์ง ์๋ ค์ค๋๋ค.
์ ๋ ฌ ๋ฌ์ฑ๊ณผ ๋ณด์ ๊ทน๋ํ: ํญ์์ฑ ๋ชฉํ
๋ฅ๋ ์ถ๋ก ์ ๋ฌผ๋ฆฌํ ๋ฐ ์ ๋ณด ์ด๋ก ์ ๊ธฐ๋ฐ์ผ๋ก ๋ชฉ์ ํจ์ ์ ํ์ ์ํ ๋ฐฉ๋ฒ์ ์ ๊ณตํฉ๋๋ค.ย ย ๋ฅ๋ ์ถ๋ก ์์ด์ ํธ๋ ๋จ์ํ ๋ณด์ ๊ธฐ๋ฅ์ ์ต๋ํํ๋ ๊ฒ๋ง์ ์ถ๊ตฌํ์ง ์์ต๋๋ค.ย ย ๋์ Active Inference๋ ์๋์ผ๋ก ํ์๊ณผ ํ์ฉ์ ๊ท ํ์ ์ ์งํ์ฌ ํธ๊ธฐ์ฌ์ด ๋ง๊ณ ์ ๋ณด๋ฅผ ์ฐพ๋ ์์ด์ ํธ๋ฅผ ์ค๊ณํ ์ ์์ต๋๋ค.ย ย ๊ฒฐ์ ์ ์ผ๋ก Active Inference๋ ์ ๋ณด๋ฅผ ๊ณต์ ํ๊ณ ํจ๊ป ์๋ํ์ฌ ์ง์ ๊ฐ๋ฅํ ์ํ๊ณ๋ฅผ ๋ง๋๋ ๋ค์ค ์์ด์ ํธ ์์คํ ์ผ๋ก ์์ฐ์ค๋ฝ๊ฒ ํ์ฅ๋ฉ๋๋ค.ย ย ์ด๋ ๋ณธ์ง์ ์ผ๋ก ๋ณด๋ค ์์ ํ ์ํธ ์์ฉ์ ์ด์งํฉ๋๋ค. ์์ด์ ํธ๋ ์๋ก๋ฅผ ์ดํดํ๊ณ ๋ชจ๋ธ๋งํ๋ฉฐ ์ฃผ๋ณ ์ํฐํฐ์ ์๋ณํ์ฌ ์ง๋จ ์ง๋ฅ์ ํ์ฑํฉ๋๋ค.
๋ฒ ์ด์ง์ AI์ ๋ค๋ฃจ๊ธฐ ์ฌ์ด ๋ฌธ์ ํด๊ฒฐ
๋๋ถ๋ถ์ ์ต์ฒจ๋จ ๊ธฐ๊ณ ํ์ต ์ฐ๊ตฌ์ ํ์ฌ ์๊ฐ์ ๊ธฐ๊ณ ์ง๋ฅ์ ๋ํ ์์ ํ ๋ฒ ์ด์ง์ ์ ๊ทผ ๋ฐฉ์์ด ์ด๋ก ์ ์ผ๋ก๋ ์ต์ ์ ์ ๊ทผ ๋ฐฉ์์ผ๋ก ๋๋ฆฌ ๋ฐ์๋ค์ฌ์ง์ง๋ง ๊ณ์ฐ ๋ณต์ก์ฑ์ผ๋ก ์ธํด ํ์ฅ๋ ์ ์๋ค๋ ๊ฒ์ ๋๋ค.ย ย ์ด๋ฌํ ๋ฏฟ์์ ์ ๊ตํ ๋ฒ ์ด์ง์ ๋ชจ๋ธ์ด ํ๋์ ๊น์ ๋ฏฟ์ ๋คํธ์ํฌ์ ๊ตฌ์กฐ๋ฅผ ๋ชจ๋ฐฉํ๊ณ ํ์ต์ ์ํด ์๊ฐ๊ณผ ์๋์ง๋ฅผ ์๋ชจํ๋ ๊ฒฝ์ฌํ๊ฐ๋ฒ ๊ธฐ๋ฐ ๋ฐฉ๋ฒ์ ์ฌ์ฉํด์ผ ํ๋ค๋ ์๋ฌต์ ์ธ ๊ฐ์ ์ ๊ธฐ์ดํฉ๋๋ค.ย ย ์ฐ๋ฆฌ๋ ๋น ๋ฅด๊ณ ๊ฒฝ์ฌ ์๋ ํ์ต์ ๊ฐ๋ฅํ๊ฒ ํ๋ ์ ๊ฒฝ๋ง ์ํคํ ์ฒ์ ๋ณด๋ค ๋์ ์ ์ฌํ ๋ชจ๋์ ์ ๊ทผ ๋ฐฉ์์ ์ฑํํ์ฌ ์ด๋ฌํ ๋ฌธ์ ๋ฅผ ๊ทน๋ณตํ๊ณ ์์ต๋๋ค.
์ด๋ฅผ ํด๊ฒฐํ๋ ๊ฒ์ด ์ฐ๋ฆฌ์ ํต์ฌ ์ฐ๊ตฌ ๋ถ์ผ ์ค ํ๋๋ก ๋ถ์ํ์ต๋๋ค.ย ย ์ฐ๋ฆฌ๋ autograd๊ฐ ๋ฅ ๋ฌ๋์ ์ํด ํ๋ ๊ฒ์ฒ๋ผ ๋ฒ ์ด์ง์ ๊ธฐ๊ณ ์ง๋ฅ์๋ ๋์์ด ๋ ๊ฒ์ผ๋ก ๊ธฐ๋ํ๋ ์ ๊ณ์ ์ต์ ํ๋๊ณ ํ์ฅ ๊ฐ๋ฅํ ์๋ก์ด ๋ฒ ์ด์ง์ ์ถ๋ก ํ๋ ์์ํฌ๋ฅผ ๊ฐ๋ฐํ๊ณ ์์ต๋๋ค.
์ฐ๋ฆฌ์ ์ด๊ธฐ ๊ฒฐ๊ณผ๋ ์ ๋งํ๋ฉฐ ๋ ๋์ ๊ธฐ๊ณ ํ์ต ์ปค๋ฎค๋ํฐ์ ์ฐ๋ฆฌ์ ๊ธฐ์ ์ ์ ๋ณด์ด๊ธฐ ์ํด Atari 100k ๋ฒค์น๋งํฌ ์ฑ๋ฆฐ์ง์ ๊ฐ์ ๋ฒค์น๋งํฌ์์ ์ต์ฒจ๋จ AI์ ๋ํ ์ฐ๋ฆฌ์ ๊ธฐ์ ์ ์์ฐํ ๊ฒ์ ๋๋ค.ย ย ์ฐ๋ฆฌ๋ ์ด ๊ธฐ์ ์ ๊ณ์ ๊ฐ๋ฐํ๋ฉด์ ์ฐ๋ฆฌ์ ์ฐ๊ตฌ ๊ฒฐ๊ณผ๋ฅผ ๋๋ฃ ๊ฒํ ์ ๋๊ณผ ์ปจํผ๋ฐ์ค๋ฅผ ํตํด ์ ํํ ๊ฒ์ ๋๋ค.ย ย ๊ณ์ ์ง์ผ๋ด ์ฃผ์๊ธฐ ๋ฐ๋๋๋ค.
๋๊ธ 0