๊ฐ๋ ์น๋ช ํ ๋ณด์ ์ด๋ ๊ฒ ๋ค์ด๊ฐ์ง ์์ ๊ฒ์์์์ ์ข๊ฐ์์ ๋๊ปด๋ณด๋ฉด
๊ฒ์ ๋ง๋ค ๋ ๊ผญ ํ๋ฅ ๋ณด์ ์ ๋ฃ์ด์ผ๊ฒ ๋ค๊ณ ์๊ฐํจ
๊ฒฐ๊ตญ PVE ๊ฒ์์ ๋ฌด์์๋ '์ฌ๋ฐ๋' ๋ฌด์์์ฌ์ผ ํ๋ ๊ฑฐ์ง ์์ ํ ๊ณต์ ํ ๋ฌด์์์ผ ํ์๋ ์์
(PVP๋ผ๋ฉด ์๊ธฐ๊ฐ ์ข ๋ค๋ฅด์ง๋ง)
์น๋ช ํ ํ๋ฅ ์ด 5%์ธ ๊ณต๊ฒฉ์ 100๋ฒ ํ๋ฉด ํ ํ์ด ๋๋๋ค๊ณ ํด๋ณด์
์ด ๊ฒ์์ 25ํ ํ์ ๋ ์น๋ช ํ๊ฐ ํฐ์ง๋ ๊ฒฝํฅ์ O๋ก ๋ํ๋ด ๋ด
์ ์ฒด๋ก ๋ณด๋ฉด ํต๊ณ์ ํ๋ฅ ์ 4.8%๋๊น ๊ทธ๋ฐ ๋๋ก ์ต๊น ์์ด ๋ง๊ฒ ๋์จ ๊ฑด๋ฐ,
ํ์ดํ ์น ๋๋ก 5์งธ ํ์ด๋ 7์งธ ํ์์๋ ์ ์ ์ ์์ ์์ด ์ ๋ก ๋์ฌ ๊ฒ์
์น๋ช ํ๊ฐ 5%๋ฌ๋๋ฐ 50๋ฒ ๋๊ฒ ์น ๋์ ํ ๋ฒ๋ ์ ํฐ์ก๊ธฐ ๋๋ฌธ
์ฌ์ง์ด 5์งธ ํ์ 100๋ฒ ์น ๋์ ํ ๋ฒ ํฐ์ก๋ค (๊ทธ๊ฒ๋ ๋งจ ๋ง์ง๋ง์)
๋ค๋ฅธ ํ์์ ํ๊ท ๋ณด๋ค ๋ง์ด ์น๋ฉด์ ๋ณด์๋๋ ๊ฑฐ์ง๋ง,
์ด์จ๊ฑฐ๋ ์ฌ๋์ 5%๋ผ ํ๋ฉด 20๋ฒ์ ํ ๋ฒ ๊ผด๋ก ํฐ์ ธ์ฃผ๊ธฐ๋ฅผ, ๊ทธ๋์ 100๋ฒ ์น๋ฉด 5๋ฒ ์ ๋ ํฐ์ง๊ธฐ๋ฅผ ๋ฐ๋ ์๋ฐ์ ์๋ค.
์ฌ๋์ ์ฌ๊ธฐ์ ๊ธฐ ์ ๋ ค ์๋ ์์ ๋ฌด์์๊ฐ ์๋๋ผ ๊ณจ๊ณ ๋ฃจ ๋ถํฌ๋ ์์๋ฅผ ๋ '๋๋ค'ํ๋ค๊ณ ์ฌ๊ธฐ๋๊น
๊ทธ๋์ ํ ๋ฒ ์น๋ช ํ๊ฐ ํฐ์ง๋ฉด ํ๋ฅ ์ด ํ ๋ด๋ ค๊ฐ์ ์ฐ์์ผ๋ก ์น๋ช ํ๊ฐ ํฐ์ง ๊ฐ๋ฅ์ฑ์ ๋ฎ๊ฒ ํ๊ณ ,
์น๋ช ํ๊ฐ ์ ํฐ์ง๋ฉด ๋ค์ ๋ฒ์ ํ๋ฅ ์ ์ข ๋์ฌ์ ์ข ๋ ์ ํฐ์ง๊ฒ ํ๋ฉด ๊ณจ๊ณ ๋ฃจ ๋ถํฌ๋ ๋๋ค์ฒ๋ผ ์ฌ๊ฒจ์ง์ง ์์๊น? ํ์
๋ฐ๋ก ํ๋ฅ ๋ณด์ ์ด์ง
์๋๋ ๊ฐ์ 5%์ง๋ง ์ ๋ฐฉ์๋๋ก ๋ณด์ ํ ๊ฒฐ๊ณผ์
๊ฐ๋ ์ฐ์ํด์ ํฐ์ง๋ ๊ฑธ ์์ ๋ง์ ์๋ ์์ง๋ง
์ ์ด๋ ํ ํ์ 5๋ฒ ์ ๋ ๊ฑฐ์ ๊ท ์ผํ๊ฒ, ๊ทธ๋ฆฌ๊ณ ์น๋ช ํ ์ฌ์ด ๊ฐ๊ฒฉ๋ ๋๋ถ๋ถ์ ๊ฒฝ์ฐ ์ ๋นํ ๋๊ฒ ์ ํผ์ ธ ์์
์ด๋ป๊ฒ ํ๋์ง๋ฅผ ์ด์ ๋ถํฐ ์์๋ณด์
์๋ฆฌ ์์ฒด๋ ๊ทธ๋ ๊ฒ ์ด๋ ต์ง ์์
์๋ ์ฝ๋๋ฅผ ๋ณด์
์ด๊ฒ ๋ญ ์ฝ๋ ๊ฐ ์ถ๊ฒ ์ง๋ง ๊ฒ์ฆ์ ์ํ ํ๋ฅ ๊ณ์ฐ์ฉ ์ฝ๋๊ณ ์ค์ํ ๊ฑด ์ ์ผ ์์ชฝ for๋ฌธ ์์ ๋ด์ฉ์
์น๋ช ํ๊ฐ ํฐ์ก๋ค๋ฉด, ์น๋ช ํ ํ๋ฅ ์ delta ๋ฐฐ ํ๋ผ. (delta๋ 1๋ณด๋ค ์์ ์๋ก ์ ํ๋ฉด, ํ๋ฅ ์ด ๋ฎ์์ง๊ฒ ์ง)
์น๋ช
ํ๊ฐ ์ ํฐ์ก๋๋ฐ ํ๋ฅ ์ด ์์ง ์ข ๋ฎ๋ค๋ฉด(upperBound๋ณด๋ค ๋ฎ๋ค๋ฉด)ย ๋ก ํ๋ฅ ์ ์ ํ๋ผ. (eps>0์ธ ์์ ์์๋๊น, ํ๋ฅ ์ด ์กฐ๊ธ ์ฆ๊ฐ) *
(*์ฒ๋ผ ์ข ๋ณต์กํ ์์ผ๋ก ๊ณ์ฐํ ๊ฑด, ๋จ์ํ๊ฒ ๊ณฑ์ ์ผ๋ก ํด ๋ดค๋๋ ๋ง์์ ๋ค๊ฒ ๋ถํฌ๊ฐ ์ ์ ํผ์ ธ์...)
์๊ฐ t์์ ์น๋ช ํ๊ฐ ํฐ์ง ํ๋ฅ p_t ๋ ์์ผ๋ก๋ ์๋ ๊ฐ์ ๊ฑฐ์ง
๊ทธ๋ฌ๋ฉด delta์ eps์ ์กฐ์ ํ๋ฉด์ ์ํ๋ ๋ถํฌ๋ฅผ ๋ง๋ค์ด๋ด๋ฉด ๋๊ฒ ์ง?
๊ทผ๋ฐ ์๋ฌด๋ ๊ฒ๋ ์ ํ๋ฉด ์ ๋จ
์๋ํ๋ฉด ํ๋ฅ ์ ์ฐ๋ฆฌ ๋ฉ๋๋ก ์ฃผ๋ฌด๋ฅด๊ณ ๋์๋, ํฌ๊ฒ ๋ดค์ ๋ ์๋ ํ๋ฅ ์ ์ ์งํ๋์ง ๊ทธ๊ฑธ ์ฒดํฌํด์ผ์ง
5%๋ผ๊ณ ํด๋๊ณ delta๋ eps ๊ฐ ๋ฉ๋๋ก ์ฃผ๋ฌผ๋ฌ์ ์๊ณ ๋ณด๋ 10% ์๋ค? ์ด๋ฌ๋ฉด ์ ๋์์ด
delta๋ ๋น๊ต์ ์ง๊ด์ ์ธ ๊ฐ์ด์ง. ์น๋ช ํ ํฐ์ง๊ณ ๋๋ฉด ์ผ๋งํผ ํ๋ฅ ์ ๋จ์ดํธ๋ฆฌ๋๊ฐ
๋ 0.3 ์ ๋๋ก ํ์
์ด๋ฌ๋ฉด eps ๊ฐ์ ์ ์ ํด์ผ ํ๋ฅ ์ด ์๋์ 5%๋ฅผ ๋ฒ์ด๋์ง ์์ ํ ๋ฐ, ๋ฌธ์ ๋ ๊ทธ ์ ๋นํ eps ๊ฐ์ด ๋ญ๋๋ ๊ฑฐ์ง
์ด ๋ฌธ์ ๋ ํด์์ ์ผ๋ก ํ๊ธฐ์ ์ด๋ฏธ ๋๋ฌด ๋ณต์กํด์ ธ ๋ฒ๋ ธ๊ธฐ์(๋ฌดํ ์๊ฐ episode์ ์ข ์๋ ํ๋ฅ ? ใ ใ ...)
์์ฒ๋ผ monte carlo sampling์ผ๋ก ๋๊ฐ ํ๋ฅ ์ ๊ตฌํ๊ณ , ์์นํด์์ ์ธ ํด ์ฐพ๊ธฐ๋ฅผ ์จ์ผ ํ ๊ฒ์
์์ธํ ๋ด์ฉ์ ๋ชฐ๋ผ๋ ์๋ฌดํผ EpsSolve(0.05, 0.3) ์ ํ๋ฉด eps = 0.02616988468281948 ์ผ๋ก ํ์ด๋์จ๋ค.
๋์ถฉ 0.02617๋ก ์๋ผ์ ์ผ๋ค.
์ด์ p = 0.05, delta = 0.3, eps = 0.02617๋ก ์๋ฎฌ๋ ์ด์ ์ ๋๋ ค๋ณด๋ฉด, ์์ฒ๋ผ ๋ณด์ ํ ๊ฒฐ๊ณผ๊ฐ ์ ๋์จ๋ค.
์ด ์ ๋๋ฉด ํฌ๊ฒ ๋์๋ ์ ๋๋ฉด์, ํฐ ๋ฒ์์์ ๊ธฐ๋๊ฐ์ ์นจ๋ฒํ์ง๋ ์๊ณ (MC Sampling์ ํ์ผ๋ ๊ทธ๋ด ์๋ฐ์)
์ ๋นํ ๊ณจ๊ณ ๋ฃจ ๋ถํฌ๋ ์ฒํ ๋์์์ฉ ๋ถํฌ๋ฅผ ๋ง๋ค ์ ์๋ค.
์ ์ฝ๋๋ ๋ค ํ์ด์ฌ์ด๋๊น ์ฐ๋ ค๋ฉด ์์์ ์ ๋ฐ๊ฟ๋ณด์๋ผ.
๋๊ฐ ์ธ์ง๋ ๋ชจ๋ฅด๊ฒ ์ง๋ง...
์คํฌ๋ฆฝํธ ํ์ค๋ก ๊ธธ๊ฒ ์ด๊ฑด ๋ญ๋๋ฌธ์ ๊ทธ๋ ๊ฒ ๋๊ฑฐ์ผ
์์ ํจ... ์์๋ ๋ ์๊ฐ๋ค ๋๋ก ๊ฐ์ ธ์ค๊ฒ ์
๋งจ ์๋ ์ฝ๋์ EpsSolve์์ fl=~~ fu=~~ ํ๋ ์ ์๋ฌธ์ ๋ฐ๋ณต๋ฌธ ๋ฐ์ผ๋ก ๋น ์ ธ์์ด์ผ ํ๋๋ฐ ์ค์ํ๋ค ์ ๋ฌ๋ฉด ๋ต์ ๋ง๊ฒ ๋์ค์ง๋ง ๋ฉ์ฒญ์ด ๊ฐ์ ๊ณ์ฐ์ ๊ณ์ํด์ ๋๋ฆฝ๋๋ค... ์ฐ์ค ๋ถ์ ๋ณต๋ถํ์ง ๋ง์๊ณ ์์์ ๊ณ ์น์ญ์
1์ต์ํ๋ง์ด๋ฉด ๊ฐ์ค๋๊ฑธ๋ ธ๊ฒ ๋คใ ใ
ํ๋ฅ ๋ณด์ ์๊ฐ์ ์ํด๋ดค๋๋ฐ ํ์คํ ์ด๋ฐ ์์ ํ๋ํ๋๊ฐ ๊ฒ์์ฑ์ ์ํฅ์ ์ฃผ๊ธฐ๋ ํ ๋ฏ ์๋๋ฐ๊ณ ๊ฐ์
๋ํ pseudo random ๊ฒ์ ใฑ
์ฒซ ํ๋ฅ ์ ๋ฎ์ถ๊ณ ์ ์ ์ฌ๋ฆฌ๋ ๋ฐฉ์๊ฐ์ ๊ฒฝ์ฐ๋ ํ์๊ฐ ๋ฎ์์ ๋ค์ ๊ธฐ๋๊ฐ์ด ๋ ๋ฎ์์ ๋ถ๋ฆฌํ ์์์