ํน๊ฐค ํน์ฑ์ ์ด๋ฏธ ์๋ ์ฌ๋๋ค์ด ๋ง๊ฒ ์ง๋ง ์ฌ๋ ค๋ด
๋
ธ๋ฒ ๊ธฐ์ค์. ์ดํด๋ฅผ ์ํด ์ ๋ฐ๋์ ์ ํ๋๋ ํผ์ฉ๋ ์ ์์
์ค๋ฅ ์ง์ ํ์
์ธ๊ณต์ง๋ฅ ์ด์ผ๊ธฐ ํ ๋ ์ค์ํ ํฌ์ธํธ ๋ ๊ฐ๊ฐ ์๋๋ฐ ๋ฐ๋ก
'์ฌํ๋ฅ (recall)' ๊ณผ '์ ๋ฐ๋(precision)' ์.
๊ฐ ํ์ด๋ ์ธ๊ณต์ง๋ฅ์ ์ธ์์ ๋ชจ๋ฆ.
๊ทธ๋์ ๋ญ๊ฐ ์ ๋ต์ธ์ง๋ ๋ชฐ๋ผ
๊ทธ๋์ ๊ฐ์ ๋ด์ฉ์ ๊ฐ๋ฅด์ณ๋ ๋ฐฐ์ด ๊ฒ ๋ฐ์ ๋ชจ๋ฅด๋ ์ ๋ ์๊ณ
ํ๋ ์๋ ค์ฃผ๋ฉด ์ด์ ํ๋ ์น๊ตฌ๋ ์์.
๊ฐ๋ฅด์ณ ์ค ๋ด์ฉ์ผ๋ก ํ
์คํธ๋ฅผ ์น๋ฉด ๋์ ๊ตฌ๋ถํ๊ธฐ๊ฐ ์ด๋ ค์.
ํ์ง๋ง ์ค์ ์
๋ฌด ํ์ฅ์ ๋ฐฐ์ฐ์ง ๋ชปํ ์ผ๋ค์ด ๋ค์ด์ค์์?
๊ทธ๋์ AI ๊ฐ๋ฐํ๋ ์ฌ๋๋ค์ ๋ฐ์ดํฐ์ ์ผ๋ถ๋ฅผ ์ํ ๋ฌธ์ ๋ก ์.
์ธ๊ณต์ง๋ฅ์๊ฒ ๋ฌธ์ ๋ก ์ฃผ๊ณ ์ ํ์ด๋ด๋์ง ๋ณด๋๊ฑฐ์ง.
์ฌ๊ธฐ์ ์ฌํ๋ฅ ๊ณผ ์ ํ๋๊ฐ ๋์ถฉ ๋ฐ๋น๋ก ๋น์ทํ๊ฒ ๋์ค๊ฒ ๋๋๋ฐ
๋ฌธ์ ๋ฅผ ๋๋คํ๊ฒ ๋์ ๋,
๋ง์ ํ๋ฅ = ์ ๋ฐ๋
๋ง์ถ ํ๋ฅ = ์ฌํ๋ฅ ์
๊ทธ๋ฆผ1. ์ ๋ฐ๋/ ์ฌํ๋ฅ ๊ทธ๋ํ ์์
์ ๊ทธ๋ํ์ ๋นจ๊ฐ ํ์๋ฅผ ํ ๋ถ๋ถ์ ์ ์ด ์์์?
์ด๋ค ๋ฌธ์ ์ง๋ฅผ ์คฌ์ ๋,
'ํ๋'์ด๋ผ ๋๋ตํ ๊ฒ ์ค ๋ง์ ๋น์จ์ด 96% (์ ๋ฐ๋)
'ํ๋'์ ๋ฌธ์ ๋ก ๋์ ๋ ๋ง์ถ ๋น์จ์ด 96% (์ฌํ๋ฅ ) ์
'ํ๋'์ ์ผ์ชฝ ๋์ผ๋ก ๊ฐ๋ณผ๊น? ๊ทธ๋ฌ๋ฉด
'ํ๋'์ด๋ผ ๋๋ตํ ๊ฒ ์ค ๋ง์ ๋น์จ์ด 99% (์ ๋ฐ๋)
'ํ๋'์ ๋ฌธ์ ๋ก ๋์ ๋ ๋ง์ถ ๋น์จ์ด 92% (์ฌํ๋ฅ ) ๋ผ๋๊ฑฐ์
์์ผ๋ก ํ
์ฌ๋ผ๊ฐ ์ฌ๋๋ณด๋ค ์ฐ์ํ์ง ์ด์ผ๊ธฐ ํ ๋๋ ํ์ํ ๊ฒ ๊ฐ์์ ๊ธ ์.
์ข์ ์ ๋ณด ๊ฐ์ฌํฉ๋๋ค!!!
์ ์ต์ถ
ํ์ด ๊ฐ์ถ - dc App
์ผํ ๊ฐ์ฌ ์ถ
ํฌ๊ท๋ณ์ ์์ธก ํ๋ ๋ชจ๋ธ์ด ์๊ณ ๊ทธ ๋ชจ๋ธ์ ํฌ๊ท๋ณ์ด ์๋์ฌ๋๊ณผ ์๋ ์ฌ๋์ ๊ตฌ๋ถํด๋ค ์ด๋ ์ ๋ฐ๋:๋ชจ๋ธ์ด ํฌ๊ท๋ณ์ด ์๋ค๊ณ ์์ธกํ ์ฌ๋์ค ์ค์ ๋ก ํฌ๊ท๋ณ์ด ์๋ ์ฌ๋์ ๋น์จ ์ฌํ์จ:์ค์ ๋ก ํฌ๊ท๋ณ์ด ์๋ ์ฌ๋์ค ๋ชจ๋ธ์ด ํฌ๊ท๋ณ์ด ์๋ค๊ณ ์์ธกํ ๋น์จ์
๊ทธ๊ฑด ์ ๋ฐ๋์ ์ ํ๋ ์๋๋
์ ๋ฐ๋ = (๋ชจ๋ธ์ด ํฌ๊ท๋ณ์ด ์๋ค๊ณ ์์ธกํ ์ฌ๋ ์์์ ์ค์ ๋ก ํฌ๊ท๋ณ์ด ์๋์ฌ๋ /๋ชจ๋ธ์ด ํฌ๊ท๋ณ์ด ์๋ค๊ณ ์์ธกํ ์ฌ๋) ์ฌํ์จ = (๋ชจ๋ธ์ด ํฌ๊ท๋ณ์ด ์๋ค๊ณ ์์ธกํ ์ฌ๋ ์์์ ์ค์ ๋ก ํฌ๊ท๋ณ์ด ์๋์ฌ๋/์ ์ฒด ์ง๋จ์์ ์ค์ ๋ก ํฌ๊ท๋ณ์๋ ์ฌ๋)์
๋ด๊ฐ ์ข ์๋ตํ๋ค
์ ์ ๊ณ ๋ง๋ค
Precision = TP / (TP + FP) Recall = TP / (TP + FN)
๊ฐ์ถ ๊ทผ๋ฐ ๋๊ฐ๋ณผ๋ agi์ธ์ ๋์ฌ๊ฒ๊ฐ์??
ใ ใน!
ใ ใ ๋๋๊ทผ๋ฐ ๊ณง agi์ฌ๊ฒ๊ฐ์์ ํน๊ฐค์์ฃผ์ค๋๊ฒ์๋?
๊ทธ๋ ์ง
๊ณต๋ถ๊ธ์ ๊ฐ์ถ์ผ
์ฌํ์จ๊ณผ ์ ๋ฐ๋๊ฐ ๋ฐ๋น๋ก๊ด๊ณ๋ฅผ ๋๋ ์ด์ ๊ฐ ๋ญ์??
Threshold๋ฅผ ๋ณํ์ํฌ ๋ ์๊ธฐ์
์์ฐ!
๊ทผ๋ฐ ์ํ๋ค๋ฉด ์ผ๋ง๋ ์ง ๋์์ ์ฌ๋ฌ ai๋ฅผ ๋๋ฆด์๋ ์๊ณ ํ ai๊ฐ ์ฌ๋ฌ๋ฒ ๊ณ์ฐํ ์๋ ์์์ ๊ต์ฐจ๊ฒ์ฆ์ ์ฌ๋ฌ๋ฒ ์ํค๋ฉด ๊ฑฐ์ 99.99%์ ๊ฐ๊น๊ฒ ๋๋ ๊ฑฐ ์๋๊ฐ?