https://arxiv.org/abs/2404.18416
๋ค์ํ ์๋ฃ ์ ํ๋ฆฌ์ผ์ด์
์ ์ฐ์์ฑ์ ๊ณ ๊ธ ์ถ๋ก , ์ต์ ์ํ ์ง์์ ๋ํ ์ก์ธ์ค, ๋ณต์กํ ๋ฉํฐ๋ชจ๋ฌ ๋ฐ์ดํฐ์ ๋ํ ์ดํด๊ฐ ํ์ํ AI์๊ฒ ์๋นํ ๋์ ๊ณผ์ ๋ฅผ ์๊ฒจ์ค๋๋ค. ๋ฉํฐ๋ชจ๋ฌ ๋ฐ ๊ธด ์ปจํ
์คํธ ์ถ๋ก ์์ ๊ฐ๋ ฅํ ์ผ๋ฐ ๊ธฐ๋ฅ์ ๊ฐ์ถ Gemini ๋ชจ๋ธ์ ์ํ ๋ถ์ผ์์ ํฅ๋ฏธ๋ก์ด ๊ฐ๋ฅ์ฑ์ ์ ์ํฉ๋๋ค. ์ด๋ฌํ Gemini์ ํต์ฌ ๊ฐ์ ์ ๊ธฐ๋ฐ์ผ๋ก ์น ๊ฒ์์ ์ํํ๊ฒ ์ฌ์ฉํ ์ ์๊ณ ๋ง์ถคํ ์ธ์ฝ๋๋ฅผ ์ฌ์ฉํ์ฌ ์๋ก์ด ์์์ ํจ์จ์ ์ผ๋ก ๋ง์ถคํํ ์ ์๋ ์ํ์ ํนํ๋ ๊ณ ๊ธฐ๋ฅ ๋ฉํฐ๋ชจ๋ฌ ๋ชจ๋ธ ์ ํ๊ตฐ์ธ Med-Gemini๋ฅผ ์๊ฐํฉ๋๋ค. 14๊ฐ์ ์๋ฃ ๋ฒค์น๋งํฌ์์ Med-Gemini๋ฅผ ํ๊ฐํ์ฌ ๊ทธ ์ค 10๊ฐ์์ ์๋ก์ด ์ต์ฒจ๋จ(SoTA) ์ฑ๋ฅ์ ํ๋ฆฝํ์ผ๋ฉฐ, ์ง์ ๋น๊ต๊ฐ ๊ฐ๋ฅํ ๋ชจ๋ ๋ฒค์น๋งํฌ์์ GPT-4 ๋ชจ๋ธ ์ ํ๊ตฐ์ ํฐ ์ฐจ์ด๋ก ๋ฅ๊ฐํ์ต๋๋ค. ๋๋ฆฌ ์ฌ์ฉ๋๋ MedQA(USMLE) ๋ฒค์น๋งํฌ์์ ์ต๊ณ ์ฑ๋ฅ์ ์๋ํ๋ Med-Gemini ๋ชจ๋ธ์ ์๋ก์ด ๋ถํ์ค์ฑ ๊ธฐ๋ฐ ๊ฒ์ ์ ๋ต์ ์ฌ์ฉํ์ฌ 91.1%์ ์ ํ๋๋ก SoTA ์ฑ๋ฅ์ ๋ฌ์ฑํ์ต๋๋ค. NEJM ์ด๋ฏธ์ง ์ฑ๋ฆฐ์ง์ MMMU(๊ฑด๊ฐ ๋ฐ ์ํ)๋ฅผ ํฌํจํ 7๊ฐ์ ๋ฉํฐ๋ชจ๋ฌ ๋ฒค์น๋งํฌ์์ Med-Gemini๋ GPT-4V๋ณด๋ค ํ๊ท 44.5%์ ์๋์ ๋ง์ง์ผ๋ก ๊ฐ์ ๋์์ต๋๋ค. ๋น์๋ณํ๋ ๊ธด ์๋ฃ ๊ธฐ๋ก์์ ๊ฑด์ด ๋๋ฏธ์์ ๋ฐ๋ ์ฐพ๊ธฐ์ ์๋ฃ ์์ ์ง๋ฌธ์ ๋ํ ๋ต๋ณ์ ๋ํ SoTA ์ฑ๋ฅ์ ํตํด Med-Gemini์ ๊ธด ๋งฅ๋ฝ ๊ธฐ๋ฅ์ ํจ๊ณผ๋ฅผ ์
์ฆํ๋ฉฐ, ์ด๋ ๋งฅ๋ฝ ๋ด ํ์ต๋ง์ ์ฌ์ฉํ๋ ์ด์ ์ ๋ง์ถคํ ๋ฐฉ๋ฒ์ ๋ฅ๊ฐํฉ๋๋ค. ๋ง์ง๋ง์ผ๋ก, Med-Gemini์ ์ฑ๋ฅ์ ์๋ฃ ํ
์คํธ ์์ฝ๊ณผ ๊ฐ์ ์์
์์ ์ธ๊ฐ ์ ๋ฌธ๊ฐ๋ฅผ ๋ฅ๊ฐํจ์ผ๋ก์จ ์ค์ ํ์ฉ ๊ฐ๋ฅ์ฑ์ ์์ฌํ๋ฉฐ, ๋ค์ค ๋ชจ๋ ์๋ฃ ๋ํ, ์๋ฃ ์ฐ๊ตฌ ๋ฐ ๊ต์ก์ ๋ํ ์ ๋งํ ์ ์ฌ๋ ฅ์ ์
์ฆํ์ต๋๋ค. ์ด๋ฌํ ๊ฒฐ๊ณผ๋ฅผ ์ข
ํฉํด ๋ณผ ๋, ์์ ์ด ์ค์ํ ์์ญ์์ ์ค์ ๋ฐฐํฌํ๊ธฐ ์ ์ ๋ ์๊ฒฉํ ํ๊ฐ๊ฐ ํ์ํ๊ฒ ์ง๋ง Med-Gemini์ ์ ์ฌ๋ ฅ์ ๋ํ ๊ฐ๋ ฅํ ์ฆ๊ฑฐ๋ฅผ ์ ๊ณตํฉ๋๋ค.
๋๊ธ 1