์ ๋ฒค์น๋ ์ต๊ทผ์ OAI๊ฐ ๊ธฐ์กด SWE-bench๋ฅผ ๊ฐ์ ํ ๋ฒค์น๋งํฌ์
๊ธฐ์กด ์๋ท๋๋น 33.4% -> 49.0%๋ก ์ ํํ๋ค๋๊ฑด ์๋นํ ์๋ฏธ๊ฐ ์๋ค๊ณ ๋ด
์ฝ๋ฉ ์ฑ๋ฅ ๊ฐ์ ๋๋ค๋ ์ฒด๊ฐ์ด ํ๋ฆฐ๊ฒ ์๋์๋ค
"์ด๊ธฐ ๊ณ ๊ฐ ํผ๋๋ฐฑ์ ๋ฐ๋ฅด๋ฉด ์ ๊ทธ๋ ์ด๋๋ Claude 3.5 Sonnet์ AI ๊ธฐ๋ฐ ์ฝ๋ฉ์ ์์ด ์๋นํ ๋์ฝ์ ๋ํ๋ ๋๋ค.ย "
๊ฒฝ์ํด๋ผ