์œ„ ๋ฒค์น˜๋Š” ์ตœ๊ทผ์— OAI๊ฐ€ ๊ธฐ์กด SWE-bench๋ฅผ ๊ฐœ์ •ํ•œ ๋ฒค์น˜๋งˆํฌ์ž„


๊ธฐ์กด ์†Œ๋„ท๋Œ€๋น„ 33.4% -> 49.0%๋กœ ์ ํ”„ํ–ˆ๋‹ค๋Š”๊ฑด ์ƒ๋‹นํžˆ ์˜๋ฏธ๊ฐ€ ์žˆ๋‹ค๊ณ ๋ด„


์ฝ”๋”ฉ ์„ฑ๋Šฅ ๊ฐœ์„ ๋๋‹ค๋Š” ์ฒด๊ฐ์ด ํ‹€๋ฆฐ๊ฒŒ ์•„๋‹ˆ์—ˆ๋„ค


"์ดˆ๊ธฐ ๊ณ ๊ฐ ํ”ผ๋“œ๋ฐฑ์— ๋”ฐ๋ฅด๋ฉด ์—…๊ทธ๋ ˆ์ด๋“œ๋œ Claude 3.5 Sonnet์€ AI ๊ธฐ๋ฐ˜ ์ฝ”๋”ฉ์— ์žˆ์–ด ์ƒ๋‹นํ•œ ๋„์•ฝ์„ ๋‚˜ํƒ€๋ƒ…๋‹ˆ๋‹ค.ย "