GPT4o이 GPT4 보다 성능이 올랐고, 완성된 코드가 에러가 발생안하는 것도 맞음


그런데 GP4가 GPT4o 나오기 전에 성능이 개구리기도 해서 더 크게 느껴지는 것도 있고

GPT4o은 성능이 엄청 오른 것처럼 작동을 하는 척함.


가령 기능 5개를 개발하라고 요구한다고 하자.

그러면 GPT4o가 나머지 2개 기능은 자기가 못구현할 것 같으면 그냥 무시하고 개발함


즉 1,2,3,까지만 구현하고 작동하는 코드를 주는 거임



그러니까 자기가 할 수 없는 거 빼고, 할 수 있는 데까지만 에러안나도록 수정하고 그 이상은 작업을 안함

이러면 초창기에는 요구사항도 적고, 개발하는 거야 뻔하니 뭐든 결과가 나옴.

그래서 이전보다 성능이 엄청 오른 것처럼 착각하기 쉬움.


그러면 이미 존재하는 코드 수정하는 능력은? 그냥 별게 없음.

간단한 건 하는데, 조금 복잡해져도 잘 못함.


예전에는 그냥 요구사항 못맞추면 틀리고 말지 였는데,

이제는 니 요구사항에 못맞췄지만 작동은 합니다 이러는 거임.