불어 번역을 시켰는데, 특정 수식어를 계속 누락함. 검열에 걸릴만한 수식어 아니고 사람이 보면 딱봐도 구조가 보이는 문장.
4o, o1-mini, gemini 1206, flash experimental 모두 동일하게 해당 구문만 누락하고. 내가 지적하거나 그 문장을 분석하라고 하면 그제서야 번역하네. 물론 번역도 엉망. 문장 수식 구조는 사람이 보면 직관적으로 알만한 수준인데도 엉망으로 수식함.
o1은 추론시간이 좀 걸렸지만 매우 깔끔하고 정확하게 번역하고, flash thinking은 품질은 떨어지지만 번역은 함. 놀라운건 소넷은 누락없이 정확히 번역함 품질은 o1바로 다음.
4o는 경량화를 얼마나한건지 요즘 번역 돌리면 엉망진창임. of나 and 수식을 거꾸로한다거나 은근슬쩍 문장이나 수식어를 빼버린다거나 해서 내용을 절대 신뢰할 수 없음. 소넷 성능이 조금 더 올라왔으면 좋겠는데 아쉽다.
4o, o1-mini, gemini 1206, flash experimental 모두 동일하게 해당 구문만 누락하고. 내가 지적하거나 그 문장을 분석하라고 하면 그제서야 번역하네. 물론 번역도 엉망. 문장 수식 구조는 사람이 보면 직관적으로 알만한 수준인데도 엉망으로 수식함.
o1은 추론시간이 좀 걸렸지만 매우 깔끔하고 정확하게 번역하고, flash thinking은 품질은 떨어지지만 번역은 함. 놀라운건 소넷은 누락없이 정확히 번역함 품질은 o1바로 다음.
4o는 경량화를 얼마나한건지 요즘 번역 돌리면 엉망진창임. of나 and 수식을 거꾸로한다거나 은근슬쩍 문장이나 수식어를 빼버린다거나 해서 내용을 절대 신뢰할 수 없음. 소넷 성능이 조금 더 올라왔으면 좋겠는데 아쉽다.
소넷이 언어능력은 진짜 원탑인 거 같어
만약 앤트로픽이 추론모델 내놨으면 o1보다 좋았을 수도 있었을지도 모르겠음
모델성능은 정말 좋은데 여타 편의기능이 조금 부족한듯 추론도 잘할거같은데 지금 리미트 빡빡한거보면 불가능하지 않을까싶어