[일반] 4o 보석상문제 2트만에 성공

[천사다천사(jjtheman999)]

챗봇 아레나 also good gpt2때는 1트만에 맞췄는데 4o는 검열 먹어서인지 아니면 다른 이유 때문인지 한번에는 못맞추네

- dc official App

[익명(awful1887)]

내 거는 3번만에 맞추더라. 영어는 2번만에. - dc App

[익명(awful1887)]

근데 아레나에선 한 방에 풀던 애가 두 세번 해야 푸는 거 보니 좀 이상하긴 함 - dc App

[천사다천사(jjtheman999)]

아무래도 챗봇 아레나 시절 그대로 출시된건 아닌거 같음 - dc App

[익명(221.168)]

그거야모르는일이지 클로드도 성능저하논란왔을때 앤트로픽에서 전혀 가중치에 손대지않았다고했고 저런보석상류문제들은 념글사과문제도 풀었다가말다가하듯이 100번이상테스트하지않는이상 단순히 1~5번돌린거가지고는모름

[익명(221.168)]

100번도부족함 1000번정도는돌려야지

[익명(221.168)]

정말 손댔는지안댔는지 필요한 검증데이터는 100번도아니고 1000번은되야됨 만약 맞춘횟수가 100번이상차이난다면 그건 확실하게 손댔다고 볼수있는거임

[익명(221.168)]

왜자꾸 데이터검증할때 우연히 1번만에맞출수도있는건데 테스트도 1000번이상해본것도아니고 왜 이렇게 초등학생이나할 판단을내릴까

[캬르룩(dbtmdgns1595)]

챗봇아레나 ALSO는 속도 자체가 달라서 더 좋은느낌?? 어쨌든 약간 변화는 준거같은데..

[익명(221.168)]

그거야모르는일이지 클로드도 성능저하논란왔을때 앤트로픽에서 전혀 가중치에 손대지않았다고했고 저런보석상류문제들은 념글사과문제도 풀었다가말다가하듯이 100번이상테스트하지않는이상 단순히 1~5번돌린거가지고는모름

[익명(221.168)]

100번도 정말최소한으로 말한거고 권장은 1000번임