[🔍후기] 코덱스말고 gpt5 자체는 별로지 않냐

[익명(211.186)]

전체 대화의 컨텍스트를 파악해서 대화하기 보다

바로 앞 질문의 바이어스가 너무 과하고

긍정편향도 좀 이상한 방향으로 간거같고

특정 단어, 특정 내용에 대한 바이어스가 너무 커서 사용감이 떨어지던디.

3~4.5까지 계속 적응해왔던 대화법과 너무 달라서 적응이 안되는건가

[ㅇㅇ 1(122.128)]

여기가 코딩갤이라서 평가가 좋은거임

[익명(make4515)]

테크쪽에서는 소타가 맞음 ㅇㅇ - dc App

[203847년걸리겠죠(awful6856)]

검색, 코딩 sota 난 이둘만해서 맘에듬

[익명(jnlf8576)]

instruction 원하는 방향으로 설정 잘 하면 해소돼서 prompting만 하면 됨

[글쓴 ㅇㅇ(211.186)]

인스트럭션 보다 토큰 임베딩 단계 self attention 과정에, bias 통해서 가중치를 주잖어. 거기서 overbias 되는 경우가 많다는 게 내 생각임. 인스트럭션도 결국 프롬프트랑 같은 단계에 처리되기 때문에 인스트럭션이 더 구체적이고 자세할 수 록 편향이 짙어짐. 기존에는 추구하던 방향이 사람과 같은 방식의 사고 였다면 지금은 더 기계적이라 볼 수 있는거

[익명(jnlf8576)]

그러니 잘 조절하면 된다 임, attention을 잘 한다 - 정교하게 맥락을 볼 수 있다 니깐, 원치 않는 것이 있거나 바라는 형태가 있으면 미리 넣어두면 잘 따른다고

[글쓴 ㅇㅇ(211.186)]

맞음. 같은말을 서로 다르게 하고 있는거. attention 고려해서 prompt를 짜면 됨. 그게 자연스럽지 않고 일반적인 사람의 생각구조와 차이가 있어 사용감을 해친다는거임.

[익명(218.39)]

다만 데이터 많음 + 스케일 잘됨 -> attn 잘함이라서, (vit에서도 비슷) 갈수록 요구하는듯