환각이란 게...


마치 우리가 종종 하는 거잖아...?


뇌피셜 싸지르다가 누군가가 콕 하고 찌르면 순간 눈깔 홱 돌아서


사실 잘 알지도 못하는 거 그냥 어렴풋이 떠오르는 전문적 단어들 늘어뜨리면서 그럴 듯하게


자기가 다 아는 것처럼


상대방 묵살하고 짓누르려고 존내 현란하게 지껄이는 거 아님..?


헉...


그럼 언어모델 인공신경망 가중치 중에서 '아는 체'하는 가중치만 억제시키면 환각 꽤 줄어들 듯.. (아니면 프롬프트로 '답변할 때는 반드시 아는 척하면 안 된다. ㅇㅋ?'라고 매번 강조한다든가)


그거 말고는


누군가가 뇌피셜로 싸지른 거 혹은 가짜 뉴스 같은 거 대충 훑어만 보고 바로 믿어버리고


그거 진짜인 줄 알고 지껄이는 케이스도 있는데 이게 학습됐을 시에 데이터 오염에 의한 게 될 수도 있는데


그 부분은 "내가 알고 있는 지식이 진실로부터인지 거짓으로부터인지"를 다시 한 번 팩트 체크를 거치는 인터넷 검색과 같은


작업만 거치면 어느 정도 해결될 듯.. 이 부분이 하사비스가 말한 성찰 및 계획수립 부분...? 이건 GPTs로도 만들 수 있기도 하고, 하사비스 생각은 더 심오하겠지