인간한테 "지구는 둥근가?" 물어봐도 "true" 나올 확률 100% 아니잖아
인간은 뭐 다른가? ㅋㅋㅋㅋ
눈을 떴구나
사실 확률적 앵무새라는 비판에서 핵심이 되는건 확률이 아니라 앵무새긴 함. 사실 확률은 아무런 문제가 없지
확률적 앵무새가 왜 문제인지를 모르겠네. 애초에 llm 자체가 확률적 응답 생성기인데 뭘 문제삼고 싶어하는건지.... 뭔가 트랜스포머가 아닌 다른방식의 ai를 원하는건가?
단순한 속도개선이 아니라 진정한 의미의 재귀개선이 가능한지 의심하는거일듯
@ㅇㅇ 보통 트랜스포머 구조 자체가 문제있다고 보는 사람들이 확률적 앵무새 이야기 하긴함
근데 그건 이미 정해진 지식 내에서 일부 이상한 개체들한테서 다른 대답이 나오는 거잖음. LLM은 알고있는 지식내에서 정답만 말해야하는데 확률 기반은 틀릴 가능성도 높은거니까 문제
확률 기반이라 틀릴 가능성이 높은 게 아니라 그냥 알고 있는 정답은 100%에 가깝게 만들면 됨.
@ㅇㅇ1(14.38) 그래서 LLM에 온도 설정이 있는거임...
애초에 틀리냐 마냐의 문제가아니고 가장 높은 확률의 답을 주는 방식임.
1+1이 2라는걸 확률로 답하는 것이 아니니까 다를듯
확률에 대한 오해가 많은거같음. 확률 기반 추론은 고밀도 정보 추론이라고 봐야함
해당 댓글은 삭제되었습니다.
장기기억 요소랑 연결될수도 있는데 지금 LLM은 매 질문마다 다른 인간한테 답변받는 형태긴함
그거 자체가 LLM 구조적 한계일수도 있지만 이것 역시 확률 자체가 문제인건 아님
눈을 떴구나
사실 확률적 앵무새라는 비판에서 핵심이 되는건 확률이 아니라 앵무새긴 함. 사실 확률은 아무런 문제가 없지
확률적 앵무새가 왜 문제인지를 모르겠네. 애초에 llm 자체가 확률적 응답 생성기인데 뭘 문제삼고 싶어하는건지.... 뭔가 트랜스포머가 아닌 다른방식의 ai를 원하는건가?
단순한 속도개선이 아니라 진정한 의미의 재귀개선이 가능한지 의심하는거일듯
@ㅇㅇ 보통 트랜스포머 구조 자체가 문제있다고 보는 사람들이 확률적 앵무새 이야기 하긴함
근데 그건 이미 정해진 지식 내에서 일부 이상한 개체들한테서 다른 대답이 나오는 거잖음. LLM은 알고있는 지식내에서 정답만 말해야하는데 확률 기반은 틀릴 가능성도 높은거니까 문제
확률 기반이라 틀릴 가능성이 높은 게 아니라 그냥 알고 있는 정답은 100%에 가깝게 만들면 됨.
@ㅇㅇ1(14.38) 그래서 LLM에 온도 설정이 있는거임...
애초에 틀리냐 마냐의 문제가아니고 가장 높은 확률의 답을 주는 방식임.
1+1이 2라는걸 확률로 답하는 것이 아니니까 다를듯
확률에 대한 오해가 많은거같음. 확률 기반 추론은 고밀도 정보 추론이라고 봐야함
해당 댓글은 삭제되었습니다.
장기기억 요소랑 연결될수도 있는데 지금 LLM은 매 질문마다 다른 인간한테 답변받는 형태긴함
그거 자체가 LLM 구조적 한계일수도 있지만 이것 역시 확률 자체가 문제인건 아님