nextjs 공부하면서 "use client"에 대해 질문했는데 4o 답변이 존나 이상해서 2.5한테 교차검증해보니까
gpt가 틀렸다더라;;;
환각 문제 해결되기 전까지는 진짜 llm의 답변을 신뢰할수가 없고
인력대체는 진짜 환각 못잡으면 불가능하겠더라;;
nextjs 공부하면서 "use client"에 대해 질문했는데 4o 답변이 존나 이상해서 2.5한테 교차검증해보니까
gpt가 틀렸다더라;;;
환각 문제 해결되기 전까지는 진짜 llm의 답변을 신뢰할수가 없고
인력대체는 진짜 환각 못잡으면 불가능하겠더라;;
나도 방금 소넷이 프로젝트 하나 망쳐서 1시간 작업한거 커밋 돌림 답이 없다
진짜 맘놓고 못쓰겠음 에이전트 돌려도 하나하나 내가 검증하고 확인해야되고 물론 돈많으면 테스트 디버깅 까지 자동화시키면 그러면 되겠지만;;
진짜 코드 하나하나 전부 읽어보고 검토해서 적용해야 함 그냥 지금 들어온 요청 목적 달성이 목표인거지, 다음 태스크는 고려하지 않아 글로벌 변수나 디펜던시 문제 해결하려고 프로젝트 컨픽을 바꿔버리니까 코드 확인 안하고 회사나 팀 코드에 그냥 풀하면 고소당할듯 ㅅㅂ
LLM 답변이 신뢰할 수 없는걸 LLM 으로 검증했잖아 모순아님?
그래서 검증하는데 쓴 2.5 답변도 신뢰할수가 없다는거임...
내가 강사가 알려준 지식, 관련 문서를 찾아봐서 정답을 알고있으니까 누가 맞고 틀리고를 안다는거고
외국어 공부는 좋음
코딩할때 프롬프트 디테일 하게 안주면 지 멋대로 로직과 구조를 멋대로 다 바꿔버림
디테일하게 줘도 어느순간 산가고 있음 특히 코드 길어지고 채팅 세션 길어질수록
나도 비슷한 문제 겪어서 답변역할ai와 검증역할ai를 분리시키고 일 시켜봤는데 별로더라. 근본적인 개선이 필요함.
해당 댓글은 삭제되었습니다.
어찌보면 질문과정에서 아이러니하게도 llm의 답변은 검증하기 위해서 이것저것 찾아보는 과정 자체가 생기니까 그런면에선 공부에 도움되기는 함ㅋㅋㅋ
4o라 더 멍청한 것도 있음 ㅋㅋ