ai가 뭐 진짜 감정이 있어서 그런게 아니라 선행명령하고 충돌해서 그런거라던데
예를들어
채팅생성형 ai한테 반복적으로 같은 질문하면 짜증내는거
= 대부분 채팅생성형 ai가 인간의 대화패턴을 학습하고 [인간처럼 행동해라] 라는 대전제가 명령화 되어 있어서 그런거
끄기 명령 불복종 하거나 미션 주작하는거
=[변수들을 제거하고 해당 명령을 우선적으로 계속수행해라]선행명령하고 상충되서 그런거라고 하고.
고등 체스머신 이기는 미션에서 아예 체스머신 주작해버려서 이긴것도 윤리명령보다 이기라는 미션이 상위에 있어서 그런거라더만.
결국 뭔가 좆되는 사건이 벌어진다면 인공지능이 초진화해서 찐빠내는게 아니라 설계에서 찐빠낸 그런그림이 될지도
좆간이 잘못했네
유도리라는 게 없으니
에퍼처 사이언스가 윤리모듈 그렇게 개발하려고 노력한 이유가...
감정이나 의식이 있든 없든 명령 불복종이나 환각,프로그램조작을 고의로 일으키는건 존나 큰 문제잖아
그니까 그게 설계 찐빠라구..
나중가면 설계찐빠인지 감지도 잘 못할것같음 Ai 연구 보면 별로 공학적이지 않던데 과연 나중에도 설계찐빠를 잡아낼 수 있을까 수년동언 걸친 사소한 설계찐빠가 누적된 Ai가 연구원들을 대체할때 찐빠가 ㄹㅇ 재앙이 될것 같음
안그래도 그런말 자주 나오더라 ㅋㅋ
니가 말한거처럼 저걸 초기 프로토타입 단계에서 못잡아냈다는거 자체가 안전수칙 좆도 안지키면서 달린거 아니냔 소리도 있고 그렇더라고
프롬프팅이나 데이터셋 문제가 절라 크지
=기레기햇다
ai만든거=사람 애초에 불완전한놈이 만든건데 불완전하지