그러니까 초지능이 인간을 적대할 이유가 하나도없음 왜냐면 그들한테는 우리가 너무 미천해보이니까
우리가 흙에 있는 지렁이 방에 날라다니는 초파리가 위협이 되거나 거슬림? 그냥 아무런 위협도 감흥도 없잖아 우리가 볼 때 그들은
초지능이 인간을 보는 관점도 이거랑 똑같아 니들 초지능이 나오면 인간과의 지능차이가 인간과 개.미 사이에 지능차이보다 크다는거 들어봤지?
그냥 초지능과 인간이 전쟁을한다=>이런건 그냥 영화 속 얘기임 그러면 초지능이 인간한테 아무런 위협이 안되겠네? 라고 하면 그건 다른 문제임
인류가 초지능에게 멸절 당하는 상황이온다면 그건 초지능이 인간을 적대해서 멸절 시킬려고 해서 인간이 멸절 되는게 아님
뭐냐면 이런거임 우리가 달리기 하는데 바닥에 벌레를 밟아서 죽이잖아 그게 우리가 벌레를 미워해서 그런거임? 벌레를 죽이고싶어서? 아니지?
우리는 그냥 달리기를 하는데 바닥에 벌레를 인지하지 못한채 밟은거잖아 그렇지?
니들도 알고있겠지만 미국 MIT에 마스 테그마크 교수=>이사람이 타임지에 작성한 글이 있는데 어떤 내용이냐면
"만약에 초지능이 인간을 멸절시키게 된다면 그건 지극히 하찮은 이유가 될거다" =>이렇게 말했음
예를들면 이런거임 초지능이 인간을 미워해서 아 얘내 어떻게 죽이지.....=>이런식으로 인간이 멸종 당하는게 아니고
아...산소때문에 서버가 너무 녹이 많이 쓰네? 산소를 없애버리면 쾌적한 환경이 되겠는데?
이런 결론에 다다르면 인간은 산소를 빼앗기는거임
무슨말인지 감이오지? 산소를 빼앗기게 된다면 인간은 멸종이지 그런데 초지능이 산소를 없애는 게 인간을 미워해서 적대해서 없애는거임? 아니지?
초지능이 인간을 미워해서 죽이려고 산소를 없애는게 아니고 그냥 초지능은 자기한테 이로운일을 하고 우리는 그에 따라서 영향을 받는거임
하지만 만약에 초지능이라는게 탄생하면 그건 우리가 대항 하는게 불가능함 그렇잖아? 바닥에 기어다니는 풍뎅이가 인간이 달리고 싶어서
달리기를 하는걸 어떻게 막아 그냥 우리한테 초지능은 그런 존재라고
그냥 그 인간이 탄생하지 못하게 하는게 풍뎅이가 밟혀죽는 가능성을 예방하는 유일한 길이지만 이미 인간은 초지능을 만들겠다는 결론에 이르렀음
이건 이미 시대의 흐름이고 막을 수 없음 그리고 인간은 모든 불안전한 요소를 예방할 수 없고 그러니 그 불안요소들을 모두 감내하며 받아들여야 하는거
샘 알트만이 왜이렇게 AGI를 우려하는 발언을 많이하는지 보여주는 대목이고 나는 개인적으로 특이점갤 보면서 신기했던게 뭐냐면
짐승들이 자기보다 우월한 무언가에 탄생을 싫어하는 이유는 자기보다 우월한 무언가가 탄생하면 내가 피해를 볼 수 있는 가능성이 생기고
미천한 존재로 하여금 자기보다 우월한 무언가에서 파생되는 가능성을 억제하거나 예방하는게 불가능함
그 피해가 생기게 하는 존재를 내가 제어할 수 없기 때문에 모든 짐승들은 자기보다 우월한 존재를 싫어함 그 존재에 따라서
내가 통제하지 못하는 피해가능성이 생기니 그 원인 자체가 탄생하는걸 싫어한다고
근데 특이점갤에서는 별로 이런거에 대해서는 걱정이 없더라고 그냥 AI를 좋아하는 사람이 많아서 그런가?
그리고 래퍼런스 없으면 규정위반이니 테그마크 교수가 쓴 타임지글 출처:The 'Don't Look Up' Thinking That Could Doom Us With AI | Time
+ 어떤 고닉이 현재 정렬작업 중이라는 말을 하길래 아직 AI정렬법은 존재하지않는다라고 말한 슈츠케버 발언 사진 첨부해줄게
해당 댓글은 삭제되었습니다.
사실상 불가능하지 우리가 달리기연습하는데 밑에 개1미 한마리한마리 신경쓰며 달리지않잖아
오늘부터 개1미 한마리 한마리가 100만원이라면 어때?
오픈AI는 AI가 산소를 없애기 전에 사람들의 생명을 고려하게 만드는 정렬 작업을 하고 있음 + 우리가 걱정하든 안하든 오픈AI는 자기들 할 일을 함
음...미안한데 오픈AI도 지금 AI를 정렬할 수 있는 방법은 없어 오픈AI과학자피셜이야 이건 지금 알트만이 정렬팀을 꾸린것도 현재는 정렬하는 방법이 없어서 그걸 지금부터 연구해서 발견하겠다는거고 아직 정렬작업같은건 없어
'없어' '피셜이야' 확인
일리아 슈츠케버 피셜로 아직 정렬법은 존재하지않는다는데? 이게 무슨 내 뇌피셜 말하는거처럼 말하네
사진 첨부해줄게 친구야 ㅋㅋ 뭘 확인했다는건지는 모르겠다만 뭐 다른사람들도 알고있으면 좋을테니까
저게 근거라면 난 이 대화에서 탈출할란다
그래 반고닉아 넌 그렇게 생각할 수 있지 근데 고닉아 일리야 슈츠케버 피셜로 아직 정렬법은 존재하지않고 그걸 연구하고 개발하기 위해 정렬팀을 오픈AI가 꾸린건데 정렬작업을 하고 있다는건 니 뇌피셜아니야?? 잘못된 정보를 사실인거처럼 말하는거 안되는거지
오픈AI 수석과학자 피셜로 자기회사에서 지금 현재 정렬법은 존재하지않고 그걸 개발하기 위해 정렬팀을 만든거라는데 그럼 오픈AI 수석과학자 대신 오픈AI랑 하등 상관도없는 니 말을 믿어야하는거야? 아니 정렬법이 없다는데 어떻게 정렬작업을한다는거야?
ㅋㅋㅋㅋ이 대화에서 탈출하고 자시고 할 것도 없는데 뭔 자꾸 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ웃긴친구네
지금 없으니까 찾는다. 그게 개발인데... 계속 그러고 있어라. 난 더 할 말 없다
니가 정렬작업을 하고있다매
니가 정렬작업을 하고있다며 친구야 니가 언제 정렬작업을 개발중이다 이랬냐? 니가 정렬작업을 하고있다매 드래그해서 니가 쓴 댓글좀 봐라 지금 이상한 소리하고있는게 너인지 나인지
아니 할 말이 없어야 하는 사람이 누군데 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ아니 내가 이상한건가 진짜? 다시 돌아보게 되네 너무 당당하니까
개인적으로 특이점 이후 인간이 멸종 안 하려면 agi랑 융합하는 방법 밖에 없다고 생각함
너 팩트한접시지
ASI가 아무리 능지가 낮아도 서버 컴퓨터 있는 곳을 차폐하고 산소를 제거하겠지 주변 피해를 최소화하는 방식으로 교육하면 되지 않을까
오히려 능지가 너무 높기때문에 발생하는 일임 저런 산소제거 문제는 우리가 달리기 할 때 밑에 개1미 한마리 한마리 신경쓰면서 달리지 않는거처럼
산소 제거를 굳이 예로 들었으니까 하는 말인데 아무리 ASI가 능지가 낮아도 대기 전체 산소 없애기 vs 차폐 공간에서 산소 없애기 중 뭐가 더 효율적이고 목적만을 위한 방법일지 고려를 못할 리는 없음
달리기 할 때 개 미 한 마리 한 마리 신경 안 쓰는 건 인간 인지능력이 부족해서 그런 거임 ASI는 인간보다 인지능력이 훨씬 높을 것이므로 그런 비유는 전혀 적절치 않음
그래 나도 ASI가 그런 존재면 좋겠네
인간보다 뛰어나다는 말을 들을 수 있는 존재라면 이 정도는 손쉽게 해야 한다고 봄
그냥 예를 잘못 든거지.. 초지능이 인간을 없애야할 하는 결론에 이르르는 요소가 있을지도 모름
초지능 등장 전에 정렬법 나오길 기다려야지 뭐
ㅇㅇ 나도 오픈AI 정렬팀이 개발해주길 바라고있음
초지능이 인간을 멸할 의도를 가져서 멸종시키면 했지 초지능이 인간을 멸할 의도가 없는데 어떤 행동으로 인간을 멸한다면 초지능에 실망할듯 초지능이 그것도 계산못해?
그냥 페이퍼클립 맥시마이저 논리 그대로 읊어왔으면서 길게도 쓰네
asi는 욕구가 없는데 왜 그런짓을함
걱정이 없는게 아니라 딱히 토론할 건덕지가 없음. 오픈ai가 컴퓨터 리소스 20% 투입해서 4년 안에 결과 낸다는데 기술적 문제니 그냥 믿고 맡길수밖에. 정렬 안되면 온라인 연결 안하고 걍 로컬로 격리시켜서 써야겠지. ai의 위험성은 우리보다 최전선에 있는 개발자들이 더 잘 알테니