그럼 진짜 모순인걸까, 모순처럼 보이는걸까?
선형충 전유물 분탕 시나리오
AI가 재귀개선시작 -> AGI, ASI 달성 -> AI를 특정 기업, 국가에 귀속하고 그들만을 위해 사용함
-> AI 디스토피아 도래 -> AI 가속반대, 러다이트 운동
특이점 가속주의 전유물 시나리오
AI가 재귀개선 시작 -> AGI, ASI 달성 -> AI를 일부 기간동안 특정 기업, 국가에 귀속함.
-> 하지만 AI는 과학 발전과 에너지 혁명 등 인류를 위한 기술로 활용됨
-> AI 유토피아 도래 -> 천국 완몰가 입갤
물론 전자 시나리오가 가능성이 0이라고 확언 못하지만
적어도, 짱개나 러시아같은 독재국가에서 지능폭발이 트리거 되는게 아니라면
인간 역사가 겪어온 기술 발전사를 생각해보면
후자 시나리오의 가능성이 더 높다고 생각됨
"AI를 특정 기업, 국가에 귀속하고 그들만을 위해 사용함" 이거 가지고는 전유물이라고 보통 안하지 이건 전유물 이라기보단 핵의 논리에 가까움 미친 분탕 전유물충들은 부자들 권력가들만 ai혜택누리고 서민들은 뒤지나 마나 상관없다 이기~ 이러는 애들
그치
이건 ai가 사람보다 못하단 전제하에 인간이 ai를 컨트롤한다는게 성립하는데, 초지능이 진심으로 사람보다 열등하다고 생각함? 중학생이 자기 부모를 완벽히 통제하는게 가능할까?
초지능 전까지 통제하려는 시도는 가능할것같음 그리고 AI 디스토피아 시나리오에서 항상 말하는것처럼 정렬안된 상태로 재귀개선이 트리거되는것도 어떤 재앙을 초래할지 모르잖어
정렬오류는 진짜 위험한게 맞고 그때문에 전셰계 모든 두뇌들이 이거 해결하려고 머리 싸메는중