[📪정보] AI그림 튜링테스트: 사람들은 AI그림을 더 좋아한다

[익명(183.107)]

출처는 밑에 있음. 원본 사이트에는 그림도 같이 있으니 참고하는거 추천함

**


AI 아트 튜링 테스트, 여러분의 성적은 어땠나요?

2024년 11월 20일

지난달, 저는 11,000명에게 50장의 그림을 인간의 예술작품과 AI 생성 이미지로 분류하는 과제를 제시했습니다.

원래는 르네상스, 19세기, 추상/현대, 디지털의 네 가지 스타일에서 각각 인간 작품 5개와 AI 작품 5개씩, 총 40개를 계획했습니다. 하지만 지역 AI 아티스트들로부터 매우 훌륭한 작품들을 많이 받게 되어, 약간의 조정을 거쳐 50개로 늘렸습니다.

최종 세트에는 도메니키노, 고갱, 바스키아 등의 작품과 함께 다수의 디지털 아티스트와 AI 취미가들의 작품이 포함되었습니다.

1: 대부분의 사람들이 AI 아트를 식별하는 데 어려움을 겪었습니다

선택지가 두 개(인간 또는 AI)였기 때문에, 무작위로 찍었다면 50%의 점수를, 완벽한 실력이라면 100%의 점수를 얻었을 것입니다.

테스트의 중앙값은 60%로, 우연의 확률보다 약간 높았습니다. 평균은 60.6%였죠. 참가자들은 예상보다 과제가 어려웠다고 답했습니다(1-5 척도에서 중앙값 4).

이것이 얼마나 의미 있는 결과일까요? 저는 각 카테고리에서 최고의 작품만을 포함시켜 테스트를 최대한 공정하게 만들려고 했습니다. 인간 작품의 경우 시간의 검증을 거친 명망 있는 작품들을, AI 작품의 경우에는 글자가 엉망이거나 손이 기형적이거나 하는 등의 결함이 있는 많은 제출작들을 제외했습니다. 하지만 이는 실제로 많은 AI 이미지들이 이러한 오류를 포함하고 있는 현실을 대표하지는 않습니다.

2: 대부분의 사람들은 스타일로 작품을 판단하지 않을 수 없었습니다

테스트 참가자들에게 다양한 스타일의 인간 작품과 AI 작품이 포함되어 있다고 경고했고, 단순히 유화처럼 보인다고 해서 인간의 작품으로, 디지털 이미지처럼 보인다고 해서 AI의 작품으로 판단하지 말라고 당부했습니다.

하지만 응답자들은 이 경고에 주의를 기울이지 않았습니다. 그들의 저조한 성과의 한 이유는 스타일별로 결과가 뭉쳐있었기 때문입니다(실제로는 각 스타일이 두 카테고리에 거의 균등하게 분포되어 있었음에도 불구하고).

"인간 편향" 항목은 테스트 참가자들이 각 카테고리의 작품을 인간의 작품이라고 판단한 비율을 나타내며, 이는 정답이 항상 50%인 상황으로 정규화되었습니다. 즉, AI와 인간의 19세기 예술 작품이 50대 50으로 섞여 있는 경우, 그들은 잘못되게 75대 25로 인간 작품이라고 추측했고, 디지털 아트의 경우 50대 50 비율을 단 31%만이 인간의 작품이라고 잘못 추측했습니다.

인상주의 작품에서 여러분의 직관은 최악이었습니다. 데이터셋에 있는 유일한 실제 인간의 인상주의 작품(폴 고갱의 '오스니 마을 입구')을 제외한 모든 인상주의 그림을 인간의 작품이라고 판단했죠.

마찬가지로, 압도적 다수가 몇몇 인간이 만든 디지털 이미지를 AI의 작품이라고 투표했습니다:

3: 대부분의 사람들은 인간의 예술보다 AI 예술을 약간 더 선호했습니다

참가자들에게 50개의 작품 중 가장 마음에 드는 작품을 선택하라고 요청했습니다. 가장 많은 사랑을 받은 두 작품 모두 AI가 만든 것이었으며, 상위 10개 중 60%가 AI 작품이었습니다.

이것이 잘못 선택된 그림들 때문일 수 있을까요? 가장 사랑받은 AI 이미지들 대부분이 인상주의 작품이었습니다. 우연히도 제 데이터셋에서 이 카테고리는 AI 작품이 다소 지배적이었기 때문에, 이는 단순히 인상주의 그림에 대한 선호도(또는 이 분야에서 AI의 특별한 적성)를 반영하는 것일 수 있습니다. 하지만 제가 포함시킨 인간의 인상주의 그림('오스니 마을 입구', 위 참조)은 실제로 꽤 인기가 없었습니다. 그리고 모든 인상주의 그림을 제외하더라도, 비록 인간 작품이 상위 1, 2위를 되찾긴 했지만, AI 작품이 여전히 3위를 차지했고, 기계들은 여전히 새로운 상위 10개 중 40%를 차지했습니다.

4: AI를 싫어한다고 생각했던 많은 사람들조차 AI 작품을 선호했습니다

참가자들에게 순수하게 예술적인 관점에서 AI에 대한 의견을 물었습니다(즉, AI가 인간 예술가들의 작품을 부당하게 표절하고 있는지 같은 사회적 문제에 대한 의견과는 별개로). 의견은 나뉘었습니다: 33%가 부정적 의견, 24%가 중립적, 43%가 긍정적이었습니다.

AI 예술을 완전히 혐오한다고 답한 1,278명의 사람들(1-5 리커트 척도에서 1점)조차도, 어떤 것이 AI 작품이고 어떤 것이 인간의 작품인지 모르는 상태에서는 여전히 인간의 그림보다 AI 그림을 선호했습니다(그들이 가장 좋아하는 작품으로 선택한 1위와 2위가 여전히 AI 작품이었고, 상위 10개 중 50%가 AI 작품이었습니다).

이 사람들이 반드시 자기기만에 빠져있는 것은 아닙니다. 아마도 그들은 똑같은 DALL-E 스타일로 그려진 형편없는 AI 아트들의 더미를 헤쳐 나가는 것에 좌절감을 느끼는 것일 수 있으며, 스타일의 다양성을 위해 엄선된 이 AI 아트 데이터셋은 그들이 불만을 느끼는 부분을 포착하지 못했을 수 있습니다.

5: 하지만 일부는 진정으로 우리와는 다른 차원에 있을 수 있습니다

저는 초기 버전의 테스트를 베타 테스트해달라고 한 친구("Ilzo"라는 핸들명으로 디지털 아트를 하는)에게 부탁했습니다. 그녀는 제가 잘 위장됐다고 생각한 AI 그림들을 정확하게 식별해내는 능력으로 저를 놀라게 했습니다. 제가 특별히 좋아했지만 그녀가 특히 조잡하다고 느낀 Piotr Binkowski의 폐허가 된 관문 그림에 이르러서는, 저는 그녀에게 설명을 요구했습니다.

그녀가 말하길:

"실제 그림에서 디테일이 있을 때는, 그 디테일들에 논리가 있어요. 저는 이 '고대의 문'이 '겉보기에는 세밀하지만, 모든 디테일이 형편없고 일관성이 없는' 장르에 속한다고 생각해요. 빨간색과 파란색 페인트, 그리고 빈 돌은 마치 낡은 느낌을 주려는 것 같지만, 이것이 어떤 스타일의 낡은 버전이어야 하는지가 명확하지 않아요. 모든 페인트가 있었다면 마치 컨테이너 더미처럼 보였을 것 같은데, 그것도 컨테이너가 두 가지 색상으로만 만들어졌다면 말이죠. 장식이 있긴 한데, 그것들이 어떤 것처럼 보이지도 않고, 뭔가의 낡은 버전처럼 보이지도 않아요.

왼쪽, 중앙, 오른쪽에 서로 어울리는 원반들이 있는데, 크기도 다르고, 색상도 다르고, '무언가로 해석되는 디테일'도 없고 깔끔한 매끄러움도 없어요. 자세히 보지 않았다면 이집트 그림을 연상시키는 것들이 있어요. 왼쪽 기둥에는 일종의 문이 있고 그 위에 거대한 문 위쪽 장식이 있어요. 왜죠? 누가 알겠어요? 오른쪽 기둥에는 없는데, 있어야 할 것 같은데 말이에요. 대신 오른쪽 기둥에는 2.5개의 아치가 새겨져 있는데 그냥 힘없이 희미해지네요. 문 바로 위 부분의 문제점들은 어떻게 설명해야 할지 모르겠어요. 일종의 리듬을 만들다가 주의가 산만해져서 깨져버려요. 위쪽으로 튀어나온 이 반쯤의 사각형들이 빨간색이어야 하나요 파란색이어야 하나요?

음, 뭐 그렇다고 치죠. 위쪽 테두리가 끝까지 튀어나와 있나요? 음, 대부분은요. 인간 예술가들은 비밀 기술이 있는데, 모든 디테일이 어떠해야 하는지 모른다면 모호하게 처리한다는 거예요. 그리고 당신은 그것이 모호하다는 걸 알 수 있고 '흠, 이거 흥미로워 보이네, 어 잠깐, 이거 형편없네'라고 생각하게 되지 않아요."

그리고 나중에, 대화가 더 철학적인 방향으로 흐른 후:

"AI 아트의 문제 중 하나는 비예술가들이 보기에는 좋아 보이지만 자세히 들여다보면 형편없어 보이는 것들을 만들어낸다는 점이에요. 그래서 결국 예전에는 좋았던 검색 결과들이 형편없는 것들을 걸러내야 하는 상황이 되어버렸죠.

모든 사람이 5센트 정도의 비용으로 영양적으로는 적절한 식사를 만들 수 있게 되었다고 상상해보세요. 하지만 그것들은 모두 수크랄로스나 인공 포도향이 너무 많이 들어간 괴상한 재수화 분말이에요. 그리고 당신의 친구들이 이제 음식을 다루기가 너무 쉬워져서 저녁 식사 모임에 당신을 더 자주 초대하기 시작하는데, 거의 매번 그들은 당신에게 수크랄로스 단백질 쉐이크를 대접하죠.

(아마도 그들은 거의 음식을 먹어본 적이 없어서 그럴까요? 완벽한 비유는 아니네요.) 게다가 사람들이 이것을 음식의 미래라고 부르면서 요리사들은 쓸모없어졌다고 말한다고 상상해보세요. 아마 당신은 '와, 당신이 즐길 수 있는 음식에 쉽게 접근할 수 있게 되어 기쁘고, 가끔 저에게도 편리하지만, 이건 좀 미치게 하네요'라고 말할 것 같아요.

이것이 AI 아트에 대한 예술가들의 광기와 관련이 있다고 생각해요. 물론 많은 부분이 경제적 불안감 때문이고 저는 취미가이기 때문에 프로가 될 수 있었는데 그러지 못한 것 같은 느낌이 들지 않아서 공감할 수 없지만요."

그녀의 이론은 데이터에서 어느 정도 지지를 받습니다. 평균적인 참가자의 점수는 60%였지만, AI 아트를 싫어하는 사람들은 64%, 전문 예술가들은 66%, 그리고 전문 예술가이면서 AI 아트를 싫어하는 사람들은 68%를 기록했습니다.

최고 점수는 98%(50개 중 49개)였으며, 11,000명 중 5명이 이를 달성했습니다. 11,000명이라는 표본 크기에서도 운만으로 이런 높은 점수를 얻는 것은 거의 불가능합니다.

저는 운과 실력의 기여도를 분리해내고 이 사람들이 재시험에서 어떤 점수를 받을지 예측할 만큼의 수학 지식은 없습니다. 하지만 꽤 인상적으로 느껴지네요.

그래서 아마도 일부 사람들은 작은 부적절함에 대한 예술가적 안목이 있어서 그것이 그들을 미치게 만들기 때문에 AI를 싫어하는 것일 수 있습니다.

예술에 대해 우리는 무엇을 배웠나요?

앨런 튜링은 인간의 30%가 AI와 인간을 구별하지 못한다면, 그 AI는 '통과'했다고 볼 수 있다고 제안했습니다. 이 기준으로 보면, AI 아티스트들은 여유 있게 테스트를 통과했습니다; 평균적으로 인간의 40%가 각각의 AI 그림을 인간의 작품으로 오인했기 때문입니다.

이것이 AI에 대해 무엇을 말해주나요? AI가 예술을 잘한다는 것 같네요. 저는 이것이 인간에 대해 말해주는 바에 더 관심이 있습니다.

인간들은 계속해서 AI 아트가 형편없는 졸작이라고 주장합니다. 하지만 동시에, 라벨을 벗겨내면 그들 중 많은 이들이 AI 아트와 역사상 가장 위대한 예술가들의 작품을 구별하지 못합니다. 저는 이런 사람들에게 최대한 공정하려고 노력했고, 아마도 그들이 그저 DALL-E 하우스 스타일의 확산에 대한 좌절감을 표현하는 것일 수 있다고 제안했습니다. 그리고 아마 일부는 정말로 미세한 부조화를 발견하는 놀라운 안목을 가지고 있을 수 있습니다.

하지만 세련되고 명망 있는 사람들을 숭배하고, 너무 새롭거나 낮은 지위를 가진 것, 또는 평범한 사람들이 너무 쉽게 접근할 수 있는 것을 깎아내리는 것 - 이 두 가지 충동 모두 당신 앞에 있는 그림의 실제 내용과는 연결되지 않은 채로 - 역시 매우 인간적인 것 같습니다.

마르셀 뒤샹은 유명하게도 예술이 무엇인가에 대한 사람들의 관점에 도전하기 위해 소변기를 미술관에 전시하려 했습니다. 관리부는 이를 거부했지만, 뒤샹이 마지막에 웃게 되었죠: 2004년, 예술 전문가들의 설문조사에서 그것이 20세기에서 가장 영향력 있는 예술작품으로 평가되었습니다. 예술은, 예술이 무엇인가라는 우리의 개념 자체에 도전할 때 가장 의미 있는 것 같습니다.

이런 기준으로 볼 때, 저는 샘 알트만이 21세기의 가장 위대한 예술가라고 제안합니다.

**

요약:

마지막에 기습 알트만숭배는 뭐여 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ

[익명(183.107)]

https://www.astralcodexten.com/p/how-did-you-do-on-the-ai-art-turing?r=67y1h&utm_campaign=post&utm_medium=web

[익명(axsj03n3edvq)]

지금도 결과물이 같을 때 사진 보단 그림을 더 쳐주고 디지털보단 손그림을 더 쳐주는거 보면 노동에 대한 가치를 높게 생각하는거같음 - dc App

[ㅁㄱㅌㅊ(39.122)]

재밋게봣음

[익명(110.10)]

노벨 예술상 ㄷㄷ

[MoonChild(aowlr2001)]

[익명(182.218)]

ai 그림 자체가 싫은게 아니라 그 특유의 양산형 그림체로 개씹노잼 뇌절이나 쳐하는게 꼴보기 싫음

[익명(119.70)]

이게 맞는듯

[빙냥이ㄱㅇㅇ(6zd2cxvc44h4)]

[불신(zerobase14)]

와 98% 구분 ㄷㄷ

[익명(qpalzm0147)]

인간들은 아이언하트, 콘코드 같은거 만드니까 당연히 ai 선호하지