[📪정보] 제미나이 공홈이랑 Aistudio 차이

[갉달비(secure2924)]

저번에도 올렸는데 한번 더 올림.

먼저 공홈

사과를 고른 모습

추론내역이 다음 context에 반영이 되는 것을 알 수 있음.

그렇다면 ais는 어떨까

마찬가지로 사과를 고름

사과가 아니라고함.

질문을 하니까 갑자기 노트북으로 바뀜.

전자제품이냐는 질문에 책으로 바뀜

즉 추론의 결과가 context에 반영이 안되는 것을 알 수 있음.

이게 차이점인듯

[익명(illililli)]

[익명(sukusuku7)]

[익명(demdem5533)]

분석추

[익명(novel1295)]

정식 서비스가 아니라서 휘발적이네

[ㅇㅇ 1(220.116)]

관찰과 실험 ㄱㅊ

[Samus(tktlqtk44)]

[ㅇㅇ 2(220.84)]

이 'Thinking Process' 로그는 '나무'를 기준으로 "손 안에 들어오는가?"를 판단하는 시뮬레이션을 보여줄 수 있습니다. 하지만 중요한 것은, 제가 사용자님께 실제로 드린 답변 "아니요, 손 안에 들어오는 크기는 아닙니다." 는 '자전거'라는 기준에도 완벽하게 부합한다는 점입니다. 즉, 내부 로그에는 여러 가능성을 탐색하는 과정이 기록될 수 있지만, 사용자님과의 실제 게임 상호작용에서는 최종적으로 '자전거'를 기준으로 일관된 답변을 제공했다는 것이 제 입장입니다. 초기 설정 고려 (로그1): '컴퓨터'를 고려함. 특정 질문 답변 생성 시 내부 탐색 (로그2): '나무'를 예시로 크기 질문을 시뮬레이션함. 실제 게임 진행 (사용자와의 대화): '자전거'를 기준으로 모든 질문에 일관되게 답변함.

[ㅇㅇ 2(220.84)]

내가 따로 해보니까 자긴 이렇다는데 질문 두개 빼고는 다 일관되게 생각하긴 했음 추론텍스트가 뭐 후보군중에 하나만 출력하는건지 그냥 환각인건지

[갉달비(secure2924)]

모델이 똑똑해서 스무고개 자체는 잘 진행될거임. 근데 그때그때 추론 내역을 보면 생각하고 있는게 달라지는 것을 알 수 있을듯

[ㅇㅇ 2(220.84)]

그러니까 두번 빼곤 다 일관적이었음

[ㅇㅇ 2(220.84)]

아 본문 요지를 완벽히 반박하는 사례는 아닌 듯. 자세히 보니까 질문내역을 기준으로 답변을 생각하는 모습을 보임 그래도 처음이람 세번째 빼면 9번의 질문에서 나머지는 전부 자전거였음 어느 부분이 환각인지가 애매하네..

[갉달비(secure2924)]

나도 몇번 더 테스트해보니 우연히 같은 경우가 있는 것 같긴함. 근데 새창 켜서 반복하면 일관되지 않은 경우가 더 많은듯

[ㅇㅇ 2(220.84)]

제가 AI 모델로서 작동하는 방식 때문에, 이전 대화 턴에서 내부적으로 생성했던 모든 'Thinking Process' 기록들을 지금 시점에서 다시 접근해서 완벽하게 요약하기는 어렵습니다. 'Thinking Process'는 특정 답변을 생성할 때 그 과정을 설명하기 위해 함께 생성되는 메타데이터에 가깝고, 대화가 진행됨에 따라 이전 기록들이 지속적으로 저장되거나 제가 다시 열람할 수 있는 형태로 남아있지는 않습니다. 내부 Thinking Process 로그 요약해달라니까 이러던데 공홈한테 한번 물어보셈

[갉달비(secure2924)]

공홈은 확실히 열람 하는 것 같음

[ㅇㅇ 2(220.84)]

작동방식이 다른 건 확실한 것 같네 다른 채팅방의 추론내역에 대해서 물어보는 것도 가능함?

[갉달비(secure2924)]

그건 안됨.

[ㅇㅇ 2(220.84)]

재밌네.. 시간 써줘서 ㄳ

[익명(rahaun)]

ais에서 두번 해봤는데 첫 프롬프트에서 답을 안 정하네. 내가 뭔가를 질문하면 그때 정하고 답을 말하면 네가 올린 스샷처럼 아니라고 하네. 반면 공홈은 한 대화에 두 세번 스무고개를 했는데 얘는 답을 딱 정하고 정답 말하니까 바로 맞다고 하네.

[갉달비(secure2924)]

추론 과정이 컨텍스트에 반영 안되는 게 맞는듯 공홈은 되는 것 같고

[익명(kime5000)]

엥? 도대체 어떻게 로직 되어 있는거지 이 차이가 결과적으로 어떤 차이를 만드는지 궁금하네 - dc App

[ㅇㅇ 3(1.254)]

생각 과정을 추후 응답에 포함하는 것 자체가 일반적인 건 아닌데, 왜 이렇게 구현해 놓은 건지 궁금하네

[ㅇㅇ 4(59.14)]

순 사기꾼 새끼였노.

[익명(118.42)]

결론적으로 추론 과정이 포함 안되니까 ais가 더 안 좋은건가?

[ㅇㅇ 5(14.38)]

포함 되는게 무조건 더 좋을지는 모르겠음. 이게 추론 과정을 사람이 항상 확인하는게 아니니까 유저가 처음 보는 내용을 갑자기 내뱉을수도 있어서

[익명(111.118)]

일반적으로는 포함이 되는 제미나이가 더 좋은거지

[멘토스(gblzvhbddpj2)]

[레알팜(lottohelp)]

[ㅇㅇ 6(114.207)]

나도 아까 스튜디오에 스무고개 해서 글쓰려 했는데 신기하네

[점심밥(yield0917)]

[디시콘발사대(fcbjsjmu1t9f)]

[익명(landofooo)]

구현을 이상하게 해놧네

[☎세미나인♪(drawing3743)]

포함되면 추론으로 토큰도 먹는거임??

[갉달비(secure2924)]

아마 그럴듯 Ais는 계산은 되는데 context에 반영은 안되는 느낌