당신의 예측이 맞았다! 대단하다! 이 글의 백배 강력한 모델이라는 것은 당신이 전에 말씀하신 Gobi=GPT5=125조 파라미터의 모델인가요? 자율 에이전트이고, 지속적 학습도 앞서 말씀하신 키워드에 들어있었는데요.

Jimmy Apples: 네.
125 T < 그 부분에 대해서는 100% 확신이 없어서 삭제했습니다. 그것은 드문 경우다
Gobi는 GPT5로 2024년 초중반에 나올 예정이다.
나는 모델의 크기와 이름에 대해 이야기하는 것을 좋아하지 않는다, 왜냐하면 상황이 바뀌기 때문이다.
Gobi/GPT5의 크기를 모르겠다.
비디오 생성, 음악, 에이전트, 연속 학습, 이것은 openai가 가지고있는 것이지만 gpt5에 포함될지 여부를 확실히 말하는 것은 조심스럽다.
openai가 정부와 사적으로 논의한 내용은 모르겠지만, 어쩌면 2024년 모델에 모든 것이 다 들어갔을 수도 있고, 부분적으로 들어갔을 수도 있다.

Bioshok: 감사합니다.
항상 빠른 답변 감사합니다.
말씀하신 AGI는 추론 비용에 문제가 없다고 생각하시는지, OpenAI의 유출된 이미지에서 계산 효율이 100배 향상되었다는 내용이 있었는데요, 학습 효율을 말하는 건가요? AGI의 추론 속도가 궁금한데요, 학습 효율을 말하는 건가요?

Jimmy Apples: 잘 모르겠습니다.
잘 모르겠지만, 아직 추론 비용 문제가 남아있는 것 같다. 가끔 gpt4를 조정하면서 품질이 떨어지는 것을 볼 수 있다.
개발 당일에는 더 좋은 아이디어가 나올 수 있을 것이다.

Bioshok: .

답변 감사합니다.
GPT5는 2022/10에 훈련이 끝났다고 들었는데, 아래 트윗은 잘못된 것인가요? 아니면 차세대 모델 훈련에 H100을 50만 대를 사용할 것인가?

Jimmy Apples: 1개 모델.
한 모델을 훈련하는 데 50만 개의 H100을 사용한다고요?
이번 달에 H100을 대량으로 확보했지만 몇 대인지는 알 수 없다. 더 많은 사용자와 수요를 지원하기 위한 것일 수도 있다.

Bioshok.
아니면 devday에서 예상할 수 있는 사항이 있으면 알려주세요. 그러면 주1가가 오를 텐데, devday에 대해 잘 모르면 상관없습니다!

Jimmy Apples: 네.
사실 저는 자세히 알려고 하지 않습니다. 그것은 별로 중요하지 않다. 운이 좋으면 샘이 에이전트에 대해 이야기할 텐데, 아마도 더 저렴한 gpt4나 API 액세스에 관한 이야기일 것이다.
그들은 내부적으로 64k 컨텍스트 모델을 가지고 있지만 계산을 위해 아직 공개하지 않았다. 그것은 놀라운 일이 될 수도 있지만, 아마도 더 많은 사람들에게 32k의 액세스를 제공할 것이다.

Bioshok: .

FeltSteam 을 아시나요? 그는 Arrakis를 환각이 남아있다고 말했는데, 이것은 당신이 말하는 24년 초에서 중반까지 나올 모델을 말하는 것인가, AGI는 환각이 해결되었다고 말했는데, Gobi(이름은 모르겠지만)는 해결되지 않았다고 말했나?

Jimmy Apples: 네, 그렇습니다.
내가 알기로는 펠트스팀은 다른 사용자(펠트스팀이 아닌)가 디스코드에서 이야기하는 것을 듣고 9월에 처음으로 아라키스에 대해 이야기하기 시작했다. 그가 무엇을 알고 있는지는 잘 모르겠지만, 많은 사람들이 공개적으로 이야기하는 것은 좋은 일이다.
나는 작년 말부터 이 프로젝트(Gobi와 Arrakis)에 대해 알고 있었다.
Gobi는 내년 초에 등장할 예정이다. 현재로서는 Arrakis에 대해 너무 많이 예측하고 싶지 않다(변경될 가능성이 높기 때문에), Gobi는 환각이 상당히 줄어들겠지만, 100% 해소되지는 않을 것이다.

Bioshok:고비 출시는 내년 초? 내년 여름이 아닌가요?
Jimmy Apples: 확실하지 않습니다.
확실하게 말할 수는 없지만, OpenAI가 구글이나 Anthropic의 압력을 느낀다면 더 빨리 갈 것이다. 압력이 없다면 내년 중반이 될 가능성이 높다.
하지만 새로운 정부의 행정명령을 받기 전에 이미 알고 있었다. 아마도 OpenAI는 앞으로 더 신중하게 행동할 것이다.