[📪정보] Co scientist 말말말

[익명(121.178)]

-에이전트들은 웹 검색, 개방형 데이터베이스, 알파폴드2와 같은 전문 AI 모델 피드백 등을 비롯한 여러가지 도구들을 활용할 수 있다.

-가설에 대한 평가는 자동 평가되어 Elo로 기록된다. 따라서 신뢰할 수 있는지 문제가 남아있는데, 이 Elo 점수가 과학 벤치마크인 GPQA 점수와 상관관계가 있는 것을 보여줬다.

<Elo 점수가 오를 수록 GPQA 정확도가 높아짐>

-더 많은 컴퓨팅 시간을 투입할 수록 Elo 점수는 계속해서 증가하며, 이는 아직까지 포화의 증거가 거의 보이지 않았다.

<더 많은 계산 시간을 할당할 수록 Elo 점수가 계속해서 증가>

"계산 자원이 증가함에 따라 반복적으로 재귀 개선이 가능하다는 점에서,

인류 건강, 의학 및 과학의 중요한 난제 해결을 가속화할 가능성을 시사한다."

-Co scientist 아키텍쳐는 LLM에 구애받지 않으므로 앞으로 추론 모델 및 기반 모델 발전의 혜택을 크게 누리게 될 것이다.(현재는 Gemini 2.0 기반)

-o3-mini와 r1과 같은 최신 추론 모델은 Elo 평가에서 비추론 모델들에 비해 높은 성능을 기록했다.

-곧 출시될 스탠포드 대학 협력 연구원들의 보고서에서 Co scientist가 발전 시킨 연구 성과(간 섬유증에 대한 연구)가 자세하게 공개될 것이다.

-현재는 신뢰할 수 있는 테스터들을 모집하는 중이다.

[이세이미야케(jkwarawara)]

[제프리힌튼(faucet7834)]

“포화의 증거가 없다“ 미챳누

[낭만적특이점(next1842)]

[수직(player5319)]

[익명(merge3772)]

[디시콘발사대(fcbjsjmu1t9f)]

[less(boxing8245)]

[ㅇㅇ 1(110.10)]

[멘토스(gblzvhbddpj2)]

[익명(amuse5437)]

[익명(210.97)]

ㅋㅋㅋ스캐일만 커지면 레이팅 계속 높아진다는거네ㅋㅋㅋㅋ

[건방진암컷(thor2018)]

[점심밥(yield0917)]

[천사다천사(jjtheman999)]

재귀개선이 벌써 된다니 기적이다 - dc App

[산시야(logical6358)]