정확도가 52.56에서 87.18로 상승
[일반] gpt 4 turbo 성능 루머 [재업]
dd(rladmstn78)
2023-11-07 13:57
추천 27
댓글 9
다른 게시글
-
구글은 좀 아라사카 같은 느낌임. [5][일반] 덕구덕구(itzylove1234) | 23.11.07추천 0
-
지미가 이번 오픈 컨퍼런스도 유출 했었음?[일반] 익명(174.177) | 23.11.07추천 0
-
협회 힘 약한 곳부터 서서히 대체된다 [1][일반] 익명(49.142) | 23.11.07추천 0
-
특붕이들은 일단 자기가 하는 일부터 대체 해보자 ㅇㅇ[일반] 익명(59.14) | 23.11.07추천 0
-
약사 대체는 그냥 지금도 충분히 가능하잖아 [1][일반] 익명(49.142) | 23.11.07추천 0
-
근데 약사는 기술적으로 충분히 대체할수있음? [1][일반] 달나라로켓(skflzlaqjffl) | 23.11.07추천 0
-
오히려 법무법인 이런데서 활용하지 않을까?[일반] 대가리꽃밭(seunghoonator) | 23.11.07추천 0
-
AI로 일거리가 줄어들면서 잘리는 식으로 전개될 것임 [1][일반] 트라야누스(14.54) | 23.11.07추천 5
-
애매한 이륙이면 쉽게 대체될 일 없다니까[일반] 익명(49.142) | 23.11.07추천 0
-
긋데아직 ai도 고지능자가 써야 [6][일반] 익명(acw952017) | 23.11.07추천 0
정확도가 뭐 말하는거임? 정보 정확도?? 개소리하는거 줄여주는건가!!
ㅇㅇ 추론성능 말하는 거 이게 ai성능 말하는 거라 보면 됨 근본이란 거지 추론성능이 늘면 환각은 줄어들겠지?
정확도로 보통 지표 많이 뽑음. 그냥 능지랑도 관련있고 환각이랑도 관련있고 다 얽혀있다고 생각하셈
언어모델은 평가가 힘들거야. 예를들어서, 나는 알트만이다. 이게 정답이라고 치자. 근데 난 알트만이다. 이건 글씨가 좀 다르니까 점수를 깎아야 하나? 의미는 맞으니까 놔둬야 하나? 혹은 나는 알트만이지. 이건? 나는 알트만. 이건 2글자가 없으니까 좀 더 틀린걸까? 어쨌든 꽤 복잡한 문제라서, 언어모델은 단순하게 성능 평가가 안 됨. 그래서 되게 다양한 평가를 가지고 논의 함. 물론, 그래도 어떤 지표든 높게 나오면 개선되고 있구나 생각해도 되긴 하지. 아, 단점은 정확도가 단어 정확도면, 입력 데이터랑 비슷한 답변. 즉 경직된 답변을 내놓으면 지표가 좋아질수도 있고. 창의적인 답을 하면 내려가기도 함. 쪼끔 복잡해.
모드 통합만으로 성능이 뿜어져나오나
35점 ㄷㄷㄷㄷㄷㄷㄷ
대충 숫자주고 딸치는거노 설명이 없노 - dc App