[일반] Ai 대해서 몇가지 의문(벤치, 스케일)

[익명(1.237)]

1. 벤치마크 지표랑 실성능의 괴리감 

2. 스케일링 법칙은 유효한가

[익명(175.118)]

2는 그록보니깐 확실함

[ㅇㅇ 2(112.218)]

난 오히려 한계를 보이는거 같은데 상방이 있는 느낌임 체감적 증가하는거 같은데

[익명(gjtthf)]

1. 벤치에 문제가 있거나 모델이 벤치에 과적합됐거나 2. 그록3보면 유효한듯

[ㅇㅇ 1(183.108)]

1. 벤치마크가 ㅈㄴ 여러개인데 보통 livebench 이건 공신력 있음 그건 api가 나오고 하루안에 나옴 2. ㅇ

[익명(210.113)]

벤치는 의미있고 스케일은 검증받아야

[익명(today0734)]

벤치 딱 하나만 보지말고 여러개 종합적으로 보면 결국 난 벤치결과가 사람들 실사용후기 이런거보다 훨씬 신뢰할만했음

[ㅇㅇ 3(112.186)]

2는 가성비가 안나오는거임

[ㅇㅇ 3(112.186)]

https://m.dcinside.com/board/thesingularity/593701
중간에 내용있음