[일반] ㅋㅋㅋ 클로버가 GPT기술 안썼다고?

[익명(revwind0)]

트랜스포머쪽 PE랑 SA는 무조건 갖다써야될 기술인데

gpt2 토크나이저랑 모형 안갖다 썼다고 저래 씨부리나 ㅋㅋㅋ

[익명(115.137)]

점찍으면 아니랑꼐요

[TPU(eltlrotlrzh)]

설마 positional encoding이랑 self attention을 PE랑 SA로 줄여서 쓴거야? 대단하다 증말...