(아기질문)

[익명(feat2001)]

텍스트 데이터를 학습시킬려면 문자를 벡터화해야한다는데

우리가 쓰는 언어를 [1,0,1] 이런식으로 나타내는게 벡터화야? 토큰어쩌고 하는데 어렵네

[깃허브(pythonx)]

나.. 이 질문글이 이해가 안된다;;

[익명(feat2001)]

[익명(feat2001)]

그 무슨 인공지능에게 텍스트데이터를 학습시킬려면 데이터처리를 해서 벡터화시키라는데

[깃허브(pythonx)]

컴퓨터랑 대화하려면 0과 1로 이뤄진 기계어로만 가능한 게 맞는데.. 벡터화나 토큰이 언급되는 건 무슨 이유인지 모르겠어..

[익명(77.111)]

깃허브야 너좀 착한거같구나

[1515(114.199)]

이샛키는 딥러닝하고 컴퓨터이론하고 섞어서 말하노 ㅋㅋ씨발

[익명(feat2001)]

[1515(114.199)]

이모티콘 좆같노.. ; 그냥 영어단어는 한 15만개정도 되는데 그걸 다 구별하기 위해서 000000001~11111111까지 분류해놓고 빈도파악해서 다음단어가 뭐 나올지 예측하는정도임

[1515(114.199)]

그래서 구글이 좆사기임 데이터량이 씨~~빨 너무 많고 하루종일 공부하니깐 결국 gpt같은게 탄생한거

[익명(feat2001)]

그럼 영어말고 한국어도 가능한가??

[1515(114.199)]

한국어도 가능은 ..하지 근데 문법도 좆같고 뛰어 쓰기도 좆같고 애시당초 구글코리아 데이터량이 너무적음 영어는 딱 구분이 가능하잖음 띄워쓰기 ㅆㅅㅌㅊ라...

[익명(feat2001)]

[헬마스터(supersaver)]

맞는거같음