수학적으로 설명 불가능한데 성능좋은 아키텍처 수두룩하잖아
그냥 수학이랑 상관없이 성능이 결정되는거고 그냥 그런 알고리즘들 중에서 수학적으로 설명 가능한것들이 껴있는거 아닐까?
diffusion,vae도 그냥 아다리가 딱 맞았던거고
여기 Transformer가 가장 좋은 아키텍쳐인 이유를 수학적으로 설명할 수 있는 사람 있음?
수학적으로 설명 불가능한데 성능좋은 아키텍처 수두룩하잖아
그냥 수학이랑 상관없이 성능이 결정되는거고 그냥 그런 알고리즘들 중에서 수학적으로 설명 가능한것들이 껴있는거 아닐까?
diffusion,vae도 그냥 아다리가 딱 맞았던거고
여기 Transformer가 가장 좋은 아키텍쳐인 이유를 수학적으로 설명할 수 있는 사람 있음?
개인적으로 CNN, attention은 수학적으로 설명하는 게 이치에 안 맞는다고 생각함 애초에 UAT에 의해 MLP로도 무엇이든 해결할 수 있음을 보장받고도 새로운 아키텍처를 개발할까? 인간의 뇌 구조와 연관되어 있다고 생각함 CNN, transformer는 인간이 실제 사용하는 시각 인지, 언어 인지 구조와 빼닮았기 때문에 뛰어난 거임
그걸 수학적으로 기술하는 건 개인적으로 별 의미가 없다고 생각함