요즘 머신러닝이 많이 뜨는 건 사실이고
Multi Layer Perceptron 이니 뭐니 하면서
뇌의 구조를 컴퓨터가 모델링한 것이다 라고 이야기들 하는데
이건 제한적인 진실이다.
애초에 머신 러닝의 이론적 기반이 Bayesian 통계인데
Bayesian 통계를 자세히 들여다 보면
결국 이건 Prior, Posterior Distribution 이 있고
그 사이에 Likelihood 라는 주어진 모델 파라미터에 independent 한 놈이 있어서
Posterior ~= Prior * Likelihood
라는 공식이 성립하게 되고,
여기서 모델 파라미터가 단일 갯수거나 손으로 꼽을 수 있는 갯수라면 그냥 Model averaging 써서 해결하면 되지만
파라미터 갯수가 너무 커서 어떤 파라미터의 부분집합이 최적인지 알 수 없을 때 MCMC를 보통 쓴다.
예를 들어
영화평점에 관한 파라미터(IMDB, Rotten Tomato 레이팅, 관객 수, 출연 배우 수상경력 등등)가 수백개가 된다면
부분 집합의 갯수만 해도 2^n(parameter) 즉 2의 지수승 개의 집합을 모두 검증해야 하기 때문에
이것을 하지 않고도 최적 모델을 추출해 낼 수 있는 프레임워크가 바로 MCMC(마르코브 연쇄 몬테 카를로) 인 것이다.
이것에 이론적 기반을 두고 있는 과거 머신러닝 모델들이 있었는데
대표적인 것이 바로 RBM 되시겠다.
사실 Gradient descent 방법으로 최적 모델 파라미터를 찾아내는 딥 러닝의 이론적 기반은 거의 MC 시뮬레이션에 근거를 두고 있다고 봐도 무방하다.
그리디하지만 빠르기 때문
이런 것들을 잘 알고, shortcominng 이 무엇이며 그것을 어떻게 극복할 수 있을지는
통계학에 대한 profound 한 knowledge 가 있어야 한다.
사람들이 그냥
김성훈 교수 강좌 보고, CS 231N 보면 되요!
라고 말들 하는데 나는 그 사람들이 과연 전문가인지 의심이 든다.
베이지언 통계와 머신 러닝과의 관계는
알고리즘과 현대적 프로그램의 개발 사이의 관계와 사뭇 다르기 때문이다.
후자는 몰라도 할 수 있는 것이지만
전자는 모르면 전문가가 될 수 없기 때문이다.
실제로 구글의 데이터 사이언티스트들은 거의 다 베이지언 통계학자라고 봐도 무방하다.
그리고 그 사람들은 머신러닝 뿐만이 아니라 다른 통계학적 기법들도 모두 어느 정도 다 알고 있다.
데스크에 주어지는 일은 자신이 열심히 판 분야의 것이 항상 아닐 수도 있기 때문에
머신 러닝의 기법을 아는 것 보다는 통계학 전문가가 되는 것이
오히려 딥 러닝을 이용해서 프로페셔널하게 일을 할 수 있는 능력을 가지는 지름길이다.
수박 겉핥기로는 아무것도 할 수 없다
반례: decision tree 계열 AI - return 0;
머신러닝 수박 겉핥아보니까 아웃풋 효율을 좋게 하려면 인풋데이터를 통계학적으로 잘 분석해서 전략적으로 집어넣어야하더라
아웃풋 효율 보다는 새로운 논문을 접했을 때 이해 능력과 구현능력이 중요한 거지.
솔직히 AI 짜려면 지금 리그레션, 클래시피케이션 정도의 초등적인 모델이 다가 아니라는 걸 누구보다 잘 알템데
그리고 디시젼 트리도 프루닝 할려면 카이제곱 검정 해야하잖이
커헠은 말문이 막혀 더이상 아무말도 잇지 못했다...
이게 바로 뉴비들이 보면 먼소린지 하나도 모르겠다는 글이구나
사실 그 두강좌만 본다고해서 머신러닝을 다 안다고 하는거면 말이 안되죠. 그걸 맛보기로 보고 다 들을 수 있다면 더 깊게 들어가도 된다고 생각합니다. 비록 본인은 깊게 들어가보지 못했지만요ㅠㅠ
쉬운길로 들어간다고 해도 떨어져 나가는 사람이 있고, 어려운길로 들어간다고 해도 떨어져 나가는 사람이 있고
볼츠만머신이랑 마르코프 샘플링으로 학습알고리즘 최적화할때 통계가 많이 쓰였지, 요즘같이 학습알고리즘이며 모델이 정형화되가는 상황에서 구지 통계적 지식을 필수로 배워야한다는 생각은 안듬
윾동이 이런 말 하는것도 웃기고 이제 막 공부하는 입장에서 말하는것도 웃기고 꽤 오랜 시간 지난 글에 덧글 다는것도 웃긴데 나처럼 머신러닝 키워드로 검색하다가 들어오는 사람 있을것 같아서 덧글 답니다. 애초에 그 두 강좌는 거의 맛 보기고 글쓴 분 말씀처럼 제대로 하려면 좀 배워야됨 맛보기하라고 갖다논걸로 공부하고 그런 애들을 채용해가는 회사도 간혹 있다는게 신기할따름
ㄴ 간혹이 아니라 열에 아홉임