검색엔진 소스코드 같은거 볼 수 있는 방법 없나요?

[익명(121.64)]

데이터베이스랑 자연어처리 이런거 배우려면 어떻게 하나요

[똥쟁이(223.62)]

루씬 해봐.

[섹스마스터(223.62)]

구글 들어가서 오른쪽버튼 누르면 소스 보기 있는데 그걸로 구글 소스코드 다 털림

[익명(121.64)]

ㄴ 그건 검색엔진이랑 관련 없지 않나요

[섹스마스터(223.62)]

진지충 십극혐

[섹스마스터(223.62)]

검색의 a to z는 인덱스임

[섹스마스터(223.62)]

인덱스를 잘 만들고 처리하기 위해선 형태소 분석, n-gram, PMI, Word2vec 등을 쓰면 좋음. 여기에 클러스터링도 쓸수 잇고

[섹스마스터(223.62)]

형이 진지충 불쌍해서 알려준다 으휴

[섹스마스터(223.62)]

비슷하게 이미지 검색도 이미지에서 특징점 뽑고(가장 기초적으론 sift부터) 메트릭 계산하는거 짜고 이런 식으로 동작해

[익명(121.64)]

ㄴ 검색마스터님 감사드립니다... 일단 정리하고 나중에 또 물어봐야겠네요

[섹스마스터(223.62)]

아 그리고 저 위에 내가 미친놈처럼 써놧는데 ngram -> PMI -> word2vec은 발전순서라서 다 같이쓰진 않고 저중에 잘되는거 태스크특성에 따라 쓰는게 보통임

[섹스마스터(223.62)]

형태소 분석은 꼭 해야 하고 더 하면 좋은건 normalization(스펠링 에러같은걸 고쳐서 정규화된걸로 바꾸는것)인데 이는 데이터가 많으면 유사도(PMI, Word2vec) 로 처리하거나 초보적으로는 에딧디스턴스 봐서 하면 돼

[섹스마스터(223.62)]

인덱스 관리 및 개발 능력이 검색엔진 제1의 기술이라 봐도 과언이 아니니까 아무튼 열공하고와라

[익명(121.64)]

ㄴ 감사합니다! 시멘틱 검색은 뭔가요? 그리고 구글이 남다른건 인덱스 양이랑 알고리즘인가요?

[27.1(27.1)]

엘라스틱서치 공부하면 됨

[섹스마스터(223.62)]

구글은 사실상 검색 엔진이 아니라 QA머신 아니냐 질문에 대한 답을 내어준다는 느낌이라서.. 아마 그리고 시맨틱 검색이란 용어가 이걸 가리키는 걸까야