[일반] 데이터전처리를 전문적으로 하는 분야가 있어?

[tpptpp(tpptpp)]

말그대로 분석하기 편하도록 난잡한 데이터를 정갈하게 만들어 주는 분야가 있는지 궁금함

그게 데이터 마이닝인가?

- dc official App

[익명(118.235)]

그게 데이터 엔지니어지

[tpptpp(tpptpp)]

난 데이터 마이닝에서 배우는 분류분석 군집분석 이런게 전처리인줄 알았는데 ㅋㅋㅋㅋ - dc App

[익명(121.166)]

데이터 엔지니어

[빅데이터맨(datadaisuki)]

데엔 재밌음

[tpptpp(tpptpp)]

수학+통계학과가 들어가기엔 배워야 할게 너무 많을거 같은데.... - dc App

[익명(dlwlrms)]

데이터 엔지니어링은 대부분 cs쪽 사람들이 하긴 할걸 통계 백그라운드 있으면 도움이 될지는 잘 모르겠지맘 - dc App

[ㅍㅂㅂㅂ(223.62)]

전처리 요구 수준이 어떠냐에 따라서 데이터 엔지니어가 할수도 있는데, 이경우는 데이터가 정말 복잡하고 더러워서 전처리 자체가 모델링에 들어가는 걸 말하는 건 아님. 그건 결국 도메인 전문가나, 데이터 사이언티스트가 해야함. 데엔은 그렇게 해둔 전처리를 이제 대량으로 편하게 굴릴 수 있게 파이프라인 짜서 효율적으로 저장하고 관리하는데 더 중점을 두는 식임

[ㅍㅂㅂㅂ(223.39)]

데이터 마이닝, 데이터 사이언스 등으로 말하는게 니가 원하는 분야인게 맞음. 데싸 가도 원래 딥러닝 모델 같은거 짜는데 쓰는 시간보다 전처리에 들이는 시간이 압도적으로 길어... 사실상 이부분이 진짜 데싸 실력을 가르는 척도임.

[tpptpp(tpptpp)]

답변 ㄸㅋ ㅋㅋㅋㅋ 데이터 마이닝 관심이 생겨서 알아보는 중인데 안 그래도 인기있는 분야라서 대학원 연구실 들어가기도 어렵다고 하드라 ㅠㅠㅠ - dc App