빅데이터쪽으로 직무변환 할까함

[컴덕(211.246)]

웹싸개

화면싸개

API싸개 하고있는뎅

내가이번에 데이터랑 서버만졌는데

왜 울회사 영포티가 절대권력이냐면

울회사 데이터를 다잡고있음

신입들보면서도 느꼈지만 코딩은

빡대가리 아닌이상 디버깅 몇번하면

아무나갖다놔도 시간지나면 다하는데

데이터는 그시스템을 다이해해야만

할수있는 작업이라 단순 웹싸개들이랑 달라

서버도그렇고 깃로그가없기때문에

따라서 배울수가 없음

전회사 팀장님도 데이터가 힘이랬음

- dc official App

[익명(119.197)]

서울 상위권 대학교이면 도전 하고 아니면 안 하는게 좋을듯

[컴덕(211.246)]

ㅜㅜ 그래도 웹싸개 경력은있으니까 안되면 다시웹으로 돌아가면되자누 - dc App

[익명(119.197)]

ㄴㄴ 그런게 아니라 사람인 모집 공고 보면 빅데이터나 AI 상위권 대학 컴공학사나, 석박 아니면 안 뽑아서 말했음 기분 나쁘면 ㅈㅅ

[컴덕(211.246)]

ㄴㄴ복잡한 계산 같은건 박사들이하겠지 나같은사람은 갖다쓰는거지뭐 - dc App

[익명(119.197)]

그런건 안 찾아봐서 모르겠는데 모집공고 한번 둘러보고 빅데이터 공부할지 말지 생각 해봐도 좋을듯

[ㅠㅡㅠㅡㅠ(125.186)]

빅데이터 쪽 하나도 모르고 있는 거 같은데.. 좀 위험해보인다. 너가 생각하는 데이터는 무슨 일을 하는 사람임?

[컴덕(211.246)]

걍 수집하고 모으고 가공하는거 - dc App

[ㅠㅡㅠㅡㅠ(125.186)]

근데 데이터 자체가 크다보니까 효율, 자원 이런거 고려하는게 백 보다 훨씬 민감함. 과정 자체를 병렬로 처리하는데 그 개수가 수백대~수천대이니까. ORC vs Parquet vs avro 등 포맷 구조 차이는 알아? 통신 프로토콜도 HTTP/1.1 vs HTTP 2.0 등 차이는 알아..? DB 자체도 RDB 뿐 아니라 BigQuery, NoSQL도 Column wide, Document 등등 각각의 특징 장단점 모두 다 알아..? 스트리밍 파이프라인을 예로 들때 재대로된 서비스면 파이프라인 하루에 수십 TB가 흘러 이런거 파이프라인 고려하는 게 단순히 그냥 툴 써야지 하는 수준이 아니여..;

[컴덕(211.246)]

나 해본거 마이그레이션 파이썬 엘라스틱서치밖에 없오 - dc App

[컴덕(211.246)]

크롤링이랑... - dc App

[ㅠㅡㅠㅡㅠ(125.186)]

확실히 어렵고 전문성이 있는데 애초에 데이터 엔지니어 여긴 컴공과 최상위권 애들이 가는곳이야. 그냥 흉내만 내는 곳은 이런거 고려 안하고 대충 툴만 사용하겠지만 이런 곳은 어차피 백이랑 차이 없을 정도 전문성임. 그리 만만하게 볼 직무 아닌데 뭔가 쉽게 생각하는 거 같아서 걱정스러웠음. 내가 말한 거 이외에도 RDB로 예로 들때 데엔은 테이블이 아니라 데이터 블록 단위로 생각할 수 있어야함. 인덱스가 뭔지 조인이 어떻게 이뤄지는지 NL vs Merge sort vs Hash 등. 어떤 조인을 해야하고 데이터 웨어하우스 디자인 패턴 등등 ㅈㄴ 어려워

[ㅠㅡㅠㅡㅠ(125.186)]

그래서 신입 절대 안써 여긴. 커리어 생각하고 옮기려는 거 같은데 재대로 커리어 쌓고 싶으면 최소 3년~5년은 cs 딥하게 공부해야해

[컴덕(211.246)]

ㅇㅇ이번에 걍찍먹만했는데 함공부해보지뭐 회사다니면서 하는건데 안되면 계속 웹싸개하면되징 - dc App

[익명(59.10)]

데이터 엔지니아 하는데 주말 야간 출근 자주함 - dc App

[컴덕(211.246)]

ㅠㅠ쉽지않노 주말은 보장해줘야됨 - dc App

[익명(59.10)]

서비스하는거 데이터 작업하는데 평일 낮에 거의 안함 - dc App

[ㄹㄹ(106.101)]

주말 출근을 왜함? 데엔 ㅈㄴ 병신같은 조직 다니면 이케 됨.

[익명(59.10)]

서비스 하는 고객사에서 데이터를 주말에 바꿔달라 하는데 주말에 가야지 카카오도 주말 출근 하는걸로 하는데 어디 다니시남 ㅋㅋㅋ - dc App

[ㄹㄹ(106.101)]

서비스 하는 고객사? SI인가보네; 데이터를 왜 바꿔 도대체? 데엔은 보통 사내 데이터 제공으로 인사이트 및 ML을 위한 직무인데

[익명(223.38)]

데이터 사고 파는 일은 대기업해서도 하는일이거 데엔들도 자주하는일인데... 뭐 아는만큼 보이는거지 - dc App

[ㄹㄹ(106.101)]

사고 파는 일 있다고 해도 뭔 데이터를 주말에 바꿔달라고해.. 데이터가 그렇게 쉽게 바꿔서 줄 수 있는 거냐

[익명(59.10)]

데이터 바꾸는데 왜 오래 걸림? 우리 판매하는 데이터 상품 원본만 바꿔치기 하는건데 혹시 데이터 엔지니어 아는척하면서 기본적인 것도 모르느 보네 ㅋㅋ - dc App

[익명(59.10)]

취업하고 일을 해봤어야 할지 말을 말자 ㅋㅋ - dc App

[ㄹㄹ(106.101)]

니보다 기본기 훨씬 뛰어날껄 ㅋㅋㅋ 딱 봐도 어디 개병신같은 기업 다니나보네 은행이니? 일 하는 꼬라지 보면 서비스가 그따위로 일하지 않을껀데

[익명(59.10)]

기본기 애째구 취업이나 해 그 기본기로 ㅋㅋㅋㅋ - dc App