[질문] 파일 읽기 속도가 언어간에 차이가 크나요?

[익명(147.47)]

Tab으로 구분된 column이 20개짜리인 ascii인데
String이랑 숫자랑 섞여있거든요...
니가 해보면 되잖아라고 하면 할 말 없긴 한데
100GB짜리라서;


검색해봤는데 뭐 2-3기가짜리 정도까지만 글이 잘 보이네요..

[익명(125.129)]

100기가나 되면 메모리 매핑 고려하셈

[익명(147.47)]

조언 감사합니다 찾아볼게요 64b는 만족합니다

[익명(125.129)]

참고로 64bit여야 할 것임

[익명(59.13)]

C++

[익명(222.98)]

그럼 그부분만 c로하자 - dc App

[익명(39.7)]

위 두 분도 의견 감사합니다

[파블로프_(pavlov2)]

100GB면 읽고 쓰기 자체는 언어가 문제가 아닐듯 OS가 처리해야하는 부분이 대부분의 시간을 차지할텐데.. 그런데 읽은 걸 가공하는 작업은 또 언어차이가 날텐데 그거야 다른 사람이 알길이 없지

[브닌떼(172.58)]

이거임

[김민성태팬클럽회장(thecoqproofassistant)]

[익명(175.223)]

전체를 싹 돌면서 풀파싱해야됨?

[익명(49.174)]

복사 할거 아니면 파일을 읽기만 하진 않을거잖음 그게 진짜 코스트 아닐까

[Riey(rerereq)]

IO 자체는 비슷할수도 있는데 파싱은 무조건 차이남

[브닌떼(172.58)]

Io 읽는 부분만 말하는거 같은데

[black7375(223.62)]

반복적 구문분석(Iterative Parsing)이 필요할 것 같은데

[전붕이1(crmerry0409)]

읽기 속도 자체는 별차이없을건데

[익명(39.7)]

윗 분들 답변 참고해서 공부해보겠습니다 감사합니다