형들 크롤링한 파일들 DB화시킬때

[익명(112.159)]

보통어떤식으로 DB화시키고 인덱싱하는지

나와있는 소스나 파일없나요.

그냥 사용유형에 맞게 적절히 파싱해서 DB화 시켜야하나요?

[c(125.143)]

니가 말하는 \'DB화\'를 정의해봐

[익명(112.159)]

검색엔진에 사용할수있게 분류할때 어떤식으로 분류해서 저장하는지 궁금해서욤, 태그내부의 텍스트들만 따로 정리해서 자장하는지 분할해서 저장하는지 등등

[c(125.143)]

태그를 다 없애고 어절 단위로 역인덱스를 만드는게 가장 간단할꺼 같은데

[익명(112.159)]

그럼 걍 html파싱모듈써서 노드별로 긁어와서 텍스트긁은다음 어절별로 인덱처리하면되겠구나