디시 댓글은 어떻게 크롤링함?

[익명(dakrs0817)]

자바 Jsoup으로 크롤링하고 있는데

다 돼는데 댓글은 안불러와지네

브라우저에서 f12로 보면 div.comment_box라고 확실히 있는데 왜 크롤링으론 안되는거임?

[익명(182.230)]

댓글은 usertxt ub-word 아님?

[익명(dakrs0817)]

그게 comment_box 안에 있음 근데 크롤링하면 이거조차 없음

[익명(118.235)]

왜냐면 동적으로 로딩하기때문

[익명(182.230)]

동적로딩이랑은 상관없는거같은디? 이미 나와있는 댓글은 크롤링 가능하잖음

[익명(182.230)]

ㄹㅇㄹㅇ

[익명(211.178)]

html 파일로 저장해서 있는거 확인했음 ?

[익명(211.178)]

없으면 동적으로 DOM 조작해서 넣는거라 가져온 html 가지고만 해선 안됨

[익명(211.178)]

동적 로딩방식이라면 그냥 맘편하게 DC API 쓰는거 추천

[익명(211.178)]

https://gall.dcinside.com/mgallery/board/view/?id=api&no=102
여기
코틀린인사이드 쓰셈

[익명(182.230)]

이번학기 수업시간에 배웠는데 새록새록하네

[익명(211.248)]

비동기처리 해야할듯